需求人群:
"目标受众为开发者、研究人员以及对自然语言处理和人机交互感兴趣的技术爱好者。ShowUI适合他们因为它提供了一个强大的工具来开发和研究基于视觉和语言的交互系统,可以应用于自动化测试、智能助手等多个领域。"
使用场景示例:
- 使用ShowUI模型自动化网页操作,如填写表单、点击按钮。
- 利用ShowUI进行图像识别和基于指令的界面导航。
- 将ShowUI集成到自定义的应用中,以提供更自然的用户体验。
产品特色:
- 视觉-语言-行动模型:结合视觉输入、语言理解和行动预测。
- GUI自动化:用于图形用户界面的自动化操作。
- 模型训练与部署:支持在huggingface平台进行模型训练和部署。
- 多模态输入:支持图像和文本的多模态输入。
- 行动预测:能够预测用户指令对应的界面操作。
- 界面操作:支持点击、输入、选择等多种界面操作。
- 模型微调:提供微调代码和指令,以适应特定应用场景。
使用教程:
1. 安装依赖:通过pip安装requirements.txt中列出的依赖。
2. 克隆仓库:使用git clone命令克隆ShowUI的代码仓库。
3. 启动界面:运行app.py启动ShowUI的图形界面。
4. 加载模型:使用Qwen2VLForConditionalGeneration类加载预训练的ShowUI模型。
5. 界面操作:通过发送包含系统提示、图像和查询的messages列表来执行界面操作。
6. 结果展示:通过draw_point函数在图像上标记操作结果,如点击位置。
7. 微调模型:根据需要对模型进行微调,以适应特定的应用场景。
浏览量:112
最新流量情况
月访问量
4.93m
平均访问时长
00:06:29
每次访问页数
6.10
跳出率
36.08%
流量来源
直接访问
54.82%
自然搜索
31.76%
邮件
0.04%
外链引荐
11.31%
社交媒体
1.86%
展示广告
0
截止目前所有流量趋势图
地理流量分布情况
中国
12.56%
德国
3.93%
印度
9.82%
俄罗斯
5.43%
美国
18.51%
一个用于GUI视觉代理的视觉-语言-行动模型。
ShowUI是一个轻量级的视觉-语言-行动模型,专为GUI代理设计。它通过结合视觉输入、语言理解和行动预测,使得计算机界面能够以更自然的方式响应用户的指令。ShowUI的重要性在于它能够提高人机交互的效率和自然性,特别是在图形用户界面自动化和自然语言处理领域。该模型由showlab实验室开发,目前已在huggingface平台发布,供研究和应用。
开源的端到端视觉语言模型(VLM)基础的GUI代理
CogAgent是一个基于视觉语言模型(VLM)的GUI代理,它通过屏幕截图和自然语言实现双语(中文和英文)交云。CogAgent在GUI感知、推理预测准确性、操作空间完整性和任务泛化方面取得了显著进步。该模型已经在ZhipuAI的GLM-PC产品中得到应用,旨在帮助研究人员和开发者推进基于视觉语言模型的GUI代理的研究和应用。
自然语言工作流自动化
DryMerge允许您使用简单的自然语言指令自动化内部团队的重复工作流程。我们的聊天机器人听取流程描述并自动处理实现,无需工程工作。自动化运营、销售、支持等工作流程,无需提交工单并等待工程师。灵活的软件集成,连接Slack、Gmail、Notion等SaaS工具。AI聚焦用户体验,通过聊天理解工作流的人际和微妙的性质,提供准确的自动化。无与伦比的产品分析,持续改进自动化质量,提供可视化的长时间运行自动化监控。[定价:免费试用]
基于UI-TARS(视觉语言模型)的GUI代理应用,可使用自然语言控制电脑。
UI-TARS-desktop 是由字节跳动开发的一款桌面客户端应用,它基于 UI-TARS 视觉语言模型,允许用户通过自然语言与计算机进行交互,完成各种任务。该产品利用先进的视觉语言模型技术,能够理解用户的自然语言指令,并通过屏幕截图和视觉识别功能实现精准的鼠标和键盘操作。它支持跨平台使用(Windows 和 macOS),并提供实时反馈和状态显示,极大地提高了用户的工作效率和交互体验。目前该产品在 GitHub 上开源,用户可以免费下载和使用。
自然语言智能助手,实现自动化办公
iMean - AI智能助手是一款基于自然语言理解和生成AI技术的办公自动化插件。它能够通过自然语言执行各种任务,与各种网页和软件无缝集成,无需连接。您可以使用iMean来自动发送电子邮件、安排日程、在Jira中分割任务等。它能够理解自然语言并与系统交互完成任务,帮助您提高工作效率。
自然语言处理模型
LLaMA Pro 是一种用于大规模自然语言处理的模型。通过使用 Transformer 模块的扩展,该模型可以在不遗忘旧知识的情况下,高效而有效地利用新语料库来提升模型的知识。LLaMA Pro 具有出色的性能,在通用任务、编程和数学方面都表现出色。它是基于 LLaMA2-7B 进行初始化的通用模型。LLaMA Pro 和其指导类模型(LLaMA Pro-Instruct)在各种基准测试中均取得了先进的性能,展示了在智能代理中进行推理和处理各种任务的巨大潜力。该模型为将自然语言和编程语言进行整合提供了宝贵的见解,为在各种环境中有效运作的先进语言代理的开发奠定了坚实的基础。
AI自然语言处理模型
Powerups AI是一款基于人工智能技术的自然语言处理模型,具有极高的语言理解和生成能力。该模型可以用于文本生成、语言翻译、对话生成等多个领域,可以帮助用户快速生成高质量的文本内容,提高工作效率。
7B参数的大型语言模型,提升自然语言处理能力
OLMo 2 7B是由Allen Institute for AI (Ai2)开发的一款7B参数的大型语言模型,它在多个自然语言处理任务上展现出色的表现。该模型通过在大规模数据集上的训练,能够理解和生成自然语言,支持多种语言模型相关的科研和应用。OLMo 2 7B的主要优点包括其大规模的参数量,使得模型能够捕捉到更加细微的语言特征,以及其开源的特性,促进了学术界和工业界的进一步研究和应用。
先进的自然语言处理模型
MiscNinja是一种先进的自然语言处理模型,具有强大的文本生成和理解能力。其优势在于可以应用于多种领域,如智能对话系统、文本摘要、自动翻译等。定价根据使用情况而定,定位于为开发者和企业提供强大的自然语言处理解决方案。
基于特定模型的量化大型语言模型,适用于自然语言处理等任务。
该模型是量化版大型语言模型,采用4位量化技术,降低存储与计算需求,适用于自然语言处理,参数量8.03B,免费且可用于非商业用途,适合资源受限环境下高性能语言应用需求者。
Mistral是一个开源自然语言处理模型
Mistral是一个小型但强大的开源自然语言处理模型,可适用于多种使用场景。Mistral 7B模型性能优于Llama 2 13B模型,拥有自然的编程能力和8000个序列长度。Mistral采用Apache 2.0许可证发布,易于在任何云端和个人电脑GPU上部署使用。
自然语言编写测试,AI自动执行
Shortest是一个基于Playwright构建的测试框架,它允许用户用自然语言编写测试用例,并由AI自动处理执行。这种测试方法简化了测试流程,提高了开发效率,特别适合需要持续集成和自动化测试的软件开发项目。Shortest通过与GitHub的无缝集成,使得测试用例的管理和版本控制更加便捷。
自然语言计算的无限画布
tldraw computer是一个实验性项目,由tldraw团队开发,旨在提供一个无限的画布,用户可以在上面创建连接组件的工作流,以生成和转换数据。该产品使用多模态语言模型作为运行时来执行指令,代表了自然语言处理和工作流自动化的前沿技术。它的重要性在于能够简化复杂任务,提高工作效率,并促进创新。tldraw computer背景深厚,由tldraw SDK的开发者打造,该SDK用于无限画布应用,并且与流行的免费协作白板tldraw.com相关联。产品目前免费试用,主要面向需要数据生成和工作流自动化的专业人士和企业。
强大的语言模型,支持多种自然语言处理任务。
GLM-4-32B 是一个高性能的生成语言模型,旨在处理多种自然语言任务。它通过深度学习技术训练而成,能够生成连贯的文本和回答复杂问题。该模型适用于学术研究、商业应用和开发者,价格合理,定位精准,是自然语言处理领域的领先产品。
免费开源的自然语言浏览器自动化CLI,用纯英文指令驱动真实浏览器
BrowserBash是一款免费开源的自然语言浏览器自动化命令行工具(CLI),由The Testing Academy开发,创始人是Pramod Dutta。该工具通过AI代理根据纯英文目标驱动真实浏览器进行自动化操作。它支持使用免费的本地模型(如Ollama)或免费的OpenRouter模型,无需API密钥和信用卡。其重要性在于降低了浏览器自动化测试的门槛,让非专业编程人员也能轻松进行浏览器自动化测试。产品价格为免费,定位是帮助开发者和测试人员更便捷地进行浏览器自动化测试。
一个完全开源的大型语言模型,提供先进的自然语言处理能力。
MAP-NEO是一个完全开源的大型语言模型,它包括预训练数据、数据处理管道(Matrix)、预训练脚本和对齐代码。该模型从零开始训练,使用了4.5T的英文和中文token,展现出与LLaMA2 7B相当的性能。MAP-NEO在推理、数学和编码等具有挑战性的任务中表现出色,超越了同等规模的模型。为了研究目的,我们致力于实现LLM训练过程的完全透明度,因此我们全面发布了MAP-NEO,包括最终和中间检查点、自训练的分词器、预训练语料库以及高效稳定的优化预训练代码库。
快速构建自然语言处理应用
GradientJ是一个用于测试、部署和管理自然语言处理应用的平台。它基于大型语言模型如GPT-4,提供快速构建NLP应用的能力。用户可以使用GradientJ开发自定义的文本生成、问答系统、聊天机器人等NLP应用。GradientJ提供简单易用的接口和工具,让开发者能够快速上手并实现自己的用例。定价方案灵活,适合个人开发者和企业用户。
数据标注外包服务,为计算机视觉或自然语言处理模型提供数据标注和标签
为什么选择 Innovatiana 进行数据标注外包?Innovatiana 是一家致力于为您的人工智能需求提供有意义和有影响力的外包服务的公司。我们在马达加斯加招聘并培训我们自己的数据标注团队,为他们提供公平的薪水、良好的工作条件和职业发展机会。我们拒绝使用众包实践,为您提供有意义和有影响力的外包服务,并透明地提供用于人工智能的数据来源。我们的任务由一位英语或法语经理负责,以实现紧密的管理和沟通。我们提供灵活的价格,根据您的需求和预算定价。我们重视数据的安全性和机密性,并采取最佳的信息安全实践来保护数据。我们的数据标注专家经过专业培训,为您提供高质量的标注数据,用于培训您的人工智能模型。
CogAgent-9B-20241220是基于视觉语言模型的GUI代理模型。
CogAgent-9B-20241220模型基于GLM-4V-9B双语开源VLM基础模型,通过数据收集和优化、多阶段训练以及策略改进,在GUI感知、推理预测准确性、动作空间完整性和任务泛化性方面取得了显著进步。该模型支持双语(中文和英文)交互,并能处理屏幕截图和语言输入。此版本已应用于ZhipuAI的GLM-PC产品中,旨在帮助研究人员和开发者推进基于视觉语言模型的GUI代理的研究和应用。
开源自然语言生成模型
OLMo是一个开源的自然语言生成模型,由Allen AI研究所开发,基于Transformer架构,可用于生成高质量的英文文本。它具有生成长度可达4096个token的长文本的能力。OLMo-7B是目前公开的参数量最大的开源英文语言模型之一,拥有69亿参数,在多个英文NLP任务上的表现优于同类模型。它可用于文本生成、任务导向的微调等多种自然语言处理任务。
Python自然语言处理工具包
NLTK是一个领先的Python平台,用于处理人类语言数据。它提供了易于使用的接口,用于访问50多个语料库和词汇资源,如WordNet,并提供了一套文本处理库,用于分类、标记、解析和语义推理。它还提供了工业级NLP库的封装,并有一个活跃的讨论论坛。NLTK适用于语言学家、工程师、学生、教育者、研究人员和行业用户。NLTK可以免费使用,并且是一个开源的社区驱动项目。
视觉语言模型高效文档检索工具
ColPali 是一种基于视觉语言模型的高效文档检索工具,它通过直接嵌入文档页面图像的方式来简化文档检索流程。ColPali 利用了最新的视觉语言模型技术,特别是 PaliGemma 模型,通过晚交互机制实现多向量检索,从而提高检索性能。这一技术不仅加快了索引速度,降低了查询延迟,而且在检索包含视觉元素的文档方面表现出色,例如图表、表格和图像。ColPali 的出现,为文档检索领域带来了一种新的“视觉空间检索”范式,有助于提高信息检索的效率和准确性。
处理长文本的大型语言模型
LongLLaMA 是一个大型语言模型,能够处理长篇文本。它基于 OpenLLaMA,并使用 Focused Transformer (FoT) 方法进行了微调。它能够处理长达 256k 标记甚至更多的文本。我们提供了一个较小的 3B 基础模型(未经过指令调整),并在 Hugging Face 上提供了支持更长上下文的推断代码。我们的模型权重可以作为现有实现中 LLaMA 的替代品(适用于最多 2048 个标记的短上下文)。此外,我们还提供了评估结果和与原始 OpenLLaMA 模型的比较。
Stagehand 是一个 AI 网页浏览框架,可将 Playwright 扩展为自然语言自动化浏览器。
Stagehand 是一个创新的 AI 驱动的网页自动化框架,它通过自然语言处理技术,扩展了 Playwright 的功能,使开发者能够以更直观的方式自动化浏览器操作。这种技术的重要性在于,它降低了自动化脚本编写的门槛,让非技术用户也能轻松实现复杂的网页交互任务。Stagehand 的主要优点是其强大的自然语言理解能力,能够将简单的指令转化为精确的浏览器操作。它由 Browserbase 团队开发,目标是为开发者提供更高效、更智能的自动化工具。目前,Stagehand 是免费使用的,主要面向开发者和自动化测试人员。
vivo自主研发的智能语言理解模型
蓝心大模型是vivo自主研发的智能语言理解模型,具有70亿模型参数量,可以处理32K上下文长度。它基于260TB的多语言训练语料,拥有强大的语言理解能力,可以广泛应用于内容创作、知识问答、逻辑推理、代码生成等场景,持续为用户提供安全可靠的人机交互体验。该模型已通过严格的安全合规检测,输出结果安全合规。
高效的视觉编码技术,提升视觉语言模型性能。
FastVLM 是一种高效的视觉编码模型,专为视觉语言模型设计。它通过创新的 FastViTHD 混合视觉编码器,减少了高分辨率图像的编码时间和输出的 token 数量,使得模型在速度和精度上表现出色。FastVLM 的主要定位是为开发者提供强大的视觉语言处理能力,适用于各种应用场景,尤其在需要快速响应的移动设备上表现优异。
一个用于自然语言处理的先进模型
Meta-spirit-lm是由Meta公司开发的一款先进的自然语言处理模型,它在Hugging Face平台上发布。这款模型在处理语言相关的任务时表现出色,如文本生成、翻译、问答等。它的重要性在于能够理解和生成自然语言,极大地推动了人工智能在语言理解领域的进步。该模型在开源社区中受到广泛关注,可以用于研究和商业用途,但需遵守FAIR Noncommercial Research License。
基于代理的自动化系统,专注于网页自动化。
Agent-E 是一个基于 AutoGen 代理框架的系统,旨在自动化用户计算机上的操作,目前专注于浏览器内的自动化。它通过自然语言与网页浏览器交互,执行填写表单、搜索和排序电商产品、定位网站内容、管理播放设置、执行网络搜索、管理项目管理平台任务等操作。Agent-E 正在成长中,已经能够处理多样化的任务,但最佳任务是用户自行发掘的。
自然语言文本转表格工具
Textraction是一款自然语言文本转表格工具,能够将文本快速转换为表格,支持多语言,提供无限可能的实体提取,具有快速易用、自然语言描述等优势。定价根据使用量计费,适用于房地产、简历、客户支持、金融、产品列表、采购订单、教程等场景。
基于自然语言的本地浏览器端到端自动化测试工具,快速验证并发现深层错误
Kane CLI是TestMu AI(原LambdaTest)推出的一款用于测试的浏览器自动化代理工具。它的重要性在于为测试人员提供了一种无需复杂框架和选择器的自动化测试方式,利用自然语言即可实现端到端流程自动化。主要优点包括:可在本地浏览器运行,能实时验证每一步骤并返回测试结果;支持多环境测试,无需重复编写脚本;具备自动修复、智能等待和动态查询等功能,使测试更具弹性和可重复性;还能导出为原生Playwright脚本,方便进一步定制。价格方面,有免费套餐,也有19美元/月和99美元/月的付费套餐,企业用户可根据需求定制。该产品定位为帮助测试人员提高测试效率和准确性,增强发布信心。
© 2026 AIbase 备案号:闽ICP备08105208号-14