需求人群:
"该产品适用于机器人技术研究人员、人工智能开发者以及需要开发高度灵活人形机器人的企业和机构。它能够帮助他们快速实现复杂动作的迁移和优化,减少开发成本和时间。"
使用场景示例:
在IsaacGym到IsaacSim的迁移中,ASAP显著提高了机器人动作的流畅性和准确性。
在IsaacGym到Genesis的迁移中,ASAP通过残差动作模型优化了机器人的动态性能。
在真实世界的Unitree G1人形机器人上,ASAP实现了复杂动作的精准执行,如侧跳和踢腿。
产品特色:
通过模拟预训练实现运动跟踪策略
利用现实世界数据训练残差动作模型以补偿动态差异
实现模拟与现实物理的对齐,提升技能迁移效果
支持多种人形机器人平台,包括仿真环境和真实机器人
显著降低运动跟踪误差,提高动作的敏捷性和协调性
使用教程:
1. 在模拟环境中使用人类运动数据预训练运动跟踪策略。
2. 在现实世界中部署预训练策略,收集真实轨迹数据。
3. 基于真实数据训练残差动作模型,以补偿模拟与现实之间的动态差异。
4. 将残差动作模型集成到模拟器中,对预训练策略进行微调。
5. 将微调后的策略部署到现实世界中,实现敏捷的全身技能。
浏览量:2
ASAP是一种用于学习敏捷人形机器人全身技能的技术,通过模拟与现实物理对齐实现技能迁移。
ASAP(Aligning Simulation and Real-World Physics for Learning Agile Humanoid Whole-Body Skills)是一种创新的两阶段框架,旨在解决模拟与现实世界之间的动态不匹配问题,从而实现人形机器人的敏捷全身技能。该技术通过预训练运动跟踪策略,并结合现实世界数据训练的残差动作模型,显著提高了机器人在复杂动态环境中的适应性和协调性。ASAP的主要优点包括高效的数据利用、显著的性能提升以及对复杂动作的精准控制。该技术为未来人形机器人的开发提供了新的方向,尤其是在需要高度灵活性和适应性的应用场景中。
先进的人形机器人技术,助力人类实现潜力。
Apptronik是一家从德克萨斯大学奥斯汀分校的人类中心机器人实验室分离出来的公司,致力于开发下一代能够改变我们生活和工作方式的机器人。公司的产品线包括从外骨骼到仿人上半身、双足移动平台和独特的机器人手臂,这些产品能够举起超过自身重量的物体。这些经验和学习成果促成了Apollo——世界上最先进的人形机器人的开发。Apptronik的产品和技术不仅能够处理重复性任务,还能够丰富人类生活,体现了公司在创造以人为中心的解决方案方面的道德承诺。
具有人类级别精度的人工触觉传感器
Digit 360是由Meta FAIR发布的人工手指形状的触觉传感器,它能够以人类级别的精度数字化触觉。该传感器拥有超过18种独特的传感特性,允许研究人员结合使用各种传感技术或单独隔离信号进行深入分析。Digit 360在检测空间细节上达到了7微米,力量检测上达到了1毫牛,响应速度是人的30倍,为触觉传感技术树立了新的标准。
一种通过大型语言模型引导的模拟到现实世界转移策略,用于获取机器人技能。
DrEureka是一个利用大型语言模型(LLMs)自动化和加速模拟到现实(sim-to-real)设计的方法。它通过物理模拟自动构建合适的奖励函数和领域随机化分布,以支持现实世界中的转移。DrEureka在四足机器人运动和灵巧操作任务上展示了与人工设计相媲美的sim-to-real配置,并能够解决如四足机器人在瑜伽球上平衡和行走等新颖任务,无需人工迭代设计。
结合人工智能与塔罗牌智慧,提供个性化指导和每日运势预测
Soul Tarot 是一款创新的塔罗牌应用程序,将人工智能技术与塔罗牌的古老智慧相结合。它通过人工智能语音咨询、每日塔罗牌抽奖和幸运数字预测等功能,为用户提供便捷、深度、个性化的指导。该应用适合对塔罗牌感兴趣、希望通过神秘方式获得生活灵感的用户。它强调个性化和便捷性,用户可以随时随地获取塔罗牌的解读和建议,无需复杂的塔罗牌知识。
Taskek 利用人工智能帮助团队推进工作。
Taskek是一款基于人工智能的任务管理工具,旨在帮助团队高效推进工作。它通过智能算法优化任务分配和协作流程,提升团队生产力。产品主要面向需要高效协作和项目管理的团队,价格策略为免费试用,定位为中高端市场,适合追求高效和智能化工作方式的团队。其背景是现代工作环境中对高效协作和任务管理的迫切需求,通过AI技术解决了传统任务管理工具的局限性。
OmniHuman-1 是一种基于单张人像和运动信号生成人类视频的多模态框架。
OmniHuman-1 是一个端到端的多模态条件人类视频生成框架,能够基于单张人像和运动信号(如音频、视频或其组合)生成人类视频。该技术通过混合训练策略克服了高质量数据稀缺的问题,支持任意宽高比的图像输入,生成逼真的人类视频。它在弱信号输入(尤其是音频)方面表现出色,适用于多种场景,如虚拟主播、视频制作等。
MatAnyone 是一个支持目标指定的稳定视频抠像框架,适用于复杂背景。
MatAnyone 是一种先进的视频抠像技术,专注于通过一致的记忆传播实现稳定的视频抠像。它通过区域自适应记忆融合模块,结合目标指定的分割图,能够在复杂背景中保持语义稳定性和细节完整性。该技术的重要性在于它能够为视频编辑、特效制作和内容创作提供高质量的抠像解决方案,尤其适用于需要精确抠像的场景。MatAnyone 的主要优点是其在核心区域的语义稳定性和边界细节的精细处理能力。它由南洋理工大学和商汤科技的研究团队开发,旨在解决传统抠像方法在复杂背景下的不足。
LLMs 无需任何培训就能看见和听见
MILS是一个由Facebook Research发布的开源项目,旨在展示大型语言模型(LLMs)在未经过任何训练的情况下,能够处理视觉和听觉任务的能力。该技术通过利用预训练的模型和优化算法,实现了对图像、音频和视频的自动描述生成。这一技术突破为多模态人工智能的发展提供了新的思路,展示了LLMs在跨模态任务中的潜力。该模型主要面向研究人员和开发者,为他们提供了一个强大的工具来探索多模态应用。目前该项目是免费开源的,旨在推动学术研究和技术发展。
Deep Research 是 OpenAI 推出的一种新型智能研究工具,能够通过互联网进行多步骤复杂研究任务。
Deep Research 是 OpenAI 开发的智能代理功能,能够在短时间内完成复杂的多步骤研究任务。它通过互联网搜索和分析大量信息,为用户提供类似于专业分析师水平的综合报告。该工具基于即将推出的 OpenAI o3 模型优化,能够处理文本、图像和 PDF 文件,适用于需要进行深入研究的用户,如金融、科学、政策和工程领域的专业人士,以及需要个性化建议的消费者。Deep Research 的推出标志着 OpenAI 在开发通用人工智能(AGI)方面迈出了重要一步,有助于推动科学发现和知识创造。
OpenAI o3-mini 是 OpenAI 推出的最新高性价比推理模型,专为 STEM 领域优化。
OpenAI o3-mini 是 OpenAI 推出的最新推理模型,专为科学、技术、工程和数学(STEM)领域优化。它在保持低成本和低延迟的同时,提供了强大的推理能力,尤其在数学、科学和编程方面表现出色。该模型支持多种开发者功能,如函数调用、结构化输出等,并且可以根据需求选择不同的推理强度。o3-mini 的推出进一步降低了推理模型的使用成本,使其更适合广泛的应用场景。
Tülu 3 405B 是一个大规模开源语言模型,通过强化学习提升性能。
Tülu 3 405B 是由 Allen Institute for AI 开发的开源语言模型,具有 4050 亿参数。该模型通过创新的强化学习框架(RLVR)提升性能,尤其在数学和指令跟随任务中表现出色。它基于 Llama-405B 模型进行优化,采用监督微调、偏好优化等技术。Tülu 3 405B 的开源性质使其成为研究和开发领域的强大工具,适用于需要高性能语言模型的各种应用场景。
ChatGPT Gov是为美国政府机构设计的专门版本,用于访问OpenAI的前沿模型。
ChatGPT Gov是OpenAI为美国政府机构量身定制的AI模型版本,旨在帮助政府机构高效利用AI技术解决复杂问题。它基于OpenAI的前沿技术,支持政府在公共健康、基础设施、国家安全等领域的工作,同时满足严格的网络安全和合规要求。该产品通过与微软Azure云服务集成,提供安全、可扩展的AI解决方案,帮助政府提升服务效率和质量。
Janus-Pro-7B 是一个新型的自回归框架,统一多模态理解和生成。
Janus-Pro-7B 是一个强大的多模态模型,能够同时处理文本和图像数据。它通过分离视觉编码路径,解决了传统模型在理解和生成任务中的冲突,提高了模型的灵活性和性能。该模型基于 DeepSeek-LLM 架构,使用 SigLIP-L 作为视觉编码器,支持 384x384 的图像输入,并在多模态任务中表现出色。其主要优点包括高效性、灵活性和强大的多模态处理能力。该模型适用于需要多模态交互的场景,例如图像生成和文本理解。
首个面向语境智能的人类级实时交互系统,支持多情感、多风格语音交互。
SpeechGPT 2.0-preview 是一款由复旦大学自然语言处理实验室开发的先进语音交互模型。它通过海量语音数据训练,实现了低延迟、高自然度的语音交互能力。该模型能够模拟多种情感、风格和角色的语音表达,同时支持工具调用、在线搜索和外部知识库访问等功能。其主要优点包括强大的语音风格泛化能力、多角色模拟以及低延迟交互体验。目前该模型仅支持中文语音交互,未来计划扩展到更多语言。
YuE 是一个专注于全曲生成的开源音乐基础模型,能够根据歌词生成完整的音乐作品。
YuE 是由香港科技大学和多模态艺术投影团队开发的开源音乐生成模型。它能够根据给定的歌词生成长达 5 分钟的完整歌曲,包括人声和伴奏部分。该模型通过多种技术创新,如语义增强音频标记器、双标记技术和歌词链式思考等,解决了歌词到歌曲生成的复杂问题。YuE 的主要优点是能够生成高质量的音乐作品,并且支持多种语言和音乐风格,具有很强的可扩展性和可控性。该模型目前免费开源,旨在推动音乐生成技术的发展。
Tarsier 是由字节跳动推出的用于生成高质量视频描述的大型视频语言模型。
Tarsier 是由字节跳动研究团队开发的一系列大规模视频语言模型,旨在生成高质量的视频描述,并具备强大的视频理解能力。该模型通过两阶段训练策略(多任务预训练和多粒度指令微调)显著提升了视频描述的精度和细节。其主要优点包括高精度的视频描述能力、对复杂视频内容的理解能力以及在多个视频理解基准测试中取得的 SOTA(State-of-the-Art)结果。Tarsier 的背景基于对现有视频语言模型在描述细节和准确性上的不足进行改进,通过大规模高质量数据训练和创新的训练方法,使其在视频描述领域达到了新的高度。该模型目前未明确定价,主要面向学术研究和商业应用,适合需要高质量视频内容理解和生成的场景。
JetBrains推出的编程辅助工具,帮助开发者更高效地完成代码任务。
Junie是JetBrains开发的一款创新的编程代理工具,旨在帮助开发者通过自然语言交互的方式完成代码任务。它能够理解项目上下文,执行代码编写、测试运行、代码检查等任务,并与开发者进行实时沟通,确保代码质量和项目一致性。Junie的出现代表了编程工具向智能化、自动化方向发展的趋势,极大地提升了开发效率,让开发者可以更专注于核心逻辑和创造性工作。目前,Junie支持IntelliJ IDEA Ultimate和PyCharm Professional,并即将支持WebStorm,仅限OS X和Linux平台。
Please 是一家致力于为消费者提供人工智能服务的公司。
Please 是一家新成立的消费级人工智能公司,旨在通过创新的人工智能技术为用户提供更便捷、智能的服务体验。公司于2025年1月14日正式更名为Please,标志着其进入新的发展阶段。目前,公司主要通过其官方网站提供服务,未来可能会拓展更多产品形态。Please 的定位是面向广大消费者,提供个性化、智能化的AI解决方案,帮助用户在日常生活中更高效地完成各种任务。
将问题和表单转化为个性化聊天AI,获取即时见解并生成病毒式内容
Yapz 是一个基于人工智能的平台,能够将问题和表单转化为个性化的聊天AI。其核心功能是通过与用户的互动,快速获取信息并将其转化为有价值的见解和内容。该技术的重要性在于,它能够帮助企业或个人以更高效的方式收集和分析数据,同时通过生成病毒式内容来扩大影响力。Yapz 由 datarockets 和 collabs 共同打造,致力于保护用户隐私。目前尚不清楚其具体价格和定位,但从其功能来看,可能主要面向需要高效收集信息和内容创作的用户群体。
Humanity's Last Exam 是一个用于衡量大型语言模型能力的多模态基准测试。
Humanity's Last Exam 是一个由全球专家合作开发的多模态基准测试,旨在衡量大型语言模型在学术领域的表现。它包含来自 50 个国家超过 500 个机构的近 1000 名专家贡献的 3000 个问题,覆盖超过 100 个学科。该测试旨在成为最终的封闭式学术基准,通过挑战模型的极限来推动人工智能技术的发展。其主要优点是难度高,能够有效评估模型在复杂学术问题上的表现。
一种新颖的图像到视频采样技术,基于Hunyuan模型实现高质量视频生成。
leapfusion-hunyuan-image2video 是一种基于 Hunyuan 模型的图像到视频生成技术。它通过先进的深度学习算法,将静态图像转换为动态视频,为内容创作者提供了一种全新的创作方式。该技术的主要优点包括高效的内容生成、灵活的定制化能力以及对高质量视频输出的支持。它适用于需要快速生成视频内容的场景,如广告制作、视频特效等领域。该模型目前以开源形式发布,供开发者和研究人员免费使用,未来有望通过社区贡献进一步提升其性能。
Llasa-1B 是一个基于 LLaMA 的文本转语音 (TTS) 模型,支持中英文语音合成。
Llasa-1B 是一个由香港科技大学音频实验室开发的文本转语音模型。它基于 LLaMA 架构,通过结合 XCodec2 代码本中的语音标记,能够将文本转换为自然流畅的语音。该模型在 25 万小时的中英文语音数据上进行了训练,支持从纯文本生成语音,也可以利用给定的语音提示进行合成。其主要优点是能够生成高质量的多语言语音,适用于多种语音合成场景,如有声读物、语音助手等。该模型采用 CC BY-NC-ND 4.0 许可证,禁止商业用途。
百川智能开发的专为医疗场景优化的开源大语言模型,具备卓越的通用能力和医疗领域性能。
Baichuan-M1-14B 是由百川智能开发的开源大语言模型,专为医疗场景优化。它基于20万亿token的高质量医疗与通用数据训练,覆盖20多个医疗科室,具备强大的上下文理解和长序列任务表现能力。该模型在医疗领域表现出色,同时在通用任务中也达到了同尺寸模型的效果。其创新的模型结构和训练方法使其在医疗推理、病症判断等复杂任务中表现出色,为医疗领域的人工智能应用提供了强大的支持。
TransPixar 利用突破性的 AI 技术将文本转换为透明视频,彻底改变创意制作方式。
TransPixar 是一款基于先进人工智能技术的透明视频生成工具。它采用创新的 DiT 架构,能够将文本描述快速转化为高质量的透明视频,实现 RGB 和 Alpha 通道的完美对齐。该技术对于创意制作领域具有重要意义,能够极大提升创作效率,降低制作成本,为视觉特效、动画制作等行业带来全新的解决方案。目前,该产品主要面向创意专业人士,提供高效、专业的透明视频生成服务,具体价格未明确提及,但从其定位来看,可能属于付费范畴。
Genaimo是一款能够快速生成动画的产品,支持多种格式导出,适用于多种3D工具。
Genaimo是一款基于人工智能技术的动画生成工具,用户可以通过简单的描述生成动画。该产品的主要优点是能够快速将用户的创意转化为实际的动画效果,大大提高了动画创作的效率。它适用于需要快速生成动画的设计师、开发者和创意人员。目前尚不清楚其具体价格和市场定位,但其技术的创新性和实用性使其在动画设计领域具有重要的地位。
FilmAgent是一个基于LLM的多智能体协作框架,用于虚拟3D空间中的端到端电影自动化制作。
FilmAgent是一种创新的电影制作技术,通过模拟导演、编剧、演员和摄影师等关键角色,利用多智能体协作实现虚拟3D空间中的电影自动化制作。该技术的主要优点在于能够减少人工干预,提高制作效率,同时降低错误率。FilmAgent在电影制作领域的应用,为创作者提供了一个高效、低成本的解决方案,尤其适合资源有限的小型制作团队。虽然目前没有明确的价格信息,但其开源的特性使其具有广泛的适用性和推广价值。
一个能够使用自己的浏览器为您执行任务的智能代理,目前处于研究预览阶段。
Operator 是 OpenAI 推出的一款智能代理产品,它通过结合 GPT-4o 的视觉能力与强化学习的高级推理能力,能够像人类一样与图形用户界面进行交互。它能够处理各种重复性浏览器任务,如填写表单、订购杂货等,帮助用户节省时间。该产品目前处于研究预览阶段,仅对美国的 Pro 用户开放,未来计划扩展到更多用户群体并集成到 ChatGPT 中。
一款能够自我进化的移动助手,专为复杂任务设计。
Mobile-Agent-E 是一款基于大型多模态模型(LMM)的移动助手,旨在帮助用户高效完成复杂的多步骤任务。它通过分层多智能体框架实现自我进化,能够从过去的任务中学习并改进。该产品的主要优点在于其强大的推理能力和对复杂任务的处理能力,尤其是在长周期、多应用交互的任务中表现出色。它适用于需要高效完成复杂移动任务的用户,如商务人士、研究人员等,目前处于研究阶段,未明确具体价格。
UPDF AI 助力用户对 PDF 文档进行总结、翻译、解释、重写、构思,提升阅读效率。
UPDF AI 是一款基于人工智能技术的 PDF 智能处理工具。它通过与 PDF 文档的交互,帮助用户快速提取和分析文档中的关键信息,从而提高阅读和学习效率。该产品利用先进的自然语言处理技术,能够精准地对文档内容进行总结、翻译、解释等操作。其主要优点包括高效的信息提取能力、精准的语言处理能力以及便捷的用户交互体验。UPDF AI 面向需要处理大量 PDF 文档的用户,无论是学生、研究人员还是专业人士,都能从中受益。目前,该产品的具体价格和定位尚未明确,但其强大的功能和高效的表现使其在市场上具有较高的竞争力。
© 2025 AIbase 备案号:闽ICP备08105208号-14