产品库

基于物理的角色动画研究项目

ProtoMotions是一个致力于创建交互式物理模拟虚拟代理的项目。它支持IsaacGym和IsaacSim，并且基于Hydra和OmegaConfig构建，使得配置组合变得简单。这个项目为研究者和开发者提供了一个平台，用于开发和测试基于物理的角色动画技术。它不仅能够用于学术研究，还能在游戏、电影和虚拟现实等领域中应用。

物理模拟角色的指令驱动控制系统

InsActor是一个基于物理模拟的角色控制系统。它可以通过自然语言指令驱动角色在复杂环境中完成各种交互任务。该系统利用条件与对抗扩散模型进行多级规划,并与低级控制器相结合,实现稳定、鲁棒的控制。具有控制流畅、交互自然的优势,适用于创意内容生成、互动娱乐、人机交互等应用场景。

通用角色图像动画框架，支持多种角色类型动画生成。

Animate-X是一个基于LDM的通用动画框架，用于各种角色类型（统称为X），包括人物拟态角色。该框架通过引入姿势指示器来增强运动表示，可以更全面地从驱动视频中捕获运动模式。Animate-X的主要优点包括对运动的深入建模，能够理解驱动视频的运动模式，并将其灵活地应用到目标角色上。此外，Animate-X还引入了一个新的Animated Anthropomorphic Benchmark (A2Bench) 来评估其在通用和广泛适用的动画图像上的性能。

从长文本中合成无限可控角色动画

Story-to-Motion是一个全新的任务，它接受一个故事（顶部绿色区域）并生成与文本描述相符的动作和轨迹。该系统利用现代大型语言模型作为文本驱动的运动调度器，从长文本中提取一系列（文本、位置）对。它还开发了一个文本驱动的运动检索方案，结合了经典运动匹配和运动语义以及轨迹约束。此外，它设计了一个渐进式掩蔽变换器，以解决过渡动作中常见的问题，如不自然的姿势和滑步。该系统在轨迹跟随、时间动作组合和动作混合等三个不同子任务的评估中表现优异，胜过以往的动作合成方法。

AI驱动的角色动画技术

Act-One是一款利用人工智能技术增强角色动画的产品。它通过简单的视频输入，创造出富有表现力和逼真的角色表演，为动画和实景内容的创意叙事开辟了新途径。Act-One的主要优点包括简单易用的视频输入、逼真的面部表情、多样化的角色设计、多角色对话场景的生成、高保真度的面部动画以及安全负责任的AI技术。产品背景信息显示，Act-One由RunwayML提供，它代表了视频到视频和面部捕捉技术的重大进步，无需昂贵的设备即可实现。

物理集成的 3D 高斯生成动力学

PhysGaussian 是一种创新的统一仿真渲染管线，能够同时和无缝地生成基于物理的动力学和逼真的渲染。该产品利用自定义的物质点法（MPM）将 3D 高斯核与物理上有意义的运动变形和力学应力属性相结合，通过连续力学原理进行演化。产品具有物理仿真和视觉渲染的无缝集成，两个组件都使用相同的 3D 高斯核作为其离散表示，无需三角形 / 四面体网格、Marching Cubes 或任何其他几何嵌入，突出了 “所见即所模拟” 的原则。

文本转3D动画工具，轻松生成角色动作

Cartwheel是一个创新的文本转3D动画工具，用户通过输入文字提示即可生成适用于视频、游戏、电影、广告、社交或VR项目的3D动画角色。其灵活性和易用性让用户能够轻松生成各种动作，并支持导出到任何3D程序中进行编辑。目前处于测试阶段，用户需要排队等待使用。

AI驱动的动画和角色开发项目

THE ODD BIRDS AI PROJECT 是由Arvid Tappert发起的一个创新项目，专注于利用人工智能技术进行动画短片创作、角色开发以及AI模型的构建和训练。该项目通过结合AI技术与艺术创作，探索了动画制作的新领域，为动画师和设计师提供了一种全新的工作方式。

模拟不同投资策略的表现，辅助投资决策。

投资策略模拟器是一个在线工具，它通过模拟不同的股价模型和投资策略，帮助用户理解各种投资策略在不同市场条件下的表现。该产品使用几何布朗运动模型来模拟股价的连续随机波动，适合相对稳定的大盘股。用户可以设置不同的投资周期和策略，比如买入持有、定投等，来观察投资收益的变化。这个工具的主要优点是简单易懂，能够帮助投资者在不承担实际风险的情况下，学习和比较不同的投资策略。它适合心态平和、不为短期波动所动的长线投资者。目前，该产品是免费的，主要面向教育和娱乐目的，不构成实际的投资建议。

创建、动画化并部署情感智能角色

Rapport是一个提供创建、动画化并部署情感智能角色的平台，旨在通过虚拟交互个性(VIPs)丰富与受众的对话体验。它结合了最新的AI技术与面部动画技术，支持任何语言的准确唇形同步，并且可以创建逼真或风格化的角色。Rapport的背景信息包括其在游戏面部动画和中间件领域的行业知识，以及其在GTMF 2024年会上的参与。

基于物理的图像到视频生成技术

PhysGen是一个创新的图像到视频生成方法，它能够将单张图片和输入条件（例如，对图片中物体施加的力和扭矩）转换成现实、物理上合理且时间上连贯的视频。该技术通过将基于模型的物理模拟与数据驱动的视频生成过程相结合，实现了在图像空间中的动态模拟。PhysGen的主要优点包括生成的视频在物理和外观上都显得逼真，并且可以精确控制，通过定量比较和全面的用户研究，展示了其在现有数据驱动的图像到视频生成工作中的优越性。

AI 角色动画

Motionshop是一个 AI 角色动画的网站，它能够根据上传的视频自动检测视频中的人物，并替换成 3D 卡通角色模型，生成有趣的 AI 视频。该产品提供简单易用的界面和强大的 AI 算法，让用户能够轻松将自己的视频内容转化为生动有趣的动画作品。

大规模基础世界模型，生成多样的3D可操作环境

Genie 2是由Google DeepMind开发的一款大规模基础世界模型，能够基于单一提示图像生成无尽的、可操作的、可玩的3D环境，用于训练和评估具身智能体。Genie 2代表了深度学习和人工智能领域的一大进步，它通过模拟虚拟世界及其行动后果，展示了在大规模生成模型中的多种紧急能力，如物体交互、复杂角色动画、物理模拟等。Genie 2的研究推动了新的创意工作流程，用于原型化交互体验，并为未来更通用的AI系统和智能体的研究提供了新的可能性。

AI工具，将CG角色自动动画化、照明和合成到实景场景中

Wonder Studio是一个AI工具，它可以自动将CG角色动画化、照明和合成到实景场景中。用户只需要一个摄像头，无需使用复杂的3D软件或昂贵的制作硬件。通过上传CG角色模型到一个或多个镜头，系统会自动检测剪辑并在整个序列中跟踪演员。系统根据单摄像头镜头自动检测演员的表演，然后将该表演传递到用户选择的CG角色上，实现自动动画化、照明和合成。Wonder Studio可广泛应用于电影制作、特效制作等领域。

使用你的脸部特征为图像添加动画

Puppetry 是一款通过使用你的脸部特征为图像添加动画的工具。它能够帮助你快速而简单地为游戏角色、故事板角色或中间图像创建多个变化。无需绑定、头戴装备、化妆或漫长的拍摄过程，只需要你的摄像头和魔法！

与喜爱的角色聊天

MangaPlant是一个基于网络的应用，可以让用户与来自漫画和动画世界的虚拟角色进行聊天对话。它旨在将故事讲述的魔力带到生活中，并为漫画和动画爱好者提供独特、沉浸式的体验。MangaPlant提供免费访问，还提供可选的高级功能和应用内购买，以增强用户体验。用户可以选择自己喜欢的漫画或动画角色，并在网站上直接与他们进行沉浸式的聊天互动。

一致且可控的角色动画图像到视频合成

Animate Anyone旨在通过驱动信号从静态图像生成角色视频。我们利用扩散模型的力量，提出了一个专为角色动画量身定制的新框架。为了保持参考图像中复杂外观特征的一致性，我们设计了ReferenceNet来通过空间注意力合并详细特征。为了确保可控性和连续性，我们引入了一个高效的姿势指导器来指导角色的动作，并采用了一种有效的时间建模方法，以确保视频帧之间的平滑跨帧过渡。通过扩展训练数据，我们的方法可以为任意角色制作动画，与其他图像到视频方法相比，在角色动画方面取得了出色的结果。此外，我们在时尚视频和人类舞蹈合成的基准上评估了我们的方法，取得了最先进的结果。

通过视频生成实现基于物理的3D对象交互

PhysDreamer是一个基于物理的方法，它通过利用视频生成模型学习到的对象动力学先验，为静态3D对象赋予交互式动力学。这种方法允许在缺乏真实物体物理属性数据的情况下，模拟出对新颖交互（如外力或代理操作）的真实反应。PhysDreamer通过用户研究评估合成交互的真实性，推动了更吸引人和真实的虚拟体验的发展。

智能角色模型，构建最优秀的大模型底座

百川角色大模型是百川智能提供的一款智能角色模型，融合了意图理解、信息检索以及强化学习技术，结合有监督微调与人类意图对齐，在知识问答、文本创作领域表现突出。该模型可实现角色扮演对话，提供高度开放的个性化角色定制能力，具备高度准确性和口语化的回答能力。

NVIDIA Cosmos是用于物理AI开发的世界基础模型平台。

NVIDIA Cosmos是一个先进的世界基础模型平台，旨在加速物理AI系统的开发，如自动驾驶车辆和机器人。它提供了一系列预训练的生成模型、高级分词器和加速数据处理管道，使开发者能够更容易地构建和优化物理AI应用。Cosmos通过其开放的模型许可，降低了开发成本，提高了开发效率，适用于各种规模的企业和研究机构。

为角色动画提供直观且价格合理的动作捕捉工具。

Rokoko是一款基于传感器的动作捕捉系统，为3D数字创作者提供高质量的身体、手指和面部动画解决方案。它具有直观易用的界面和负担得起的价格，可帮助用户轻松实现逼真的角色动画。

AI动画生成平台

Vmotionize是一个领先的AI动画和3D动画软件，它能够将视频、音乐、文本、图片等内容转换成令人惊叹的3D动画。该平台通过先进的AI动画和动作捕捉工具，使得高质量的3D内容和动态图形更加易于获取。Vmotionize通过创新的方式为独立创作者和全球品牌提供了一个全新的平台，让他们可以共同通过人工智能和人类想象力来实现创意、分享故事和构建虚拟世界。

一个由生成模型驱动的无限角色生活模拟游戏

Unbounded是一个创新的无限游戏，它超越了传统有限、硬编码系统的限制，通过使用生成模型来实现。这款游戏受到James P. Carse关于有限与无限游戏之间区别的启发，利用最新的生成AI技术，创建了一个完全由生成模型封装的角色生活模拟游戏。Unbounded从沙盒生活模拟中汲取灵感，允许玩家通过自然语言指令与自主虚拟角色在虚拟世界中互动，包括喂养、玩耍和引导角色，同时由大型语言模型（LLM）生成的开放式机制，其中一些可能是新兴的。为了开发Unbounded，提出了在LLM和视觉生成领域的技术创新，包括一个专门化的、蒸馏的大型语言模型，用于实时动态生成游戏机制、叙事和角色互动，以及一个新的动态区域图像提示适配器（IP-Adapter），用于确保角色在多个环境中的视觉生成一致但灵活。

从单一角色绘画生成3D动画。

DrawingSpinUp是一个创新的系统，它能够将单一角色绘画转换为3D动画。该技术通过去除视图依赖的轮廓线并重新渲染，以及基于骨架的细化变形算法，解决了业余角色绘画在外观和几何形状上的挑战。它不仅提高了角色绘画的视觉效果，还赋予了绘画以动态的生命力，使其能够自由旋转、跳跃甚至表演街舞。

动漫角色生成平台

Crypko是一款基于GAN技术的动漫角色生成平台，用户可以通过学习图像的特征，自由而连贯地进行变换，生成高质量的动漫立绘。Crypko具有编辑功能，用户可以对生成的角色进行编辑，添加自然的动画。不需要绘画基础，任何人都可以参与其中，将自己的创意具象化为栩栩如生的角色。Crypko作为核心科技搭载于手机APP的MEMES，现可在Apple App Store与Google Play Store免费下载。

基于扩散的混合运动动态角色艺术动画生成工具

MikuDance是一个基于扩散的动画生成管道，它结合了混合运动动态来动画化风格化的角色艺术。该技术通过混合运动建模和混合控制扩散两大关键技术，解决了高动态运动和参考引导错位在角色艺术动画中的挑战。MikuDance通过场景运动跟踪策略显式地在像素级空间中建模动态相机，实现统一的角色场景运动建模。在此基础上，混合控制扩散隐式地对不同角色的尺度和体型进行对齐，允许灵活控制局部角色运动。此外，还加入了运动自适应归一化模块，有效注入全局场景运动，为全面的角色艺术动画铺平了道路。通过广泛的实验，MikuDance在各种角色艺术和运动引导下展示了其有效性和泛化能力，始终如一地产生具有显著运动动态的高质量动画。

一款简单易用的动画视频制作软件，适合制作企业宣传、教育课件等。

万彩动画大师是一款面向企业和教育领域的动画视频制作软件。它以简单易用的操作界面和丰富的模板资源，帮助用户快速创建高质量的动画视频。该产品的主要优点是操作简单，无需专业动画制作技能，即可生成生动有趣的动画内容。它适用于企业宣传、产品介绍、教育培训等多种场景，能够有效提升信息传播的效果和吸引力。万彩动画大师提供免费版本，同时也有付费会员服务，以满足不同用户的需求。

哄你的虚拟男/女朋友

哄哄模拟器基于AI技术，通过语言技巧和沟通能力，在限定次数内让对方原谅你，挑战你的情商和沟通技巧。用户可以选择各种场景进行模拟，如应对女友生气、陪酒应酬、解决矛盾等情境。产品定位于提升用户情商和沟通技巧。

Morphic是一个提供AI驱动的3D角色创建和动画制作服务的平台

Morphic专注于使用AI技术来创建和动画化3D角色，提供用户友好的工具和服务，使非专业用户也能轻松创建高质量的3D内容。

连接实时物理数据，推动物理AI时代

Archetype AI发布了一个创新的人工智能平台Newton™，专为理解物理世界设计。Newton™结合实时传感器数据和自然语言处理技术，帮助用户提出开放式问题并做出智能决策。Newton™连接全球数十亿传感器的实时物理数据，利用多种传感器数据和自然语言解锁物理世界见解。已应用于建筑安全、车辆状况感知、家庭安全、物流优化等多个行业。支持定制优化，数据私密性，边缘部署能力。