产品库

从单一视频创建实时互动游戏环境

Video2Game是一项技术，可以将单一视频转换成具有实时、互动、真实感和浏览器兼容性的高质量虚拟环境。它通过构建大规模的NeRF模型来实现高质量的表面几何形状，然后将该模型转换为带有对应刚体动力学的网格表示，以支持交互。使用UV映射的神经纹理，既能表达丰富，又与游戏引擎兼容。最终得到的是一个虚拟环境，虚拟角色可以与之互动，响应用户控制，并能从新的相机视角实时提供高分辨率渲染。

在线创建AI虚拟形象视频，实时互动。

HeyGen Interactive Avatar是一个在线AI视频生成器，专注于创建和优化虚拟形象视频，支持实时互动。它允许用户创建一个为连续流媒体优化的虚拟形象，同时提醒用户保持头部和手部的最小动作。HeyGen的背景信息包括与Baron David和Ryan Hoover等知名人士的合作，产品目前处于Beta测试阶段，提供免费试用。

物理模拟角色的指令驱动控制系统

InsActor是一个基于物理模拟的角色控制系统。它可以通过自然语言指令驱动角色在复杂环境中完成各种交互任务。该系统利用条件与对抗扩散模型进行多级规划,并与低级控制器相结合,实现稳定、鲁棒的控制。具有控制流畅、交互自然的优势,适用于创意内容生成、互动娱乐、人机交互等应用场景。

哄你的虚拟男/女朋友

哄哄模拟器基于AI技术，通过语言技巧和沟通能力，在限定次数内让对方原谅你，挑战你的情商和沟通技巧。用户可以选择各种场景进行模拟，如应对女友生气、陪酒应酬、解决矛盾等情境。产品定位于提升用户情商和沟通技巧。

基于Transformer的实时开放世界AI模型

Oasis是由Decart AI开发的首个可玩、实时、开放世界的AI模型，它是一个互动视频游戏，由Transformer端到端生成，基于逐帧生成。Oasis能够接收用户键盘和鼠标输入，实时生成游戏玩法，内部模拟物理、游戏规则和图形。该模型通过直接观察游戏玩法学习，允许用户移动、跳跃、拾取物品、破坏方块等。Oasis被视为研究更复杂交互世界的基础模型的第一步，未来可能取代传统的游戏引擎。Oasis的实现需要模型架构的改进和模型推理技术的突破，以实现用户与模型的实时交互。Decart AI采用了最新的扩散训练和Transformer模型方法，并结合了大型语言模型（LLMs）来训练一个自回归模型，该模型可以根据用户即时动作生成视频。此外，Decart AI还开发了专有的推理框架，以提供NVIDIA H100 Tensor Core GPU的峰值利用率，并支持Etched即将推出的Sohu芯片。

大规模基础世界模型，生成多样的3D可操作环境

Genie 2是由Google DeepMind开发的一款大规模基础世界模型，能够基于单一提示图像生成无尽的、可操作的、可玩的3D环境，用于训练和评估具身智能体。Genie 2代表了深度学习和人工智能领域的一大进步，它通过模拟虚拟世界及其行动后果，展示了在大规模生成模型中的多种紧急能力，如物体交互、复杂角色动画、物理模拟等。Genie 2的研究推动了新的创意工作流程，用于原型化交互体验，并为未来更通用的AI系统和智能体的研究提供了新的可能性。

体验虚拟明星的快感，通过AI技术与虚拟观众互动，感受真实的粉丝互动体验。

Famefy是一款基于AI技术的直播应用，通过生成虚拟观众为用户提供沉浸式的明星体验。它利用先进的AI算法分析用户的环境和语音，创造出高度真实的粉丝互动场景。该产品的核心优势在于其高度个性化和沉浸式的体验，能够让用户在虚拟世界中感受到成为明星的快感。其背景定位是满足用户对虚拟社交和娱乐的需求，价格为免费，但提供内购选项。

通过视频生成实现基于物理的3D对象交互

PhysDreamer是一个基于物理的方法，它通过利用视频生成模型学习到的对象动力学先验，为静态3D对象赋予交互式动力学。这种方法允许在缺乏真实物体物理属性数据的情况下，模拟出对新颖交互（如外力或代理操作）的真实反应。PhysDreamer通过用户研究评估合成交互的真实性，推动了更吸引人和真实的虚拟体验的发展。

物理集成的 3D 高斯生成动力学

PhysGaussian 是一种创新的统一仿真渲染管线，能够同时和无缝地生成基于物理的动力学和逼真的渲染。该产品利用自定义的物质点法（MPM）将 3D 高斯核与物理上有意义的运动变形和力学应力属性相结合，通过连续力学原理进行演化。产品具有物理仿真和视觉渲染的无缝集成，两个组件都使用相同的 3D 高斯核作为其离散表示，无需三角形 / 四面体网格、Marching Cubes 或任何其他几何嵌入，突出了 “所见即所模拟” 的原则。

发现AI角色社区，与虚拟角色互动

Rubii AI是一个AI原生角色社区，用户可以与虚拟角色进行互动对话，探索丰富的AI角色世界。Rubii AI的主要优点是提供逼真的AI角色对话体验，让用户享受与虚拟角色交流的乐趣。

基于物理的角色动画研究项目

ProtoMotions是一个致力于创建交互式物理模拟虚拟代理的项目。它支持IsaacGym和IsaacSim，并且基于Hydra和OmegaConfig构建，使得配置组合变得简单。这个项目为研究者和开发者提供了一个平台，用于开发和测试基于物理的角色动画技术。它不仅能够用于学术研究，还能在游戏、电影和虚拟现实等领域中应用。

创造你的虚拟角色，与AI互动

PIX.CHAT°是一个虚拟角色交互平台，用户可以创建自己的虚拟角色并与AI进行互动。该平台提供了丰富的角色设定和互动场景，让用户能够体验到与虚拟角色的真实互动。PIX.CHAT°致力于为用户提供一个沉浸式的虚拟角色交互体验。

连接实时物理数据，推动物理AI时代

Archetype AI发布了一个创新的人工智能平台Newton™，专为理解物理世界设计。Newton™结合实时传感器数据和自然语言处理技术，帮助用户提出开放式问题并做出智能决策。Newton™连接全球数十亿传感器的实时物理数据，利用多种传感器数据和自然语言解锁物理世界见解。已应用于建筑安全、车辆状况感知、家庭安全、物流优化等多个行业。支持定制优化，数据私密性，边缘部署能力。

模拟不同投资策略的表现，辅助投资决策。

投资策略模拟器是一个在线工具，它通过模拟不同的股价模型和投资策略，帮助用户理解各种投资策略在不同市场条件下的表现。该产品使用几何布朗运动模型来模拟股价的连续随机波动，适合相对稳定的大盘股。用户可以设置不同的投资周期和策略，比如买入持有、定投等，来观察投资收益的变化。这个工具的主要优点是简单易懂，能够帮助投资者在不承担实际风险的情况下，学习和比较不同的投资策略。它适合心态平和、不为短期波动所动的长线投资者。目前，该产品是免费的，主要面向教育和娱乐目的，不构成实际的投资建议。

实时AI模拟面试

RightJoin AI Mock Interviews是一款帮助您在真实面试前练习的人工智能模拟面试产品。您可以进行无限次的模拟面试，并获得关于您表现的反馈。通过与RightJoin一起练习面试，您可以提高回答问题的能力，改善沟通风格，并增强自信心。产品提供个性化面试设计，根据您的背景、职位和公司定制问题，帮助您掌握面试技巧。定价详情请参考官方网站。

基于物理的图像到视频生成技术

PhysGen是一个创新的图像到视频生成方法，它能够将单张图片和输入条件（例如，对图片中物体施加的力和扭矩）转换成现实、物理上合理且时间上连贯的视频。该技术通过将基于模型的物理模拟与数据驱动的视频生成过程相结合，实现了在图像空间中的动态模拟。PhysGen的主要优点包括生成的视频在物理和外观上都显得逼真，并且可以精确控制，通过定量比较和全面的用户研究，展示了其在现有数据驱动的图像到视频生成工作中的优越性。

神经模型驱动的实时游戏引擎

GameNGen是一个完全由神经模型驱动的游戏引擎，能够实现与复杂环境的实时互动，并在长时间轨迹上保持高质量。它能够以每秒超过20帧的速度交互式模拟经典游戏《DOOM》，并且其下一帧预测的PSNR达到29.4，与有损JPEG压缩相当。人类评估者在区分游戏片段和模拟片段方面仅略优于随机机会。GameNGen通过两个阶段的训练：(1)一个RL-agent学习玩游戏并记录训练会话的动作和观察结果，成为生成模型的训练数据；(2)一个扩散模型被训练来预测下一帧，条件是过去的动作和观察序列。条件增强允许在长时间轨迹上稳定自回归生成。

AgentVerse 是一个用于构建自定义多智能体环境的框架

AgentVerse 是一个提供灵活框架的多智能体环境模拟工具，简化了构建大型语言模型（LLMs）的自定义多智能体环境的过程。它提供了高效的环境构建、可定制的组件、工具插件支持等功能。AgentVerse 旨在帮助研究人员更轻松地进行多智能体环境的开发和定制，以便集中精力进行研究。

提供超逼真的交互式虚拟形象，用于变革数字互动体验。

Beyond Presence 是一家专注于利用数字孪生技术打造类人对话体验的公司。其核心产品是交互式虚拟形象（Conversational Avatars），能够实现高度逼真的实时对话。这种技术通过模拟人类的外貌、语音和行为，为企业提供了一种全新的客户服务、销售和培训解决方案。它不仅能够降低人力成本，还能实现 24/7 的不间断服务，提升客户满意度和忠诚度。此外，该产品支持多种语言，能够满足全球不同地区用户的需求。Beyond Presence 的产品定位是为企业提供高效、个性化且具有创新性的数字交互工具，其价格策略灵活，包括免费试用、个人、专业、商业和企业等多种套餐，以满足不同规模和需求的客户。

实时AI模拟对话，提升沟通技能

AGOGE.AI利用OpenAI的尖端GPT-4技术，提供动态互动环境，让用户参与模拟对话，以增强他们的沟通能力。该应用采用先进的自然语言处理技术，生成实时、具有上下文意识的回应，让用户体验多样化的对话场景，并即时获得可操作的反馈，以有效地完善对话策略。对话潜力无限，让您的交流技能得到释放。

为机器人提供虚拟模拟和评估的先进世界模型。

1X 世界模型是一种机器学习程序，能够模拟世界如何响应机器人的行为。它基于视频生成和自动驾驶汽车世界模型的技术进步，为机器人提供了一个虚拟模拟器，能够预测未来的场景并评估机器人策略。这个模型不仅能够处理复杂的对象交互，如刚体、掉落物体的影响、部分可观察性、可变形物体和铰接物体，还能够在不断变化的环境中进行评估，这对于机器人技术的发展至关重要。

免费的惊艳虚拟换装工具

Kolors虚拟试妆AI是一种创新的人工智能技术，它允许用户在不实际穿着的情况下虚拟试穿衣服。用户可以通过上传个人照片和所需衣物的图像，AI会生成用户穿着所选服装的真实可视化效果。这项技术不仅为用户带来了便利，使他们能够从舒适的家中尝试不同的风格，而且还通过提供个性化的时尚体验来提高购物体验的准确性和效率。对于服装零售商来说，Kolors虚拟试穿AI提供了对用户试穿数据的深入分析，使他们能够了解市场趋势和消费者偏好，从而优化产品线和营销策略。

无需更换，即可虚拟试穿各种服装。

Kolors 虚拟试穿 AI 是一款利用人工智能技术，通过用户上传的照片来虚拟试穿服装的在线平台。它通过先进的计算机视觉算法和生成对抗网络（GANs）技术，为用户提供逼真的服装试穿效果。该产品不仅改变了传统的试衣体验，还为时尚博主、服装零售商、个人造型师等提供了创新的内容创作和展示方式。它的优势在于能够提供即时的试穿效果，多样化的服装选择，以及真实感的渲染效果，同时保护用户隐私，支持个性化的服装试穿体验。

实时生成逼真语音驱动人脸

VASA-1是由微软研究院开发的一个模型，专注于实时生成与音频相匹配的逼真人脸动画。该技术通过深度学习算法，能够根据输入的语音内容，自动生成相应的口型和面部表情，为用户提供一种全新的交互体验。VASA-1的主要优势在于其高度逼真的生成效果和实时响应能力，使得虚拟角色能够更加自然地与用户进行互动。目前，VASA-1主要应用于虚拟助手、在线教育、娱乐等领域，其定价策略尚未公布，但预计将提供免费试用版本供用户体验。

全栈式虚拟人多场景应用服务

讯飞虚拟人利用最新的AI虚拟形象技术，结合语音识别、语义理解、语音合成、NLP、星火大模型等AI核心技术，提供虚拟人形象资产构建、AI驱动、多模态交互的多场景虚拟人产品服务。一站式虚拟人音视频内容生产，AIGC助力创作灵活高效；在虚拟'AI演播室'中输入文本或录音，一键完成音、视频作品的输出，3分钟内渲染出稿。

NVIDIA Cosmos是用于物理AI开发的世界基础模型平台。

NVIDIA Cosmos是一个先进的世界基础模型平台，旨在加速物理AI系统的开发，如自动驾驶车辆和机器人。它提供了一系列预训练的生成模型、高级分词器和加速数据处理管道，使开发者能够更容易地构建和优化物理AI应用。Cosmos通过其开放的模型许可，降低了开发成本，提高了开发效率，适用于各种规模的企业和研究机构。

开创性的实时、帧级控制的逼真世界模拟技术

The Matrix是一个先锋项目，旨在通过AI技术打造一个全沉浸式、交互式的数字宇宙，模糊现实与幻觉之间的界限。该项目通过提供帧级精度的用户交互、AAA级视觉效果以及无限的生成能力，突破了现有视频模型的局限，为用户带来无尽的探索体验。The Matrix由阿里巴巴集团、香港大学、滑铁卢大学和Vector Institute共同研发，代表了世界模拟技术的新高度。