简介:

3D自主角色的沉浸式交互框架

功能:

社交VLA架构:提出一个统一的社交VLA框架,基于用户的多模态输入生成多模态响应(语音和动作),驱动角色进行社交互动。

交互式多模态数据:通过自动流水线使用现有的动作数据集生成合成多模态社交互动数据集SynMSI,解决数据稀缺问题。

沉浸式VR界面:开发VR界面,使用户能够沉浸式地与这些角色进行交互。

精确和自然的响应:通过广泛的定量实验和用户研究,证明框架能够产生更精确和自然的字符响应。

多模态输入支持:支持用户的语音和身体语言作为输入,实现与3D自主角色的交互。

端到端模型训练:在合成的多模态数据集SynMSI上训练端到端社交视觉-语言-动作模型。

需求人群:

"目标受众是研究人员、开发者和对人工智能、虚拟现实和3D角色交互感兴趣的企业。SOLAMI适合他们,因为它提供了一个先进的框架来创建和交互具有社交智能的3D角色,这对于开发更自然和沉浸式的人机交互体验至关重要。"

浏览量:5

s1785318098921236

打开站点

构建AI去赚钱
s1785341518918206
类似产品

© 2024     AIbase    备案号:闽ICP备08105208号-14

隐私政策

用户协议

意见反馈 网站地图