产品库

基于扩散的混合运动动态角色艺术动画生成工具

MikuDance是一个基于扩散的动画生成管道，它结合了混合运动动态来动画化风格化的角色艺术。该技术通过混合运动建模和混合控制扩散两大关键技术，解决了高动态运动和参考引导错位在角色艺术动画中的挑战。MikuDance通过场景运动跟踪策略显式地在像素级空间中建模动态相机，实现统一的角色场景运动建模。在此基础上，混合控制扩散隐式地对不同角色的尺度和体型进行对齐，允许灵活控制局部角色运动。此外，还加入了运动自适应归一化模块，有效注入全局场景运动，为全面的角色艺术动画铺平了道路。通过广泛的实验，MikuDance在各种角色艺术和运动引导下展示了其有效性和泛化能力，始终如一地产生具有显著运动动态的高质量动画。

通用角色图像动画框架，支持多种角色类型动画生成。

Animate-X是一个基于LDM的通用动画框架，用于各种角色类型（统称为X），包括人物拟态角色。该框架通过引入姿势指示器来增强运动表示，可以更全面地从驱动视频中捕获运动模式。Animate-X的主要优点包括对运动的深入建模，能够理解驱动视频的运动模式，并将其灵活地应用到目标角色上。此外，Animate-X还引入了一个新的Animated Anthropomorphic Benchmark (A2Bench) 来评估其在通用和广泛适用的动画图像上的性能。

从长文本中合成无限可控角色动画

Story-to-Motion是一个全新的任务，它接受一个故事（顶部绿色区域）并生成与文本描述相符的动作和轨迹。该系统利用现代大型语言模型作为文本驱动的运动调度器，从长文本中提取一系列（文本、位置）对。它还开发了一个文本驱动的运动检索方案，结合了经典运动匹配和运动语义以及轨迹约束。此外，它设计了一个渐进式掩蔽变换器，以解决过渡动作中常见的问题，如不自然的姿势和滑步。该系统在轨迹跟随、时间动作组合和动作混合等三个不同子任务的评估中表现优异，胜过以往的动作合成方法。

AI工具，将CG角色自动动画化、照明和合成到实景场景中

Wonder Studio是一个AI工具，它可以自动将CG角色动画化、照明和合成到实景场景中。用户只需要一个摄像头，无需使用复杂的3D软件或昂贵的制作硬件。通过上传CG角色模型到一个或多个镜头，系统会自动检测剪辑并在整个序列中跟踪演员。系统根据单摄像头镜头自动检测演员的表演，然后将该表演传递到用户选择的CG角色上，实现自动动画化、照明和合成。Wonder Studio可广泛应用于电影制作、特效制作等领域。

将静态艺术转化为动态杰作

Hailuo I2V-01-Live是I2V系列的最新成员，旨在彻底改变2D插图的呈现方式。该模型支持广泛的艺术风格，通过增强的平滑度和生动的动作，让您的角色以前所未有的方式移动、说话和发光。它针对稳定性和微妙表达进行了优化，使您能够扩展创意表达，并以无与伦比的流畅性和精细度将您的艺术带入生活。

AI驱动的动画和角色开发项目

THE ODD BIRDS AI PROJECT 是由Arvid Tappert发起的一个创新项目，专注于利用人工智能技术进行动画短片创作、角色开发以及AI模型的构建和训练。该项目通过结合AI技术与艺术创作，探索了动画制作的新领域，为动画师和设计师提供了一种全新的工作方式。

AI驱动的角色动画技术

Act-One是一款利用人工智能技术增强角色动画的产品。它通过简单的视频输入，创造出富有表现力和逼真的角色表演，为动画和实景内容的创意叙事开辟了新途径。Act-One的主要优点包括简单易用的视频输入、逼真的面部表情、多样化的角色设计、多角色对话场景的生成、高保真度的面部动画以及安全负责任的AI技术。产品背景信息显示，Act-One由RunwayML提供，它代表了视频到视频和面部捕捉技术的重大进步，无需昂贵的设备即可实现。

基于物理的角色动画研究项目

ProtoMotions是一个致力于创建交互式物理模拟虚拟代理的项目。它支持IsaacGym和IsaacSim，并且基于Hydra和OmegaConfig构建，使得配置组合变得简单。这个项目为研究者和开发者提供了一个平台，用于开发和测试基于物理的角色动画技术。它不仅能够用于学术研究，还能在游戏、电影和虚拟现实等领域中应用。

AI工具，将CG角色自动动画、灯光和合成到实景场景中

Wonder Studio是一个基于AI技术的工具，能够自动将CG角色动画、灯光和合成到实景场景中，无需使用复杂的3D软件或昂贵的制作硬件。只需要一台相机，艺术家即可在浏览器中进行VFX工作。通过上传CG角色模型，系统会自动检测镜头切换并跟踪演员的动作。系统基于单摄像头拍摄的素材自动检测演员的表演，然后将该表演转移到所选的CG角色上，自动进行动画、灯光和合成。

利用动态NeRF进行大规模运动和视角变化的人体视频编辑

DynVideo-E是一款利用动态NeRF技术进行大规模运动和视角变化的人体视频编辑工具。该工具将视频表示为3D前景规范化的人体空间，结合变形场和3D背景静态空间。通过利用重建损失、2D个性化扩散先验、3D扩散先验和局部部分超分辨率等技术，在多视角多姿势配置下编辑可动的规范化人体空间。同时，通过特征空间的风格转换损失将参考风格转移到3D背景模型中。用户可以在编辑后的视频-NeRF模型中根据源视频相机姿态进行相应的渲染。DynVideo-E不仅能够处理短视频，还能够处理大规模运动和视角变化的人体视频，为用户提供了更多直接可控的编辑方式。该工具在两个具有挑战性的数据集上的实验证明，相比于现有方法，DynVideo-E在人类偏好方面取得了50% ~ 95%的显著优势。DynVideo-E的代码和数据将会向社区发布。

文本转3D动画工具，轻松生成角色动作

Cartwheel是一个创新的文本转3D动画工具，用户通过输入文字提示即可生成适用于视频、游戏、电影、广告、社交或VR项目的3D动画角色。其灵活性和易用性让用户能够轻松生成各种动作，并支持导出到任何3D程序中进行编辑。目前处于测试阶段，用户需要排队等待使用。

创建、动画化并部署情感智能角色

Rapport是一个提供创建、动画化并部署情感智能角色的平台，旨在通过虚拟交互个性(VIPs)丰富与受众的对话体验。它结合了最新的AI技术与面部动画技术，支持任何语言的准确唇形同步，并且可以创建逼真或风格化的角色。Rapport的背景信息包括其在游戏面部动画和中间件领域的行业知识，以及其在GTMF 2024年会上的参与。

用于编辑动态场景的稀疏控制高斯溅射技术

SC-GS是一种新型表示技术,将动态场景的运动和外观分别用稀疏控制点和密集高斯函数表示。它使用少量控制点学习紧凑的6自由度变换基,这些基可通过插值权重在局部插值,得到3D高斯函数的运动场。它采用变形MLP预测每个控制点的时变6自由度变换,降低学习复杂度,增强学习能力,实现时空连贯的运动模式。同时联合学习3D高斯函数、控制点的规范空间位置和变形MLP,重建3D场景的外观、几何和动态。在训练过程中,控制点的位置和数量会自适应调整以适应不同区域的运动复杂度,并采用尽可能刚性的损失函数强制运动的空间连续性和局部刚性。由于运动表示的显式稀疏性和外观分离,该方法实现了用户控制的运动编辑,同时保留高保真度外观。大量实验表明,该方法在新视图合成和高速渲染方面优于现有方法,并支持新的保留外观的运动编辑应用。

AI 角色动画

Motionshop是一个 AI 角色动画的网站，它能够根据上传的视频自动检测视频中的人物，并替换成 3D 卡通角色模型，生成有趣的 AI 视频。该产品提供简单易用的界面和强大的 AI 算法，让用户能够轻松将自己的视频内容转化为生动有趣的动画作品。

使用你的脸部特征为图像添加动画

Puppetry 是一款通过使用你的脸部特征为图像添加动画的工具。它能够帮助你快速而简单地为游戏角色、故事板角色或中间图像创建多个变化。无需绑定、头戴装备、化妆或漫长的拍摄过程，只需要你的摄像头和魔法！

创意艺术字生成

创新艺术字是一款能够通过自定义的概念，对文字进行变形和纹理生成的工具。用户可以通过该工具构建富有创意的个性化字形和纹理。该工具具有简单易用的界面和丰富多样的字体和纹理选项，可以满足用户在设计中对文字表现形式的需求。创新艺术字定位于为设计师、艺术家等提供创意灵感和设计元素。

Animate Anyone 2 是一款高保真角色图像动画生成工具，支持环境适配。

Animate Anyone 2 是一种基于扩散模型的角色图像动画技术，能够生成与环境高度适配的动画。它通过提取环境表示作为条件输入，解决了传统方法中角色与环境缺乏合理关联的问题。该技术的主要优点包括高保真度、环境适配性强以及动态动作处理能力出色。它适用于需要高质量动画生成的场景，如影视制作、游戏开发等领域，能够帮助创作者快速生成具有环境交互的角色动画，节省时间和成本。

与喜爱的角色聊天

MangaPlant是一个基于网络的应用，可以让用户与来自漫画和动画世界的虚拟角色进行聊天对话。它旨在将故事讲述的魔力带到生活中，并为漫画和动画爱好者提供独特、沉浸式的体验。MangaPlant提供免费访问，还提供可选的高级功能和应用内购买，以增强用户体验。用户可以选择自己喜欢的漫画或动画角色，并在网站上直接与他们进行沉浸式的聊天互动。

基于扩散模型的音频驱动人像和动物图像动画技术

JoyVASA是一种基于扩散模型的音频驱动人像动画技术，它通过分离动态面部表情和静态3D面部表示来生成面部动态和头部运动。这项技术不仅能够提高视频质量和唇形同步的准确性，还能扩展到动物面部动画，支持多语言，并在训练和推理效率上有所提升。JoyVASA的主要优点包括更长视频生成能力、独立于角色身份的运动序列生成以及高质量的动画渲染。

一致且可控的角色动画图像到视频合成

Animate Anyone旨在通过驱动信号从静态图像生成角色视频。我们利用扩散模型的力量，提出了一个专为角色动画量身定制的新框架。为了保持参考图像中复杂外观特征的一致性，我们设计了ReferenceNet来通过空间注意力合并详细特征。为了确保可控性和连续性，我们引入了一个高效的姿势指导器来指导角色的动作，并采用了一种有效的时间建模方法，以确保视频帧之间的平滑跨帧过渡。通过扩展训练数据，我们的方法可以为任意角色制作动画，与其他图像到视频方法相比，在角色动画方面取得了出色的结果。此外，我们在时尚视频和人类舞蹈合成的基准上评估了我们的方法，取得了最先进的结果。

3D高斯全身动态表情模型

ExAvatar是一种新型的3D全身动态表情模型，它结合了SMPL-X的全身驱动能力和3DGS的强外观建模能力。通过简单的手机扫描即可创建，支持各种姿势和表情的动画渲染。ExAvatar的混合表示方法提高了面部表情的自然度，减少了新表情和姿势的伪影，并且使模型与SMPL-X的面部表情空间完全兼容。

为角色动画提供直观且价格合理的动作捕捉工具。

Rokoko是一款基于传感器的动作捕捉系统，为3D数字创作者提供高质量的身体、手指和面部动画解决方案。它具有直观易用的界面和负担得起的价格，可帮助用户轻松实现逼真的角色动画。

将自拍变成艺术工作室视频和照片，卡通动画和艺术渲染，只需一键。

Cooraft是一款利用人工智能技术将普通照片转化为艺术作品的应用程序。它能够将自拍和日常照片转化为具有创意和艺术性的动画和渲染图，提供从3D卡通到经典绘画等多种艺术风格。Cooraft不仅能够美化人像，还能将素描、绘画、线稿等多种输入转化为新的渲染图，实现从2D到3D的转变。此外，Cooraft还提供了订阅服务，用户可以通过订阅获得更多高级功能。

一款简单易用的动画视频制作软件，适合制作企业宣传、教育课件等。

万彩动画大师是一款面向企业和教育领域的动画视频制作软件。它以简单易用的操作界面和丰富的模板资源，帮助用户快速创建高质量的动画视频。该产品的主要优点是操作简单，无需专业动画制作技能，即可生成生动有趣的动画内容。它适用于企业宣传、产品介绍、教育培训等多种场景，能够有效提升信息传播的效果和吸引力。万彩动画大师提供免费版本，同时也有付费会员服务，以满足不同用户的需求。

智能角色模型，构建最优秀的大模型底座

百川角色大模型是百川智能提供的一款智能角色模型，融合了意图理解、信息检索以及强化学习技术，结合有监督微调与人类意图对齐，在知识问答、文本创作领域表现突出。该模型可实现角色扮演对话，提供高度开放的个性化角色定制能力，具备高度准确性和口语化的回答能力。

AI动画生成平台

Vmotionize是一个领先的AI动画和3D动画软件，它能够将视频、音乐、文本、图片等内容转换成令人惊叹的3D动画。该平台通过先进的AI动画和动作捕捉工具，使得高质量的3D内容和动态图形更加易于获取。Vmotionize通过创新的方式为独立创作者和全球品牌提供了一个全新的平台，让他们可以共同通过人工智能和人类想象力来实现创意、分享故事和构建虚拟世界。

免费的抽象艺术风彩色背景生成器，提供多种动态艺术背景，助力作品脱颖而出。

Color4bg 是一款专注于生成抽象艺术背景的在线工具。它通过程序化生成技术，提供多种动态背景风格，用户可以根据需求定制颜色、分辨率，并导出图片或视频。该工具的最大优点是完全免费，且无需注册账号，适合各类设计场景，如平面设计、网页设计、视频剪辑等。其背后的开发者兼设计师 Winterx，致力于为用户提供高效、美观的设计资源。

从单一角色绘画生成3D动画。

DrawingSpinUp是一个创新的系统，它能够将单一角色绘画转换为3D动画。该技术通过去除视图依赖的轮廓线并重新渲染，以及基于骨架的细化变形算法，解决了业余角色绘画在外观和几何形状上的挑战。它不仅提高了角色绘画的视觉效果，还赋予了绘画以动态的生命力，使其能够自由旋转、跳跃甚至表演街舞。

动漫角色生成平台

Crypko是一款基于GAN技术的动漫角色生成平台，用户可以通过学习图像的特征，自由而连贯地进行变换，生成高质量的动漫立绘。Crypko具有编辑功能，用户可以对生成的角色进行编辑，添加自然的动画。不需要绘画基础，任何人都可以参与其中，将自己的创意具象化为栩栩如生的角色。Crypko作为核心科技搭载于手机APP的MEMES，现可在Apple App Store与Google Play Store免费下载。