一种用于逆渲染的先进学习扩散先验方法,能够从任意图像中恢复物体材质并实现单视图图像重照明。
IntrinsicAnything 是一种先进的图像逆渲染技术,它通过学习扩散模型来优化材质恢复过程,解决了在未知静态光照条件下捕获的图像中物体材质恢复的问题。该技术通过生成模型学习材质先验,将渲染方程分解为漫反射和镜面反射项,利用现有丰富的3D物体数据进行训练,有效地解决了逆渲染过程中的歧义问题。此外,该技术还开发了一种从粗到细的训练策略,利用估计的材质引导扩散模型产生多视图一致性约束,从而获得更稳定和准确的结果。
在线VR看房与虚拟家装的技术提供者
123看房是国内主流看房技术方案的定义者,通过全景照片进行3D建模技术的始创者。提供在线VR看房与虚拟家装的技术,可以通过全景图生成3D模型。其技术创造了低成本、高效率、易操作的全景看房和虚拟家装方案。该产品适用于房地产行业,可以实现远程看房、720全景、商业空间等多种功能。
基于视觉观察自动估计人体及服装的物理参数的框架
PhysAvatar是一个结合逆向渲染和逆向物理的创新框架,可以从多视角视频数据中自动估计人体形状、外表以及服装的物理参数。它采用网格对齐的4D高斯时空网格跟踪技术和基于物理的逆向渲染器来估计内在的材料属性。PhysAvatar集成了物理模拟器,使用基于梯度的优化方法以原理性的方式估计服装的物理参数。这些创新能力使PhysAvatar能够在训练数据之外的运动和照明条件下,渲染出高质量的穿着宽松衣服的新视角头像。
CRM是一个高保真的单图像到3D纹理网格的卷积重建模型
CRM是一个高保真的单图像到3D纹理网格的生成模型,它通过整合几何先验到网络设计中,能够从单个输入图像生成六个正交视图图像,然后利用卷积U-Net创建高分辨率的三平面(triplane)。CRM进一步使用Flexicubes作为几何表示,便于在纹理网格上进行直接的端到端优化。整个模型能够在10秒内从图像生成高保真的纹理网格,无需测试时优化。
创意现实工作室,打造虚拟角色
D-ID Creative Reality Studio是一个在线平台,允许用户创建和定制虚拟角色。用户可以利用该平台的高级工具和功能,设计出独特的3D角色,用于游戏、动画、虚拟现实等应用。该平台提供了丰富的定制选项和高度的可扩展性,支持用户将创意变为现实。
非刚体3D模型的文本生成和重建框架
AnimatableDreamer是一个从单眼视频中生成和重建可动画非刚体3D模型的框架。它能够生成不同类别的非刚体对象,同时遵循从视频中提取的对象运动。关键技术是提出的典范分数蒸馏方法,将生成维度从4D简化到3D,在视频中的不同帧进行降噪,同时在唯一的典范空间内进行蒸馏过程。这样可以保证时间一致的生成和不同姿态下的形态逼真性。借助可微分变形,AnimatableDreamer将3D生成器提升到4D,为非刚体3D模型的生成和重建提供了新视角。此外,与一致性扩散模型的归纳知识相结合,典范分数蒸馏可以从新视角对重建进行正则化,从而闭环增强生成过程。大量实验表明,该方法能够从单眼视频生成高灵活性的文本指导3D模型,同时重建性能优于典型的非刚体重建方法。
通过AI生成3D模型
VoxCraft是一个通过AI生成3D模型的网站。它可以快速生成高质量的3D模型,无需用户具备3D建模经验。这些AI生成的模型可以无缝地导入流行的3D软件如Blender,非常方便地集成到用户的3D工作流程中。VoxCraft拥有简单易用的界面,用户仅需提供少量文本描述,就可以获得设计完美的3D模型。它大大提高了3D内容创作的效率。
GauHuman是一个3D人体模型,利用高斯扩散进行快速训练和实时渲染。
GauHuman是一个基于高斯扩散的3D人体模型,它能在短时间内(1-2分钟)完成训练,并提供实时渲染(最高达189 FPS),与现有基于NeRF的隐式表示建模框架相比,后者需要数小时训练和每帧数秒渲染。GauHuman在规范空间对高斯扩散进行编码,并利用线性混合皮肤(LBS)将3D高斯从规范空间转换到姿态空间,在此过程中设计了有效的姿态和LBS细化模块,以微不足道的计算成本学习3D人体的细节。此外,GauHuman还通过3D人体先验初始化和修剪3D高斯,并通过KL散度引导进行拆分/克隆,以及进一步加速的新型合并操作,从而实现快速优化。
通过无光照纹理扩散模型任意绘制3D
Paint3D能够为无纹理的3D网格生成高分辨率、无光照效果、多样化的2K UV纹理图,同时基于文本或图像输入进行条件化生成。它通过预训练的考虑深度信息的2D扩散模型首先生成视角条件图像并进行多视角纹理融合来获得初始的粗糙纹理图。然后它使用专门的UV补全和UVHD纹理模型来去除光照效果和填补不完整区域。Paint3D可以生成语义一致、无光照的高质量2K UV纹理,从而显著提升无纹理3D物体的纹理生成水平。
AI驱动的3D建模,快速高质量
Tripo 1.0是一个AI驱动的3D建模工具,可以通过文本或图片在几秒钟内生成高质量且可直接使用的3D模型。这个工具适用于快速创建3D内容,无需复杂的设计流程,为用户提供了一个高效且简便的3D建模解决方案。
设计、建模、可视化,一站式解决方案
SketchUp是一款功能强大的3D建模软件,可用于建筑、室内设计、景观设计、机械设计等领域。它提供了易于使用的工具,使用户能够快速创建精美的3D模型。SketchUp还具有丰富的扩展库,用户可以根据自己的需求自定义3D工作空间。SketchUp支持导出多种格式的文件,包括3D打印文件、CAD文件、图像文件等。SketchUp的定价灵活,用户可以选择订阅或购买永久许可证。
高质量3D数字化身生成模型
RODIN Diffusion是一款AI系统,可自动生成高度详细的3D数字化身。生成的数字化身可以以前所未有的质量自由地360度查看。该模型显著加速了传统复杂的3D建模过程,并为3D艺术家开辟了新的机会。 RODIN模型架构:该3D数字化身扩散模型经过训练,可以生成以神经辐射场表示的3D数字化身。我们基于最先进的生成技术(扩散模型)进行3D建模。我们使用三平面表示来分解数字化身的神经辐射场,可以通过扩散模型明确地对其进行建模,并通过体积渲染将其渲染为图像。所提出的3D感知卷积在保持3D扩散建模完整性的同时带来了所需的计算效率。整个生成过程是一个分层过程,使用级联扩散模型进行多尺度建模。一旦训练了生成模型,就可以根据来自输入图像、文本提示或随机噪声的潜在代码来控制数字化身生成。 RODIN Diffusion模型的可视化。请参阅论文Rodin: A Generative Model for Sculpting 3D Digital Avatars Using Diffusion以获取更多详细信息。
© 2024 AIbase 备案号:闽ICP备2023012347号-1