Light-A-Video 是一种无需训练的视频重光照技术,通过渐进式光照融合实现平滑的视频重光照效果。
Light-A-Video 是一种创新的视频重光照技术,旨在解决传统视频重光照中存在的光照不一致和闪烁问题。该技术通过 Consistent Light Attention(CLA)模块和 Progressive Light Fusion(PLF)策略,增强了视频帧之间的光照一致性,同时保持了高质量的图像效果。该技术无需额外训练,可以直接应用于现有的视频内容,具有高效性和实用性。它适用于视频编辑、影视制作等领域,能够显著提升视频的视觉效果。
灵活调整光源位置和强度的AI光照编辑工具
IC-Light V2-Vary是一款基于扩散模型的光照编辑工具,主要针对复杂光照场景中的图像生成和编辑问题,提供了光照一致性约束、大规模数据支持、精确光照编辑等功能。它通过物理光传输理论确保物体在不同光照条件下的表现可以线性组合,减少图像伪影,保持输出结果与实际物理光照条件一致。适用于摄影师、设计师及3D建模专业人士,同时为艺术创作者提供了更多可能性。
2D肖像视频转4D高斯场编辑工具
PortraitGen是一个基于多模态生成先验的2D肖像视频编辑工具,能够将2D肖像视频提升到4D高斯场,实现多模态肖像编辑。该技术通过追踪SMPL-X系数和使用神经高斯纹理机制,可以快速生成3D肖像并进行编辑。它还提出了一种迭代数据集更新策略和多模态人脸感知编辑模块,以提高表情质量和保持个性化面部结构。
3D重光照技术,无需逆向渲染
IllumiNeRF是一种3D重光照技术,它通过使用一系列在未知光照条件下拍摄的物体图像,恢复3D表示,以便在目标照明下从新视角渲染。该技术避免了基于逆向渲染的传统方法,这些方法通常涉及通过可微分的蒙特卡洛渲染进行优化,这不仅脆弱而且计算成本高昂。IllumiNeRF采用更简单的方法,首先使用图像扩散模型对每个输入图像进行重光照,然后使用这些重光照图像重建Neural Radiance Field (NeRF),从而在目标照明下渲染新视图。这种方法在多个重光照基准测试中取得了出人意料的竞争性能和最先进的结果。
第一个通用光照手模型
URHand是第一个能够在不同视角、姿势、光照和身份之间实现泛化的通用光照手模型。该模型可以使用手机拍摄的图像进行少拍摄个性化,并且可以在新的光照条件下实现逼真渲染。基于神经网络多视角手部图像的光照,我们构建了强大的通用光照先验。我们提出了一种神经渲染器,它采用了空间变化的线性照明模型,并以物理启发的阴影作为输入特征。通过移除非线性激活和偏差,我们的特定设计的照明模型明确保持了光传输的线性性。我们还引入了基于物理的模型和神经光照模型的联合学习,进一步提高了保真度和泛化性能。大量实验表明,我们的方法在质量和泛化能力方面都优于现有方法。我们还展示了如何从手机对未曾见过的身份进行快速个性化。
© 2025 AIbase 备案号:闽ICP备08105208号-14