产品库

视频编辑中的手-物交互意识

HOI-Swap是一个基于扩散模型的视频编辑框架，专注于处理视频编辑中手与物体交互的复杂性。该模型通过自监督训练，能够在单帧中实现物体交换，并学习根据物体属性变化调整手的交互模式，如手的抓握方式。第二阶段将单帧编辑扩展到整个视频序列，通过运动对齐和视频生成，实现高质量的视频编辑。

利用预训练的图像到视频扩散模型生成连贯中间帧

该产品是一个图像到视频的扩散模型，通过轻量级的微调技术，能够从一对关键帧生成具有连贯运动的连续视频序列。这种方法特别适用于需要在两个静态图像之间生成平滑过渡动画的场景，如动画制作、视频编辑等。它利用了大规模图像到视频扩散模型的强大能力，通过微调使其能够预测两个关键帧之间的视频，从而实现前向和后向的一致性。

一种基于图像到视频扩散模型的视频编辑技术

I2VEdit是一种创新的视频编辑技术，通过预训练的图像到视频模型，将单一帧的编辑扩展到整个视频。这项技术能够适应性地保持源视频的视觉和运动完整性，并有效处理全局编辑、局部编辑以及适度的形状变化，这是现有方法所不能实现的。I2VEdit的核心包括两个主要过程：粗略运动提取和外观细化，通过粗粒度注意力匹配进行精确调整。此外，还引入了跳过间隔策略，以减轻多个视频片段自动回归生成过程中的质量下降。实验结果表明，I2VEdit在细粒度视频编辑方面的优越性能，证明了其能够产生高质量、时间一致的输出。

基于文本的视频编辑技术，使用时空切片。

Slicedit是一种零样本视频编辑技术，它利用文本到图像的扩散模型，并结合时空切片来增强视频编辑中的时序一致性。该技术能够保留原始视频的结构和运动，同时符合目标文本描述。通过广泛的实验，证明了Slicedit在编辑真实世界视频方面具有明显优势。

将照片和视频剪辑转变为时尚、充满音乐的杰作。

Beat.ly是一款人工智能音乐视频制作器，它允许用户轻松将照片转换为带有音乐的精彩视频。产品背景信息显示，Beat.ly旨在释放用户的创作潜力，无论是初学者还是专业人士，都能通过这款应用轻松制作出专业品质的视频。Beat.ly的主要优点包括多样化的模板、3D效果和动态视频制作、快速简单的视频编辑以及一键分享到社交媒体的功能。Beat.ly的价格定位为包含广告的免费应用，但提供内购选项。

基于扩散的混合运动动态角色艺术动画生成工具

MikuDance是一个基于扩散的动画生成管道，它结合了混合运动动态来动画化风格化的角色艺术。该技术通过混合运动建模和混合控制扩散两大关键技术，解决了高动态运动和参考引导错位在角色艺术动画中的挑战。MikuDance通过场景运动跟踪策略显式地在像素级空间中建模动态相机，实现统一的角色场景运动建模。在此基础上，混合控制扩散隐式地对不同角色的尺度和体型进行对齐，允许灵活控制局部角色运动。此外，还加入了运动自适应归一化模块，有效注入全局场景运动，为全面的角色艺术动画铺平了道路。通过广泛的实验，MikuDance在各种角色艺术和运动引导下展示了其有效性和泛化能力，始终如一地产生具有显著运动动态的高质量动画。

基于LLM的智能字幕助手，一键生成高质量视频字幕

卡卡字幕助手（VideoCaptioner）是一款功能强大的视频字幕配制软件，利用大语言模型进行字幕智能断句、校正、优化、翻译，实现字幕视频全流程一键处理。产品无需高配置，操作简单，内置基础LLM模型，保证开箱即用，且消耗模型Token少，适合视频制作者和内容创作者。

Final Cut Pro 11为Mac、iPad和iPhone带来视频剪辑新体验。

Final Cut Pro 11是由Apple公司推出的一款革命性的视频编辑软件，它全面发挥了Apple M系列芯片的性能，引入了磁性蒙版、转写为字幕等基于AI的新工具，支持空间视频编辑，并提供了多种节省时间的工具和工作流优化功能。Final Cut Pro 11以其强大的功能、直观的操作和高效的工作流程，成为全球创意专业人士的首选视频编辑工具。Final Cut Pro 11的价格为RMB 1,998，新用户可下载免费90天试用版。

视频扩散模型，用于虚拟试穿。

Fashion-VDM是一个视频扩散模型（VDM），用于生成虚拟试穿视频。该模型接受一件衣物图片和人物视频作为输入，旨在生成人物穿着给定衣物的高质量试穿视频，同时保留人物的身份和动作。与传统的基于图像的虚拟试穿相比，Fashion-VDM在衣物细节和时间一致性方面表现出色。该技术的主要优点包括：扩散式架构、分类器自由引导增强控制、单次64帧512px视频生成的渐进式时间训练策略，以及联合图像-视频训练的有效性。Fashion-VDM在视频虚拟试穿领域树立了新的行业标准。

基于文本提示修订图像的大型扩散模型

SeedEdit是Doubao Team推出的大型扩散模型，用于根据任何文本提示修订图像。它通过逐步将图像生成器与强大的图像编辑器对齐，实现了图像重建和图像再生之间的最佳平衡。SeedEdit能够实现高审美/分辨率图像的零样本稳定编辑，并支持图像的连续修订。该技术的重要性在于其能够解决图像编辑问题中成对图像数据稀缺的核心难题，通过将文本到图像(T2I)生成模型视为弱编辑模型，并通过生成带有新提示的新图像来实现“编辑”，然后将其蒸馏并与之对齐到图像条件编辑模型中。

在线视频制作平台，提供AI虚拟形象和视频制作服务。

Yepic Studio是一个在线视频制作平台，它通过使用人工智能技术，允许用户创建和编辑视频内容，包括制作会说话的照片视频、专业视频以及AI虚拟形象。该平台的主要优点在于能够快速生成高质量的视频内容，同时提供个性化的AI虚拟形象，满足不同商业需求。产品背景信息显示，Yepic Studio旨在为内容创作者和企业提供一个简单易用的在线视频制作工具，以提高内容生产的效率和质量。关于价格，页面显示用户为'Guest'且'Credits'为0，暗示可能有免费试用或基础免费服务，具体定价需进一步查看。

Jumper是一个强大的AI视频搜索工具，帮助编辑者快速找到视频素材。

Jumper是一个专为视频编辑者设计的AI搜索工具，它能够让用户在眨眼间搜索自己的视频素材。Jumper集成到了用户的非线性编辑器（NLE）中，无需离开编辑工作流程即可找到所需素材。Jumper支持多语言搜索，能够快速定位特定词汇或短语在视频中的位置，支持多机位和同步剪辑，并且完全在设备上运行，保护用户隐私，无需上传素材至云端。Jumper的主要优点包括快速搜索、完全离线工作、保护隐私和兼容性强。产品背景信息显示，Jumper由Witchcraft Software AB开发，旨在通过AI技术提高视频编辑的效率和创造力。

Video Ocean，让每个人都能轻松制作高质量视频。

Video Ocean是一个基于人工智能模型技术的视频制作平台，提供文本生成、图像生成、音视频生成等功能。用户可以输入描述性文本、图片、音频和视频，获得定制化的AI生成文本、图片、音频和视频。该平台致力于简化视频生成的复杂性，通过提供先进的工具和详细的资源，使高质量的视频制作变得易于访问和不费力。Video Ocean的主要优点包括开放源代码、易于使用、高效生产和创新性。它通过提供100个免费币来吸引用户试用，推动内容创作的民主化，鼓励创新、创造力和包容性。

自监督触觉表示，用于基于视觉的触觉传感。

Sparsh是一系列通过自监督算法（如MAE、DINO和JEPA）训练的通用触觉表示。它能够为DIGIT、Gelsight'17和Gelsight Mini生成有用的表示，并在TacBench提出的下游任务中大幅度超越端到端模型，同时能够为新下游任务的数据高效训练提供支持。Sparsh项目包含PyTorch实现、预训练模型和与Sparsh一起发布的数据集。

视频编辑工具，使用Genmo Mochi技术

ComfyUI-MochiEdit是一个基于Genmo Mochi技术的视频编辑插件，允许用户通过ComfyUI界面对视频进行编辑。该插件的主要优点在于其能够利用先进的视频处理技术，提供给用户一个直观、易用的编辑环境。产品背景信息显示，它是由logtd和kijai共同开发，并且遵循GPL-3.0开源许可证。由于其开源特性，该插件可以免费使用，定位于需要视频编辑功能的专业用户或爱好者。

新一代创意生产力平台，点燃你的想象力

可灵AI是一个基于可灵大模型和可图大模型的创意生产力平台，提供视频、图片生成与编辑能力。它允许用户通过输入文本或图片来生成视频和图片，支持多种尺寸和风格，并且可以将图片一键生成视频。该平台还提供了一个创意圈，用户可以在这里寻找创作灵感，并与其他创作者互动。产品背景信息显示，可灵AI广受海内外创作者好评，其技术优势在于物理仿真理解、运动幅度和画面审美表现，以及降低制作成本。价格方面，可灵AI提供免费下载，并提供App内购买项目。

盲图像恢复技术，利用即时生成参考图像恢复破损图像

InstantIR是一种基于扩散模型的盲图像恢复方法，能够在测试时处理未知退化问题，提高模型的泛化能力。该技术通过动态调整生成条件，在推理过程中生成参考图像，从而提供稳健的生成条件。InstantIR的主要优点包括：能够恢复极端退化的图像细节，提供逼真的纹理，并且通过文本描述调节生成参考，实现创造性的图像恢复。该技术由北京大学、InstantX团队和香港中文大学的研究人员共同开发，得到了HuggingFace和fal.ai的赞助支持。

根据人类指令修复和编辑照片的框架

PromptFix是一个综合框架，能够使扩散模型遵循人类指令执行各种图像处理任务。该框架通过构建大规模的指令遵循数据集，提出了高频引导采样方法来控制去噪过程，并设计了辅助提示适配器，利用视觉语言模型增强文本提示，提高模型的任务泛化能力。PromptFix在多种图像处理任务中表现优于先前的方法，并在盲恢复和组合任务中展现出优越的零样本能力。

免费在线工具，将文本和图片转换为视频

VideoMaker Luma AI视频生成器是一个利用AI技术快速轻松创建高质量视频的平台，提供文本转视频和图片转视频功能，让用户能够将文本和图片转化为引人入胜的视频。该平台通过免费的AI视频制作工具和在线视频制作工具，提供了一种专业且用户友好的体验，无需任何编辑技能。Luma AI以其在AI技术领域的创新而闻名，特别是在3D建模方面。其最新的创新产品Dream Machine模型是一款AI视频生成器，可以通过文本和图片输入生成高质量、逼真的视频，具备流畅的动作和一致的背景，相较于以前的AI视频生成器是一个显著的改进。

海螺AI在线视频生成器，用文字创造视频。

Hailuo AI是由MiniMax开发的一款先进的人工智能生产力工具，旨在改变视频内容创作的方式。这一创新平台允许用户通过简单的文字提示生成高质量的视频，特别适合营销人员、教育工作者和内容创作者使用。Hailuo AI以其快速的处理时间和广泛的艺术风格而表现出色，结合文本和图像提示的功能可实现高度个性化的输出，因此对追求灵活性的创作者很有吸引力。

大规模视频生成的自回归扩散模型

MarDini是Meta AI Research推出的一款视频扩散模型，它将掩码自回归（MAR）的优势整合到统一的扩散模型（DM）框架中。该模型能够根据任意数量的掩码帧在任意帧位置进行视频生成，支持视频插值、图像到视频生成以及视频扩展等多种视频生成任务。MarDini的设计高效，将大部分计算资源分配给低分辨率规划模型，使得在大规模上进行空间-时间注意力成为可能。MarDini在视频插值方面树立了新的标杆，并且在几次推理步骤内，就能高效生成与更昂贵的高级图像到视频模型相媲美的视频。

使用AI快速创建病毒式视频

Viral Video是一个利用人工智能技术帮助用户快速创建病毒式视频的在线平台。它通过文本到视频的转换、文本到语音的转换、AI视频编辑和AI场景生成等功能，简化了视频制作流程，降低了成本，并提高了视频的吸引力和传播潜力。该平台特别适合内容创作者、营销人员和社交媒体运营者，帮助他们以更低的成本和更快的速度制作出高质量的视频内容，从而在社交媒体上获得更多的关注和互动。

视频扩散模型加速工具，无需训练即可生成高质量视频内容。

FasterCache是一种创新的无需训练的策略，旨在加速视频扩散模型的推理过程，并生成高质量的视频内容。这一技术的重要性在于它能够显著提高视频生成的效率，同时保持或提升内容的质量，这对于需要快速生成视频内容的行业来说是非常有价值的。FasterCache由来自香港大学、南洋理工大学和上海人工智能实验室的研究人员共同开发，项目页面提供了更多的视觉结果和详细信息。产品目前免费提供，主要面向视频内容生成、AI研究和开发等领域。

AI驱动的字幕生成器，快速创建时尚视频字幕

RapidSubs是一个利用人工智能技术，为视频内容快速生成时尚字幕的应用。它支持99种语言的语音识别和转录，用户可以根据个人喜好编辑字幕的位置、颜色和样式。无论是内容创作者、教育工作者还是市场营销人员，RapidSubs都能帮助他们轻松地增强视频内容并与观众建立联系。该应用提供免费下载，无需注册账户即可立即开始添加字幕。

AI驱动的视频创作工具，几秒内将文本和图片转化为视频。

Vidfly是一个利用人工智能技术，将文本和图片快速转化为视频的在线平台。它通过简化视频创作流程，让不具备专业视频编辑技能的用户也能轻松制作出高质量的视频内容。Vidfly支持多种视频风格，提供精确的相机控制功能，并允许用户免费试用。产品的主要优点包括快速高效、易于上手、高质量输出以及丰富的创意可能性。它主要面向内容创作者、数字营销专家和电子商务广告商等，帮助他们提升内容吸引力和品牌影响力。

开源视频生成模型

genmoai/models 是一个开源的视频生成模型，代表了视频生成技术的最新进展。该模型名为 Mochi 1，是一个基于 Asymmetric Diffusion Transformer (AsymmDiT) 架构的10亿参数扩散模型，从零开始训练，是迄今为止公开发布的最大的视频生成模型。它具有高保真运动和强提示遵循性，显著缩小了封闭和开放视频生成系统之间的差距。该模型在 Apache 2.0 许可下发布，用户可以在 Genmo 的 playground 上免费试用此模型。

高效能的文本到图像生成模型

Stable Diffusion 3.5 Large Turbo 是一个基于文本生成图像的多模态扩散变换器（MMDiT）模型，采用了对抗性扩散蒸馏（ADD）技术，提高了图像质量、排版、复杂提示理解和资源效率，特别注重减少推理步骤。该模型在生成图像方面表现出色，能够理解和生成复杂的文本提示，适用于多种图像生成场景。它在Hugging Face平台上发布，遵循Stability Community License，适合研究、非商业用途以及年收入少于100万美元的组织或个人免费使用。

高性能的文本到图像生成模型

Stable Diffusion 3.5 Large 是一个基于文本生成图像的多模态扩散变换器（MMDiT）模型，由 Stability AI 开发。该模型在图像质量、排版、复杂提示理解和资源效率方面都有显著提升。它使用三个固定的预训练文本编码器，并通过 QK 归一化技术提高训练稳定性。此外，该模型在训练数据和策略上使用了包括合成数据和过滤后的公开可用数据。Stable Diffusion 3.5 Large 模型在遵守社区许可协议的前提下，可以免费用于研究、非商业用途，以及年收入少于100万美元的组织或个人的商业用途。

使用AI技术重写、配音、克隆声音并实现唇形同步。

Talking Avatar是一款利用人工智能技术，允许用户通过编辑文本来更新旁白，无需重新录制，即可改变声音，包括口音、语调和情感。它支持一键多人唇形同步，确保视频观看体验自然而沉浸。此外，它还支持一句话声音克隆技术，用户只需提供一句话的音频样本，即可克隆任何声音，并用于生成任何语音。这款产品对于视频创作者、广告代理商、市场营销人员和教育工作者等都是一个强大的工具，可以轻松地将经典视频片段转化为新的热门内容，或者为不同平台优化视频内容。

视频眼神校正API，让视频中的眼神看起来始终注视着摄像头。

Sieve Eye Contact Correction API 是一个为开发者设计的快速且高质量的视频眼神校正API。该技术通过重定向眼神，确保视频中的人物即使没有直接看向摄像头，也能模拟出与摄像头进行眼神交流的效果。它支持多种自定义选项来微调眼神重定向，保留了原始的眨眼和头部动作，并通过随机的“看向别处”功能来避免眼神呆板。此外，还提供了分屏视图和可视化选项，以便于调试和分析。该API主要面向视频制作者、在线教育提供者和任何需要提升视频交流质量的用户。定价为每分钟视频0.10美元。