需求人群:
"ActAnywhere可用于自动为包含人类或其他主体的视频生成相应的背景,从而减少手工调整的工作量,提高视频制作效率。"
使用场景示例:
- 使用包含人物运动的视频分割序列及海边图片,生成人物在海边奔跑的合成视频
- 使用包含舞蹈动作的视频分割和古代宫殿的图片,生成舞蹈在宫殿里进行的效果
- 使用汽车行驶的视频分割和高楼大厦的图片,生成汽车在城市街景行驶的效果
产品特色:
- 根据输入的前景主体分割序列,可以生成符合条件图像的视频背景
- 生成的背景会与前景主体运动和外观相协调
- 支持以合成的包含主体的帧或者仅包含背景的帧作为条件图像
- 可以生成具有不同摄像机运动的视频背景
浏览量:469
ActAnywhere是一个主体感知视频背景生成模型。
ActAnywhere是一个用于自动生成与前景主体运动和外观相符的视频背景的生成模型。该任务涉及合成与前景主体运动和外观相一致的背景,同时也符合艺术家的创作意图。ActAnywhere利用大规模视频扩散模型的力量,并专门定制用于此任务。ActAnywhere以一系列前景主体分割作为输入,以描述所需场景的图像作为条件,生成与条件帧相一致的连贯视频,同时实现现实的前景和背景交互。该模型在大规模人机交互视频数据集上进行训练。大量评估表明该模型的性能明显优于基准,可以泛化到各种分布样本,包括非人类主体。
从手机拍摄的平移视频中生成全景视频
VidPanos 是一个创新的视频处理技术,它能够将用户随意拍摄的平移视频转换成全景视频。这项技术通过空间时间外推的方式,生成与原视频长度相同的全景视频。VidPanos 利用生成视频模型,解决了在移动物体存在时,静态全景图无法捕捉场景动态的问题。它能够处理包括人、车辆、流水以及静态背景在内的各种野外场景,展现出强大的实用性和创新性。
将文本和图像转换为令人惊叹的多镜头视频。
Seedance AI是由ByteDance推出的视频生成器,利用Seedance 1.0 Pro技术实现专业电影级质量。用户可以通过简单的文本或图像提示生成具有电影感的视频。
在线AI去水印工具,快速去除照片和视频中的水印。
Unwatermark AI是一款先进的基于AI技术的去水印工具,可快速去除图像和视频中的水印。其主要优点包括自动检测和定位水印、高质量保证、快速速度、支持多终端使用等。产品定位于提供免费的去水印服务。
使用P20V,即刻转换图像和视频,无需登录。适用于营销、设计、时尚等领域。
P20V是一个免费的AI平台,可以在几秒钟内转换图像和视频,无需登录。适用于营销、设计、建筑、时尚、游戏、电子商务等多个行业。用户可以创建专业级视觉内容并与创意社区分享。
视频驱动的 AI 内存库,通过语义搜索快速存储文本。
Memvid 是一种革命性的 AI 内存管理解决方案,通过将文本数据编码为视频,实现对数百万个文本块的快速语义搜索。它相比传统的向量数据库更加高效,存储占用小,能在没有数据库的情况下快速访问信息。该产品的价格为免费,并定位于提升知识管理和信息检索的效率。
Google的革命性AI视频生成技术
VEO3是Google最新的AI视频生成模型,可以将创意想法转化为令人惊叹的视频内容。其主要优点包括高质量视频输出、简单易用、无需技术技能、快速渲染、内容安全等。
多模态驱动的定制视频生成架构。
HunyuanCustom 是一个多模态定制视频生成框架,旨在根据用户定义的条件生成特定主题的视频。该技术在身份一致性和多种输入模式的支持上表现出色,能够处理文本、图像、音频和视频输入,适合虚拟人广告、视频编辑等多种应用场景。
一种高效的无泄漏唇同步技术。
KeySync 是一个针对高分辨率视频的无泄漏唇同步框架。它解决了传统唇同步技术中的时间一致性问题,同时通过巧妙的遮罩策略处理表情泄漏和面部遮挡。KeySync 的优越性体现在其在唇重建和跨同步方面的先进成果,适用于自动配音等实际应用场景。
极快的 B 站直播录制、自动切片与字幕处理工具。
bilive 是一个专为 B 站直播录制而设计的工具,支持自动切片、弹幕渲染与字幕生成,兼容低配置设备,适合广泛用户群体。其主要优势在于高效处理直播内容,支持多房间录制,同时能够生成高质量的内容与封面图,确保用户能够快速分享录制结果,适用于个人及小型团队。该产品开源且免费使用,致力于为用户提供便利。
通过 MCP 协议访问 PixVerse 最新的视频生成模型。
PixVerse-MCP 是一个工具,允许用户通过支持模型上下文协议(MCP)的应用程序访问 PixVerse 最新的视频生成模型。该产品提供了文本转视频等功能,适用于创作者和开发者,能够在任何地方生成高质量的视频。PixVerse 平台需要 API 积分,用户需自行购买。
一个基于深度学习的图像和视频描述模型。
Describe Anything 模型(DAM)能够处理图像或视频的特定区域,并生成详细描述。它的主要优点在于可以通过简单的标记(点、框、涂鸦或掩码)来生成高质量的本地化描述,极大地提升了计算机视觉领域的图像理解能力。该模型由 NVIDIA 和多所大学联合开发,适合用于研究、开发和实际应用中。
一个互动故事讲述的 AI 平台,通过图像和音频生成视频。
AvatarFX 是一个尖端的 AI 平台,专注于互动故事讲述。用户可以通过上传图片和选择声音,快速生成生动、真实的角色视频。其核心技术是基于 DiT 的扩散视频生成模型,能够高效生成高保真、时序一致的视频,特别适合需要多个角色和对话场景的创作。产品定位在为创作者提供工具,帮助他们实现想象力的无限可能。
国产视频生成大模型 Vidu Q1,支持高清 1080p 视频生成,性价比极高。
Vidu Q1 是由生数科技推出的国产视频生成大模型,专为视频创作者设计,支持高清 1080p 视频生成,具备电影级运镜效果和首尾帧功能。该产品在 VBench-1.0 和 VBench-2.0 评测中位居榜首,性价比极高,价格仅为同行的十分之一。它适用于电影、广告、动漫等多个领域,能够大幅降低创作成本,提升创作效率。
全球首个无限时长电影生成模型,开启视频生成新时代
SkyReels-V2 是昆仑万维 SkyReels 团队发布的全球首个使用扩散强迫框架的无限时长电影生成模型。该模型通过结合多模态大语言模型、多阶段预训练、强化学习和扩散强迫框架来实现协同优化,突破了传统视频生成技术在提示词遵循、视觉质量、运动动态和视频时长协调上的重大挑战。它不仅为内容创作者提供了强大的工具,还开启了利用 AI 进行视频叙事和创意表达的无限可能。
开源视频生成模型,支持多种生成任务。
Wan2.1-FLF2V-14B 是一个开源的大规模视频生成模型,旨在推动视频生成领域的进步。该模型在多项基准测试中表现优异,支持消费者级 GPU,能够高效生成 480P 和 720P 的视频。它在文本到视频、图像到视频等多个任务中表现出色,具有强大的视觉文本生成能力,适用于各种实际应用场景。
一键将视频和音频转化为各种风格的文档。
AI 视频图文创作助手是一个开源工具,旨在将视频和音频内容转化为多种格式的文档,帮助用户进行二次阅读和思考。该产品的主要优势在于其完全开源、无需注册,用户可以在本地处理音视频文件,降低了使用成本。它非常适合需要将视听内容转化为文本的学生、研究人员和内容创作者。
用于视频生成的下一帧预测模型。
FramePack 是一个创新的视频生成模型,旨在通过压缩输入帧的上下文来提高视频生成的质量和效率。其主要优点在于解决了视频生成中的漂移问题,通过双向采样方法保持视频质量,适合需要生成长视频的用户。该技术背景来源于对现有模型的深入研究和实验,以改进视频生成的稳定性和连贯性。
Pusa 是一个新颖的视频扩散模型,支持多种视频生成任务。
Pusa 通过帧级噪声控制引入视频扩散建模的创新方法,能够实现高质量的视频生成,适用于多种视频生成任务(文本到视频、图像到视频等)。该模型以其卓越的运动保真度和高效的训练过程,提供了一个开源的解决方案,方便用户进行视频生成任务。
在视频扩散变换器中合成任何内容的框架。
SkyReels-A2 是一个基于视频扩散变换器的框架,允许用户合成和生成视频内容。该模型通过利用深度学习技术,提供了灵活的创作能力,适合多种视频生成应用,尤其是在动画和特效制作方面。该产品的优点在于其开源特性和高效的模型性能,适合研究人员和开发者使用,且目前不收取费用。
OmniTalker 是一个实时文本驱动的生成谈话头框架。
OmniTalker 是由阿里巴巴 Tongyi 实验室提出的一种统一框架,旨在实时生成音频和视频,提升人机交互体验。其创新之处在于解决了传统文本到语音及语音驱动的视频生成方法中常见的音视频不同步、风格不一致及系统复杂性等问题。OmniTalker 采用双分支扩散变换器架构,能够在保持高效的同时实现高保真的音视频输出。其实时推理速度可达每秒 25 帧,适用于各种交互式视频聊天应用,提升了用户体验。
基于 DiT 的人类图像动画框架,实现精细控制与长效一致性。
DreamActor-M1 是一个基于扩散变换器 (DiT) 的人类动画框架,旨在实现细粒度的整体可控性、多尺度适应性和长期时间一致性。该模型通过混合引导,能够生成高表现力和真实感的人类视频,适用于从肖像到全身动画的多种场景。其主要优势在于高保真度和身份保留,为人类行为动画带来了新的可能性。
GAIA-2 是一个先进的视频生成模型,用于创建安全的自动驾驶场景。
GAIA-2 是 Wayve 开发的先进视频生成模型,旨在为自动驾驶系统提供多样化和复杂的驾驶场景,以提高安全性和可靠性。该模型通过生成合成数据来解决依赖现实世界数据收集的限制,能够创建各种驾驶情境,包括常规和边缘案例。GAIA-2 支持多种地理和环境条件的模拟,帮助开发者在没有高昂成本的情况下快速测试和验证自动驾驶算法。
加速视频扩散模型,生成速度提升 8.5 倍。
AccVideo 是一种新颖的高效蒸馏方法,通过合成数据集加速视频扩散模型的推理速度。该模型能够在生成视频时实现 8.5 倍的速度提升,同时保持相似的性能。它使用预训练的视频扩散模型生成多条有效去噪轨迹,从而优化了数据的使用和生成过程。AccVideo 特别适用于需要高效视频生成的场景,如电影制作、游戏开发等,适合研究人员和开发者使用。
通过测试时间缩放显著提升视频生成质量。
Video-T1 是一个视频生成模型,通过测试时间缩放技术(TTS)显著提升生成视频的质量和一致性。该技术允许在推理过程中使用更多的计算资源,从而优化生成结果。相较于传统的视频生成方法,TTS 能够提供更高的生成质量和更丰富的内容表达,适用于数字创作领域。该产品的定位主要面向研究人员和开发者,价格信息未明确。
免费 AI 创作工具,生成图像、视频及 4K 增强。
vivago.ai 是一个免费的 AI 生成工具和社区,提供文本转图像、图像转视频等功能,让创作变得更加简单高效。用户可以免费生成高质量的图像和视频,支持多种 AI 编辑工具,方便用户进行创作和分享。该平台的定位是为广大创作者提供易用的 AI 工具,满足他们在视觉创作上的需求。
© 2025 AIbase 备案号:闽ICP备08105208号-14