需求人群:
"目标受众为自动驾驶领域的研究人员和开发者,他们需要一个能够实时处理复杂交通场景并做出准确决策的模型。DiffusionDrive以其快速、准确和多样化的特点,非常适合需要在动态开放世界中实现自动驾驶的研究人员和开发者。"
使用场景示例:
- 在城市交通场景中,DiffusionDrive能够实时处理复杂的交通情况,并做出准确的驾驶决策。
- 在高速公路上,模型能够处理车辆跟随和超车行为,同时保持安全距离。
- 在复杂的交叉路口,DiffusionDrive能够处理转弯和遵守交通信号,确保顺利通过。
产品特色:
- 快速实时决策:模型减少了10倍的扩散去噪步骤,实现了更快的决策速度。
- 高准确性:在NAVSIM基准测试中,DiffusionDrive的PDMS比原始扩散策略高出3.5倍。
- 多样性:模型具有更高的模式多样性,得分比原始扩散策略高出64%。
- 直接学习:模型可以直接从人类示范中学习,无需额外的训练数据。
- 高灵活性:DiffusionDrive可以轻松集成到车载传感器数据和现有的感知模块中。
- 易于部署:作为一个模型,DiffusionDrive可以部署在各种自动驾驶平台上,具有很好的兼容性。
- 开源:项目的代码和模型将开源,便于社区进一步研究和开发。
使用教程:
1. 访问DiffusionDrive的GitHub页面,克隆或下载代码。
2. 根据README.md文件中的指南,安装所需的依赖和环境。
3. 运行模型,使用提供的脚本和参数进行训练和测试。
4. 观察模型在不同场景下的表现,并根据需要调整参数。
5. 根据项目的开源许可,可以自由地修改和扩展模型以适应特定的应用场景。
6. 如果需要进一步的帮助或有改进建议,可以通过GitHub的Issues页面与开发者社区交流。
浏览量:10
最新流量情况
月访问量
4.91m
平均访问时长
00:06:18
每次访问页数
5.57
跳出率
37.92%
流量来源
直接访问
51.73%
自然搜索
32.88%
邮件
0.04%
外链引荐
13.01%
社交媒体
2.27%
展示广告
0
截止目前所有流量趋势图
地理流量分布情况
中国
13.81%
德国
3.69%
印度
9.16%
俄罗斯
4.47%
美国
18.04%
实时端到端自动驾驶的截断扩散模型
DiffusionDrive是一个用于实时端到端自动驾驶的截断扩散模型,它通过减少扩散去噪步骤来加快计算速度,同时保持高准确性和多样性。该模型直接从人类示范中学习,无需复杂的预处理或后处理步骤,即可实现实时的自动驾驶决策。DiffusionDrive在NAVSIM基准测试中取得了88.1 PDMS的突破性成绩,并且能够在45 FPS的速度下运行。
开源的端到端自动驾驶多模态模型
OpenEMMA是一个开源项目,复现了Waymo的EMMA模型,提供了一个端到端框架用于自动驾驶车辆的运动规划。该模型利用预训练的视觉语言模型(VLMs)如GPT-4和LLaVA,整合文本和前视摄像头输入,实现对未来自身路径点的精确预测,并提供决策理由。OpenEMMA的目标是为研究人员和开发者提供易于获取的工具,以推进自动驾驶研究和应用。
探索AI前沿,精选国内外AI产品与应用。
智趣AI甄选是一个专注于人工智能领域的综合性平台,旨在洞察行业发展前景,精选并展示国内外的AI产品与应用。平台提供丰富的学习资源,行业融合案例分析,助力用户洞悉AI发展趋势,与AI技术同行,共创未来。
开源视频生成模型
genmoai/models 是一个开源的视频生成模型,代表了视频生成技术的最新进展。该模型名为 Mochi 1,是一个基于 Asymmetric Diffusion Transformer (AsymmDiT) 架构的10亿参数扩散模型,从零开始训练,是迄今为止公开发布的最大的视频生成模型。它具有高保真运动和强提示遵循性,显著缩小了封闭和开放视频生成系统之间的差距。该模型在 Apache 2.0 许可下发布,用户可以在 Genmo 的 playground 上免费试用此模型。
X-Dyna是一种基于扩散模型的零样本人类图像动画生成技术。
X-Dyna是一种创新的零样本人类图像动画生成技术,通过将驱动视频中的面部表情和身体动作迁移到单张人类图像上,生成逼真且富有表现力的动态效果。该技术基于扩散模型,通过Dynamics-Adapter模块,将参考外观上下文有效整合到扩散模型的空间注意力中,同时保留运动模块合成流畅复杂动态细节的能力。它不仅能够实现身体姿态控制,还能通过本地控制模块捕捉与身份无关的面部表情,实现精确的表情传递。X-Dyna在多种人类和场景视频的混合数据上进行训练,能够学习物理人体运动和自然场景动态,生成高度逼真和富有表现力的动画。
Hunyuan3D 2.0 是腾讯推出的高分辨率 3D 资产生成系统,基于大规模扩散模型。
Hunyuan3D 2.0 是腾讯推出的一种先进大规模 3D 合成系统,专注于生成高分辨率纹理化的 3D 资产。该系统包括两个基础组件:大规模形状生成模型 Hunyuan3D-DiT 和大规模纹理合成模型 Hunyuan3D-Paint。它通过解耦形状和纹理生成的难题,为用户提供了灵活的 3D 资产创作平台。该系统在几何细节、条件对齐、纹理质量等方面超越了现有的开源和闭源模型,具有极高的实用性和创新性。目前,该模型的推理代码和预训练模型已开源,用户可以通过官网或 Hugging Face 空间快速体验。
一个免费开源的简历生成器,简化简历创建、更新和分享过程。
Reactive Resume 是一个由 Amruth Pillai 开发的免费开源简历生成器,旨在帮助用户轻松创建、更新和分享简历。该项目已持续开发超过3年,具备丰富的功能和高度的灵活性。它采用 MIT 开源许可证,用户可以自由使用和修改代码,甚至可以通过 Docker 自行托管。其支持多种语言、多种简历模板和自定义功能,满足不同用户的需求。作为一款完全免费且无广告的产品,它以实用性和便捷性为主要优势,致力于帮助求职者在求职过程中脱颖而出。
DeepSeek-R1-Zero 是一款通过大规模强化学习训练的推理模型,无需监督微调即可实现卓越推理能力。
DeepSeek-R1-Zero 是由 DeepSeek 团队开发的推理模型,专注于通过强化学习提升模型的推理能力。该模型在无需监督微调的情况下,展现出强大的推理行为,如自我验证、反思和生成长链推理。其主要优点包括高效推理能力、无需预训练即可使用,以及在数学、代码和推理任务上的卓越表现。该模型基于 DeepSeek-V3 架构开发,支持大规模推理任务,适用于研究和商业应用。
DeepSeek-R1 是一款高性能推理模型,支持多种语言和任务,适用于研究和商业应用。
DeepSeek-R1 是 DeepSeek 团队推出的第一代推理模型,通过大规模强化学习训练,无需监督微调即可展现出卓越的推理能力。该模型在数学、代码和推理任务上表现优异,与 OpenAI-o1 模型相当。DeepSeek-R1 还提供了多种蒸馏模型,适用于不同规模和性能需求的场景。其开源特性为研究社区提供了强大的工具,支持商业使用和二次开发。
百聆是一个类似GPT-4o的语音对话机器人,通过ASR+LLM+TTS实现,低配置也可运行,支持打断。
百聆是一个开源的语音对话助手,旨在通过语音与用户进行自然的对话。该项目结合了语音识别(ASR)、语音活动检测(VAD)、大语言模型(LLM)和语音合成(TTS)技术,提供高质量的语音对话体验。其主要优点是无需GPU即可实现类GPT-4o的对话效果,适用于各种边缘设备和低资源环境。百聆完全开源,鼓励社区贡献与二次开发,用户可以根据自己的需求进行定制和优化。
一个基于文本生成图像的预训练模型,具有80亿参数和Apache 2.0开源许可。
Flex.1-alpha 是一个强大的文本到图像生成模型,基于80亿参数的修正流变换器架构。它继承了FLUX.1-schnell的特性,并通过训练指导嵌入器,使其无需CFG即可生成图像。该模型支持微调,并且具有开放源代码许可(Apache 2.0),适合在多种推理引擎中使用,如Diffusers和ComfyUI。其主要优点包括高效生成高质量图像、灵活的微调能力和开源社区支持。开发背景是为了解决图像生成模型的压缩和优化问题,并通过持续训练提升模型性能。
这是一个基于Qwen2.5-32B模型的4位量化版本,专为高效推理和低资源部署设计。
该产品是一个基于Qwen2.5-32B的4位量化语言模型,通过GPTQ技术实现高效推理和低资源消耗。它在保持较高性能的同时,显著降低了模型的存储和计算需求,适合在资源受限的环境中使用。该模型主要面向需要高性能语言生成的应用场景,如智能客服、编程辅助、内容创作等。其开源许可和灵活的部署方式使其在商业和研究领域具有广泛的应用前景。
一个开源的产品管理平台,借助AI帮助团队探索问题、构思解决方案、优先排序功能并规划路线图。
Eververse是一个开源的产品管理平台,旨在为产品团队提供一个高效、智能的工作环境。它通过AI技术,帮助团队成员快速处理用户反馈,自动生成产品待办事项列表,并通过预测性AI优先级排序等功能,优化产品规划和管理流程。Eververse的主要优点包括开源免费、强大的AI辅助写作和分析功能、高度可定制的视图和工作流等。它主要面向产品团队,尤其是那些需要快速迭代和优化产品路线图的团队。Eververse提供免费版本,同时也有一些高级功能需要付费解锁。
OpenLIT是用于GenAI和LLM应用可观察性的开源平台。
OpenLIT是一个开源的AI工程平台,专注于生成式AI和大型语言模型(LLM)应用的可观察性。它通过提供代码透明度、隐私保护、性能可视化等功能,帮助开发者简化AI开发流程,提高开发效率和应用性能。作为开源项目,用户可以自由查看代码或自行托管,确保数据安全和隐私。其主要优点包括易于集成、支持OpenTelemetry原生集成、提供细粒度的使用洞察等。OpenLIT面向AI开发者、数据科学家和企业,旨在帮助他们更好地构建、优化和管理AI应用。目前未明确具体价格,但从开源特性来看,可能对基础功能提供免费使用。
基于Kokoro和ONNX运行时的文本到语音(TTS)项目。
kokoro-onnx是一个基于Kokoro模型和ONNX运行时的文本到语音(TTS)项目。它支持英语,并计划支持法语、日语、韩语和中文。该模型在macOS M1上具有接近实时的快速性能,并提供多种声音选择,包括耳语。模型轻量级,约为300MB(量化后约为80MB)。该项目在GitHub上开源,采用MIT许可证,方便开发者集成和使用。
一个具有先进语音活动检测、唤醒词激活和即时转录功能的稳健、高效、低延迟的语音到文本库。
RealtimeSTT是一个开源的语音识别模型,能够实时将语音转换为文本。它使用了先进的语音活动检测技术,可以自动检测语音的开始和结束,无需手动操作。此外,它还支持唤醒词激活功能,用户可以通过说出特定的唤醒词来启动语音识别。该模型具有低延迟、高效率的特点,适合需要实时语音转录的应用场景,如语音助手、会议记录等。它基于Python开发,易于集成和使用,且在GitHub上开源,社区活跃,不断有新的更新和改进。
将电子书转换为有声书的工具。
Audiblez是一个利用Kokoro高质量语音合成技术,将普通电子书(.epub格式)转换为.m4b格式有声书的工具。它支持多种语言和声音,用户可以通过简单的命令行操作完成转换,极大地丰富了电子书的阅读体验,尤其适合在开车、运动等不方便阅读的场景下使用。该工具由Claudio Santini在2025年开发,遵循MIT许可证免费开源。
一个实时适应未见任务的自适应大型语言模型框架。
SakanaAI/self-adaptive-llms是一个名为Transformer²的自适应框架,旨在解决传统微调方法计算密集且处理多样化任务能力静态的挑战。该框架能够在推理过程中通过两步机制实时调整大型语言模型(LLMs)以适应未见任务:首先,调度系统识别任务属性;然后,使用强化学习训练的任务特定'专家'向量被动态混合,以获得针对输入提示的目标行为。主要优点包括实时任务适应性、计算效率和灵活性。该项目由SakanaAI团队开发,目前在GitHub上开源,拥有195颗星和12次分叉。
InternLM3-8B-Instruct是一个开源的80亿参数指令模型,用于通用用途和高级推理。
InternLM3-8B-Instruct是InternLM团队开发的大型语言模型,具有卓越的推理能力和知识密集型任务处理能力。该模型在仅使用4万亿高质量词元进行训练的情况下,实现了比同级别模型低75%以上的训练成本,同时在多个基准测试中超越了Llama3.1-8B和Qwen2.5-7B等模型。它支持深度思考模式,能够通过长思维链解决复杂的推理任务,同时也具备流畅的用户交互能力。该模型基于Apache-2.0许可证开源,适用于需要高效推理和知识处理的各种应用场景。
一个强大的OCR包,使用最先进的视觉语言模型提取图像中的文本。
ollama-ocr是一个基于ollama的光学字符识别(OCR)模型,能够从图像中提取文本。它利用先进的视觉语言模型,如LLaVA、Llama 3.2 Vision和MiniCPM-V 2.6,提供高精度的文本识别。该模型对于需要从图片中获取文本信息的场景非常有用,如文档扫描、图像内容分析等。它开源免费,易于集成到各种项目中。
一个开源的交互式开发环境,用于构建和优化基于LLM的数据处理管道。
DocWrangler是一个开源的交互式开发环境,旨在简化构建和优化基于大型语言模型(LLM)的数据处理管道的过程。它提供即时反馈、可视化探索工具和AI辅助功能,帮助用户更容易地探索数据、实验不同操作并根据发现优化管道。该产品基于DocETL框架构建,适用于处理非结构化数据,如文本分析、信息提取等。它不仅降低了LLM数据处理的门槛,还提高了工作效率,使用户能够更有效地利用LLM的强大功能。
面向设计工程师的 npm:基于 shadcn/ui 的 React Tailwind 组件、模块和钩子的最大市场
21st.dev是一个开源的React UI组件社区注册表,任何人都可以发布最小的Tailwind & Radix UI组件,并通过npx shadcn命令安装任何组件。它受到shadcn/ui的启发,旨在为设计工程师提供一个大型的组件、模块和钩子的市场。
通过视频扩散变换器将自定义照片与视频混合的项目。
Ingredients是一个研究项目,利用先进的视频扩散变换器技术,将特定身份的照片融入视频创作中,为视频定制化提供了强大的工具。该项目由feizc发起,目前处于研究阶段,推荐尝试更成熟的产品。其主要优点在于能够实现多ID照片的视频融合,为视频创作带来个性化和创新性。项目开源,遵循Apache-2.0许可协议,目前在GitHub上有34个星标。
开源的视觉语言模型,可在多种设备上运行。
Moondream AI是一个开源的视觉语言模型,具有强大的多模态处理能力。它支持多种量化格式,如fp16、int8、int4,能够在服务器、PC、移动设备等多种目标设备上进行GPU和CPU优化推理。其主要优点包括快速、高效、易于部署,且采用Apache 2.0许可证,允许用户自由使用和修改。Moondream AI的定位是为开发者提供一个灵活、高效的人工智能解决方案,适用于需要视觉和语言处理能力的各种应用场景。
一个仅100行代码的极简LLM框架,使LLM能够自主编程。
PocketFlow是一个极简的LLM框架,仅用100行代码实现,旨在让LLM能够自主编程。它强调高级编程范式,去除低级实现细节,使LLM能专注于重要部分。该框架可作为LLM的学习资源,因其简洁性,易于理解和上手。它采用嵌套有向图的核心抽象,将任务分解为多个LLM步骤,支持分支和递归决策。PocketFlow是开源项目,采用MIT许可证,具有高度的灵活性和可扩展性。
开源的SQL AI代理,让文本到SQL的转换变得简单。
Wren AI是一个开源的SQL AI代理,旨在帮助数据和产品团队通过自然语言与数据交互,生成SQL查询、图表、电子表格、报告和BI。它采用语义引擎架构,为LLM提供业务上下文,通过“建模定义语言”处理元数据、架构、术语、数据关系以及计算和聚合背后的逻辑,生成具有语义上下文的准确SQL查询。Wren AI的主要优点包括易于上手、安全可靠、开源免费,支持多种数据源和分析工具,如BigQuery、DuckDB、PostgreSQL等,并且可以与Excel、Google Sheets等流行工具集成。它还支持多种LLM模型,无论是托管在云端还是本地。Wren AI的定位是为数据团队提供一个强大的工具,以提高数据访问和分析的效率。
Amurex是一款AI会议辅助工具,提供实时建议、会议记录、总结要点等功能。
Amurex作为一款AI会议辅助工具,通过先进的搜索算法和实时处理技术,为用户提供会议中的实时建议、智能总结、跟进邮件生成等功能,帮助提升会议效率和团队协作。其开源特性也体现了对AGI控制权的重新定义,目前产品免费使用,适合各类需要高效会议管理的用户和企业。
AI语音代理测试与可观测性平台
fixa是一个专注于AI语音代理测试与可观测性的平台,旨在帮助开发者和企业快速发现并修复语音代理中的问题。通过自动化测试、生产监控和错误检测等功能,确保语音代理的稳定性和可靠性。该平台由Y Combinator资助,提供简单透明的定价策略,适合不同规模的企业使用。
一种支持多种视频生成控制任务的统一架构模型。
Diffusion as Shader (DaS) 是一种创新的视频生成控制模型,旨在通过3D感知的扩散过程实现对视频生成的多样化控制。该模型利用3D跟踪视频作为控制输入,能够在统一的架构下支持多种视频控制任务,如网格到视频生成、相机控制、运动迁移和对象操作等。DaS的主要优势在于其3D感知能力,能够有效提升生成视频的时间一致性,并在短时间内通过少量数据微调即可展现出强大的控制能力。该模型由香港科技大学等多所高校的研究团队共同开发,旨在推动视频生成技术的发展,为影视制作、虚拟现实等领域提供更为灵活和高效的解决方案。
© 2025 AIbase 备案号:闽ICP备08105208号-14