# DrivingDojo – 中科院联合美团推出的交互式驾驶世界模型数据集 - Link: https://paooo.com/aigc-news/24957/ - Published: 2026-07-10T20:48:29+08:00 - Author: Prompt 语宙研究院 ## DrivingDojo是什么 DrivingDojo是中国科学院自动化研究所与美团无人车团队合作推出的数据集，用在训练和研究 复杂的自动驾驶交互式世界模型。数据集包含18,000个视频片段，覆盖完整的驾驶操作、多 [智能体](https://paooo.com/trends/)交互以及丰富的开放世界驾驶知识，为开发下一代自动 驾驶模型提供了坚实的基础。DrivingDojo定义了动作指令跟随（AIF）基准，用在评估世界 模型在执行动作控制的未来预测方面的能力。 阅读目录 * [DrivingDojo是什么](https://paooo.com/aigc-news/24957/#drivingdojo%e6%98%af%e4%bb%80%e4%b9%88) * [DrivingDojo的主要功能](https://paooo.com/aigc-news/24957/#drivingdojo%e7%9a%84%e4%b8%bb%e8%a6%81%e5%8a%9f%e8%83%bd) * [DrivingDojo的技术原理](https://paooo.com/aigc-news/24957/#drivingdojo%e7%9a%84%e6%8a%80%e6%9c%af%e5%8e%9f%e7%90%86) * [DrivingDojo的项目地址](https://paooo.com/aigc-news/24957/#drivingdojo%e7%9a%84%e9%a1%b9%e7%9b%ae%e5%9c%b0%e5%9d%80) * [DrivingDojo的应用场景](https://paooo.com/aigc-news/24957/#drivingdojo%e7%9a%84%e5%ba%94%e7%94%a8%e5%9c%ba%e6%99%af) ![DrivingDojo](https://paooo.com/wp-content/uploads/2026/07/DrivingDojo-website- 1.avif) ## DrivingDojo的主要功能 * **交互式世界模型训练**：DrivingDojo提供一个平台，用在训练理解和模拟复杂驾驶动态 的交互式世界模型。 * **动作指令跟随（AIF）**：数据集定义AIF基准，评估世界模型在遵循动作指令生成未来 预测的能力。 * **多样化驾驶操作**：基于DrivingDojo-Action子集，模型学习加速、减速、紧急制动和 车道变换等多样化的驾驶操作。 * **多智能体交互**：用DrivingDojo-Interplay子集，模型能理解和预测车辆与其他道路 使用者之间的复杂交互。 * **开放世界知识**：用DrivingDojo-Open子集，模型学习处理开放世界中的罕见事件和长尾 场景。 * **视频生成与预测**：模型基于初始帧和动作指令生成未来的视频，模拟和预测驾驶场景。 ## DrivingDojo的技术原理 * **数据收集**：用美团无人车团队的自动驾驶车辆平台收集视频数据，。 * **数据策划**：从大量收集的数据中精选出包含丰富驾驶操作、多智能体交互和开放世界 知识的视频片段。 * **动作编码**：将驾驶动作（如加速、制动、转向）编码为模型能理解的格式，方便在视频 生成中使用。 * **视频生成模型**：基于如Stable Video Diffusion等技术，开发从初始帧和动作指令生成 视频的模型。 * **动作指令跟随（AIF）**：比较生成视频与输入动作指令的一致性，评估模型的预测准确 性。 * **评估指标**：用FID（Frechet Inception Distance）和FVD（Frechet Video Distance） 等指标评估生成视频的视觉质量，用AIF错误评估动作指令的跟随能力。 ## DrivingDojo的项目地址 * **项目官网**：[drivingdojo.github.io](https://drivingdojo.github.io/?utm_source=ai-bot.cn) * **GitHub仓库**：[https://github.com/Robertwyq/Drivingdojo](https://github.com/Robertwyq/Drivingdojo) * **HuggingFace模型库**：[https://huggingface.co/datasets/Yuqi1997/DrivingDojo](https://huggingface.co/datasets/Yuqi1997/DrivingDojo) * **arXiv技术论文**：[https://arxiv.org/pdf/2410.10738](https://arxiv.org/pdf/2410.10738) ## DrivingDojo的应用场景 * **自动驾驶算法开发**：研究人员开发和测试自动驾驶车辆的感知、预测和决策算法。 * **世界模型训练**：数据集用在训练模拟真实世界驾驶环境的交互式世界模型，模型能预测 未来的状态和可能的事件。 * **多智能体交互模拟**：模拟车辆与其他道路使用者（如行人、自行车、其他车辆）之间 的交互，优化自动驾驶车辆的交互策略。 * **罕见事件和长尾场景处理**：训练模型识别和响应罕见事件，如动物突然横穿道路或道路 上的障碍物，提高自动驾驶系统的安全性。 * **虚拟测试和验证**：在虚拟环境中测试自动驾驶系统，减少实车测试的成本和风险，加速 开发流程。 [🏛️ Prompt 语宙研究院](https://paooo.com/author/paooo-research/) · Prompt 语宙研究院（ paooo.com Research）专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示 词工程（Prompt Engineering）与全球高增长 AI 生产力工具实测追踪，致力于为中文开发 者与创作者提供一手、可复现的深度技术洞察。 [📄 Markdown 纯净版](https://paooo.com/aigc-news/24957/?format=md) 💡 这篇内容对您有启发吗？ [📡 RSS 订阅](https://paooo.com/feed/)[✨ 提交 AI 工具 / 合作](https://paooo.com/submit-tool/) **🚀 Prompt 语宙 AI 创作者生态：**探索 2,800+ 全球实用 AI 工具与高精度生图提示词 咒语库 [🧭 语宙 AI 导航 (ai.paooo.com)](https://ai.paooo.com/)[🎨 AI 生图 Prompt 库](https://paooo.com/ai-image-prompts/) [📚 核心专题导航](https://paooo.com/topics/)[⚡ AIGC 早报生成器](https://paooo.com/mtool/)