# Aether – 上海 AI Lab 开源的生成式世界模型

- Link: https://paooo.com/aigc-news/20250/
- Published: 2026-06-08T08:32:52+08:00
- Author: Prompt 语宙研究院

⚡ [Prompt](https://paooo.com/ai-image-prompts/) 语宙 AI 导读 · 30 秒核心看点

 * 首次将三维时空建模与生成式建模深度融合，统一支持重建、预测与规划三类任务。
 * 完全基于合成 4D 数据训练，借助扩散模型与多模态融合实现真实世界零样本泛化。
 * 适用于机器人导航、自动驾驶、工业机器人等场景，强调空间推理与行动决策能力。

## Aether是什么

Aether 是上海AI Lab开源的生成式世界模型，完全基于合成数据训练。Aether 首次将三维
时空建模与生成式建模深度融合，具备 4D 动态重建、动作条件视频预测和目标导向视觉规划
三大核心能力。Aether 能感知环境、理解物体位置和运动关系，做出智能决策。Aether 在
真实世界中展现出强大的零样本泛化能力，使用虚拟数据训练完成高效完成复杂任务，为具
身智能系统提供强大的空间推理和决策支持。

阅读目录

 * [Aether是什么](https://paooo.com/aigc-news/20250/#aether%e6%98%af%e4%bb%80%e4%b9%88)
 * [Aether的主要功能](https://paooo.com/aigc-news/20250/#aether%e7%9a%84%e4%b8%bb%e8%a6%81%e5%8a%9f%e8%83%bd)
 * [Aether的技术原理](https://paooo.com/aigc-news/20250/#aether%e7%9a%84%e6%8a%80%e6%9c%af%e5%8e%9f%e7%90%86)
 * [Aether的项目地址](https://paooo.com/aigc-news/20250/#aether%e7%9a%84%e9%a1%b9%e7%9b%ae%e5%9c%b0%e5%9d%80)
 * [Aether的应用场景](https://paooo.com/aigc-news/20250/#aether%e7%9a%84%e5%ba%94%e7%94%a8%e5%9c%ba%e6%99%af)

![Aether](https://paooo.com/wp-content/uploads/2026/06/Aether-website-2-1.avif)

## Aether的主要功能

 * **4D 动态重建**：从视频中重建包含时间和空间的三维场景模型，捕捉动态变化。
 * **动作条件视频预测**：根据初始观察和动作轨迹预测未来场景的变化。
 * **目标导向视觉规划**：根据起始和目标场景生成合理路径，辅助智能系统规划行动路线。

## Aether的技术原理

 * **统一多任务框架**：将动态重建、视频预测和动作规划三项任务融合在一个统一的框架
   中进行优化。基于任务交错的特征学习，实现不同任务之间的协同优化，提升模型的稳定
   性和鲁棒性。
 * **几何感知建模**：引入三维时空建模，构建几何空间提升模型的空间推理能力。用海量
   仿真 RGBD 数据（彩色图像和深度图），开发一套完整的数据清洗与动态重建流程，标注
   丰富的动作序列。
 * **相机轨迹作为动作表征**：选择相机轨迹作为全局动作的表示方式。在导航任务中，相机
   轨迹直接对应导航路径；在机器人操作中，手柄相机的运动可以捕捉末端执行器的 6D 运动。
 * **扩散模型与多模态融合**：基于预训练的视频扩散模型，用合成 4D 数据进行后训练。
   将深度视频转换为尺度不变的归一化视差表示，将相机轨迹编码为与扩散变换器（DiTs）
   时空框架对齐的尺度不变射线图序列表示。基于动态整合跨任务和跨模态的条件信号，Aether
   实现多模态信息的融合和协同优化。
 * **零样本泛化能力**：完全在虚拟数据上训练，实现对真实世界的零样本泛化。基于组合
   不同的条件输入（如观察帧、目标帧和动作轨迹），结合扩散过程，实现对多种任务的统一
   建模与生成。让模型在没有真实世界数据的情况下，迁移到真实场景中表现出色。

## Aether的项目地址

 * **项目官网**：[https://aether-world.github.io/](https://aether-world.github.io/?utm_source=ai-bot.cn)
 * **GitHub仓库**：[https://github.com/OpenRobotLab/Aether](https://github.com/OpenRobotLab/Aether)
 * **HuggingFace模型库**：[https://huggingface.co/AetherWorldModel/AetherV1](https://huggingface.co/AetherWorldModel/AetherV1)
 * **arXiv技术论文**：[https://arxiv.org/pdf/2503.18945](https://arxiv.org/pdf/2503.18945)
 * **在线体验Demo**：[https://huggingface.co/spaces/AmberHeart/AetherV1](https://huggingface.co/spaces/AmberHeart/AetherV1)

## Aether的应用场景

 * **机器人导航**：帮助机器人规划路径，避开动态障碍。
 * **自动驾驶**：实时重建道路场景，预测交通动态。
 * **虚拟现实**：生成沉浸式虚拟场景，增强用户体验。
 * **工业机器人**：优化机器人操作路径，提高生产效率。
 * **智能监控**：分析监控视频，预测异常行为。

🧭 文中关联 [AI 工具](https://ai.paooo.com/)官网与参数卡（语宙 AI 导航）

**HuggingFace ↗**

HuggingFace：AI模型开发社区，面向大语言模型场景提供便捷实用的在线功能支持，涵盖大
模型等实用方向。

❓ 常见问题解答（FAQ）

Aether 是什么类型的模型？

Aether 是上海 AI Lab 开源的生成式世界模型，核心特点是把三维时空建模与生成式建模结合
起来，支持 4D 动态重建、动作条件视频预测和目标导向视觉规划，面向具身智能与空间推理
任务。

Aether 为什么强调零样本泛化？

因为它完全基于合成数据训练，不依赖真实世界数据，也能迁移到真实场景中完成任务。文章
提到它通过组合观察帧、目标帧和动作轨迹等条件输入，实现对多种任务的统一建模与生成。

Aether 可以用在哪些场景？

Aether 适合机器人导航、自动驾驶、虚拟现实、工业机器人和智能监控等场景。它能帮助系统
重建环境、预测动态变化，并生成合理行动路径，从而提升规划与决策能力。

🔬 语宙深潜追问 · 进阶实操拆解

世界模型怎么验证零样本泛化？

不要只看静态指标，最好在未见过的道路、光照和障碍组合上做闭环测试，观察规划成功率、
碰撞率和长时稳定性。若能跨场景保持一致的空间推理与动作预测，才算真正接近零样本泛
化。

4D重建与动作预测如何协同？

4D重建负责恢复时空结构，动作条件视频预测负责模拟“下一步会发生什么”，两者结合才能
支持规划。工程上可先用重建建立可解释场景表征，再用预测头输出候选轨迹与风险评估。

🗳️ 读者观点微投票 · 您的实战立场是？

合成数据训练世界模型靠谱吗？

🕸️ 语宙向量知识图谱 · 语义强关联深度内链

[🌐 所属权威专题：Gemini 全模态与空间智能 →](https://paooo.com/topics/gemini-multimodal/)

 * [EnerVerse – 智元机器人推出的首个机器人4D世界模型](https://paooo.com/aigc-news/23184/)
 * [TesserAct – AI 4D具身世界模型，能预测3D场景的动态演变](https://paooo.com/aigc-news/20064/)
 * [高德发布通用世界模型工坊ABot-World Studio 支持实时交互的AI数字世界](https://paooo.com/aigc-news/30392/)
 * [蚂蚁灵波科技开源LingBot-World：交互式世界模型，实时生成近10分钟连续视频，赋能机器人训练与自动驾驶仿真](https://paooo.com/trends/11553/)

[🏛️ Prompt 语宙研究院](https://paooo.com/author/paooo-research/) · Prompt 语宙研究院（
paooo.com Research）专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示
词工程（Prompt Engineering）与全球高增长 AI 生产力工具实测追踪，致力于为中文开发
者与创作者提供一手、可复现的深度技术洞察。

[📄 Markdown 纯净版](https://paooo.com/aigc-news/20250/?format=md)

💡 这篇内容对您有启发吗？

[📡 RSS 订阅](https://paooo.com/feed/)[✨ 提交 AI 工具 / 合作](https://paooo.com/submit-tool/)

**🚀 Prompt 语宙 AI 创作者生态：**探索 2,800+ 全球实用 AI 工具与高精度生图提示词
咒语库

[🧭 语宙 AI 导航 (ai.paooo.com)](https://ai.paooo.com/)[🎨 AI 生图 Prompt 库](https://paooo.com/ai-image-prompts/)
[📚 核心专题导航](https://paooo.com/topics/)[⚡ AIGC 早报生成器](https://paooo.com/mtool/)
