# Wan-Streamer v0.2 – 阿里通义推出的全模态理解与生成模型

- Link: https://paooo.com/aigc-news/31383/
- Published: 2026-07-17T20:00:35+08:00
- Author: Prompt 语宙研究院

⚡ [Prompt](https://paooo.com/ai-image-prompts/) 语宙 AI 导读 · 30 秒核心看点

 * 将听、看、说、演统一进单个 Transformer，支持文本、音频、视频的实时理解与同步生成。
 * 端到端响应延迟仅 550ms，模型侧约 200ms，支持 640×368@25FPS 的声画同步输出。
 * 采用 Thinker-Performer 双通路与流式闭环架构，兼顾低延迟与高清视频生成。

## Wan-Streamer v0.2是什么

Wan-Streamer v0.2 是阿里通义实验室推出的面向实时双工交互的端到端全模态理解与生成
模型。模型将”听、看、说、演”统一进单个 Transformer，原生支持文本、音频、视频的实
时理解与同步生成，端到端响应延迟仅 550ms，输出分辨率 640×368@25FPS，让 AI 能像真人
一样边听边看边回应，实现真正自然的面对面视频交流。

阅读目录

 * [Wan-Streamer v0.2是什么](https://paooo.com/aigc-news/31383/#wanstreamer-v02%e6%98%af%e4%bb%80%e4%b9%88)
 * [Wan-Streamer v0.2的主要功能](https://paooo.com/aigc-news/31383/#wanstreamer-v02%e7%9a%84%e4%b8%bb%e8%a6%81%e5%8a%9f%e8%83%bd)
 * [Wan-Streamer v0.2的技术原理](https://paooo.com/aigc-news/31383/#wanstreamer-v02%e7%9a%84%e6%8a%80%e6%9c%af%e5%8e%9f%e7%90%86)
 * [如何使用Wan-Streamer v0.2](https://paooo.com/aigc-news/31383/#%e5%a6%82%e4%bd%95%e4%bd%bf%e7%94%a8wanstreamer-v02)
 * [Wan-Streamer v0.2的核心优势](https://paooo.com/aigc-news/31383/#wanstreamer-v02%e7%9a%84%e6%a0%b8%e5%bf%83%e4%bc%98%e5%8a%bf)
 * [Wan-Streamer v0.2的项目地址](https://paooo.com/aigc-news/31383/#wanstreamer-v02%e7%9a%84%e9%a1%b9%e7%9b%ae%e5%9c%b0%e5%9d%80)
 * [Wan-Streamer v0.2的同类竞品对比](https://paooo.com/aigc-news/31383/#wanstreamer-v02%e7%9a%84%e5%90%8c%e7%b1%bb%e7%ab%9e%e5%93%81%e5%af%b9%e6%af%94)
 * [Wan-Streamer v0.2的应用场景](https://paooo.com/aigc-news/31383/#wanstreamer-v02%e7%9a%84%e5%ba%94%e7%94%a8%e5%9c%ba%e6%99%af)

![Wan-Streamer v0.2](https://paooo.com/wp-content/uploads/2026/07/Wan-Streamer-v0.2-
website-1.avif)

## Wan-Streamer v0.2的主要功能

 * **实时音视频对话**：支持视频通话式面对面交互，AI 实时感知用户音视频并同步生成
   回应。
 * **全模态理解**：原生支持文本、音频、视频输入的实时理解，无需外部模块拼装。
 * **音视频同步生成**：同步输出语音与高清视频画面，实现声画完美同步。
 * **微表情与手势生成**：可生成自然的眼神、身体姿态、手势动作及场景细节。
 * **自由角色扮演**：支持通过自然语言描述实时生成任意角色进行对话。

## Wan-Streamer v0.2的技术原理

 * **原生流式架构**：将用户输入与[智能体](https://paooo.com/trends/)输出统一映射
   到同一条因果时间线，无需等待整段话结束。
 * **流式单元闭环**：每 160ms 完成一次感知、理解、生成、解码的完整闭环，实现边说
   边听边回应。
 * **Thinker-Performer 双通路**：Thinker 单卡负责低延迟感知与语言推理，Performer
   多卡 Ulysses 并行负责高清视频生成。
 * **时序重叠调度**：单卡 Thinker 与多卡 Performer 计算窗口重叠，将视频生成成本从
   延迟敏感路径剥离。
 * **端到端统一建模**：将文本、音频、视频输入与输出统一进单个 Transformer，避免流水
   线割裂。

## 如何使用Wan-Streamer v0.2

目前 Wan-Streamer v0.2 以研究项目形式发布，具体开放体验入口及 API 接入方式需关注
通义实验室后续官方公告。

## Wan-Streamer v0.2的核心优势

 * **极致低延迟**：端到端 550ms，模型侧仅 200ms，显著快于主流实时语音对话模型。
 * **全模态端到端**：原生支持音视频同步理解与生成，无需 ASR、LLM、TTS 等外部模块
   拼装。
 * **高画质输出**：640×368@25FPS，支持微表情、手势和场景细节，不再局限于悬浮头部。
 * **全双工交互**：边说边听边回应，无需等待用户说完再处理，交流更自然。
 * **架构可扩展**：Thinker-Performer 双通路设计在提升画质的同时保持极低延迟。

## Wan-Streamer v0.2的项目地址

 * **项目官网**：https://wan-streamer.com/
 * **arXiv技术论文**：https://arxiv.org/pdf/2607.04443

## Wan-Streamer v0.2的同类竞品对比

  |  对比维度 |  Wan-Streamer v0.2 |  GPT-4o Realtime |  
   |  研发方 |  阿里通义实验室 |  [OpenAI](https://paooo.com/tag/openai/) |  
 |  端到端延迟 |  约 0.55s（含 350ms 网络） |  约 0.23–0.8s |  
 |  模型侧延迟 |  约 200ms |  约 230ms |  
 |  视频输出 |  640×368 @ 25FPS |  不支持 |  
 |  视频感知 |  支持 |  支持 |  
 |  音频输出 |  支持 |  支持 |  
 |  文本输出 |  支持 |  支持 |  
 |  端到端架构 |  原生端到端 Transformer |  级联流水线（非端到端） |  
 |  全双工交互 |  完全支持 |  部分支持 |  
 |  外部模块依赖 |  无（原生统一建模） |  需 ASR + LLM + TTS 拼装 |  
 |  架构设计 |  Thinker-Performer 双通路 + Ulysses 并行 |  单一路径 |

## Wan-Streamer v0.2的应用场景

 * **视频通话 AI 助手**：打开摄像头可面对面交流，适用口语陪练、面试模拟、心理咨询
   等需要”在场感”的场景。
 * **场景化教育**：AI 老师可通过画面观察学生表情判断理解程度，实时调整教学节奏。
 * **沉浸式游戏 NPC**：游戏角色拥有表情、肢体语言和实时反应，与玩家进行真正”面对
   面”对话。
 * **无障碍交互**：为听障用户实时生成带精确唇语和手势的视频回应，为视障用户描述周围
   环境。
 * **虚拟角色扮演**：可与历史人物、艺术形象或自定义角色实时对话，实现沉浸式文化体验。

❓ 常见问题解答（FAQ）

Wan-Streamer v0.2支持哪些输入输出？

它原生支持文本、音频、视频的实时理解，并同步生成语音与高清视频画面。文章提到模型
可实现边听边看边回应，适合面对面视频交流、角色扮演和无障碍交互等场景。

Wan-Streamer v0.2为什么延迟这么低？

核心在于原生流式架构与 Thinker-Performer 双通路设计。Thinker 负责低延迟感知和推理，
Performer 负责高清视频生成，二者计算窗口重叠，减少了延迟敏感路径上的等待。

Wan-Streamer v0.2现在可以直接使用吗？

目前它以研究项目形式发布，文章未给出公开体验入口或 API 接入方式。若想使用，需要关注
通义实验室后续官方公告，以及项目官网和 arXiv 论文更新。

🔬 语宙深潜追问 · 进阶实操拆解

实时双工最难的技术点是什么？

最难的是端到端时延、语音打断处理和多模态同步。要做到自然对话，必须同时优化流式编码、
VAD/ASR/TTS 链路和画面生成节奏，否则会出现抢话、口型不同步和表情漂移。

虚拟角色产品怎么避免“假人感”？

要把角色一致性、情绪状态和动作节奏做成统一状态机，而不是每帧独立生成。再配合固定
人设、可控表情库和低延迟反馈，才能让用户感到“在和同一个人互动”，而不是看动画拼接。

🗳️ 读者观点微投票 · 您的实战立场是？

550ms 双工音视频，真能做实时陪伴吗？

🕸️ 语宙向量知识图谱 · 语义强关联深度内链

[⚡ 所属权威专题：OpenAI GPT 与 Sora 生态 →](https://paooo.com/topics/openai-gpt-sora/)

 * [Wan-Streamer – 阿里开源的实时全双工多模态基础模型](https://paooo.com/aigc-news/24131/)
 * [超低延迟 AI 对话神器！Wan-Streamer v0.2 让你与 AI 零距离沟通](https://paooo.com/aigc-news/31329/)
 * [阿里通义开源 Wan2.2-S2V：一张图+一段音频，分钟级生成电影级数字人视频的多模态大模型](https://paooo.com/aigc-news/13987/)
 * [Wan2.1 – 阿里开源的AI视频生成大模型](https://paooo.com/aigc-news/21561/)

[🏛️ Prompt 语宙研究院](https://paooo.com/author/paooo-research/) · Prompt 语宙研究院（
paooo.com Research）专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示
词工程（Prompt Engineering）与全球高增长 AI 生产力工具实测追踪，致力于为中文开发
者与创作者提供一手、可复现的深度技术洞察。

[📄 Markdown 纯净版](https://paooo.com/aigc-news/31383/?format=md)

💡 这篇内容对您有启发吗？

[📡 RSS 订阅](https://paooo.com/feed/)[✨ 提交 AI 工具 / 合作](https://paooo.com/submit-tool/)

**🚀 Prompt 语宙 AI 创作者生态：**探索 2,800+ 全球实用 AI 工具与高精度生图提示词
咒语库

[🧭 语宙 AI 导航 (ai.paooo.com)](https://ai.paooo.com/)[🎨 AI 生图 Prompt 库](https://paooo.com/ai-image-prompts/)
[📚 核心专题导航](https://paooo.com/topics/)[⚡ AIGC 早报生成器](https://paooo.com/mtool/)
