---
title: "Wan-Streamer v0.2 – 阿里通义推出的全模态理解与生成模型"
url: "https://paooo.com/aigc-news/31383/"
author: "Prompt 语宙研究院"
published_at: "2026-07-17T20:00:35+08:00"
updated_at: "2026-07-17T20:00:35+08:00"
categories: "AIGC 资讯"
tags: "AI智能体, AI音频与语音, ChatGPT, OpenAI, 通义千问"
source: "Prompt 语宙 (https://paooo.com)"
ai_tools_directory: "语宙 AI 导航 (https://ai.paooo.com)"
---

# Wan-Streamer v0.2 – 阿里通义推出的全模态理解与生成模型

> 来源：[Prompt 语宙 (paooo.com)](https://paooo.com/aigc-news/31383/) · 作者：Prompt 语宙研究院 · 发布时间：2026-07-17

## AI 30 秒核心看点 (TL;DR)

- 将听、看、说、演统一进单个 Transformer，支持文本、音频、视频的实时理解与同步生成。
- 端到端响应延迟仅 550ms，模型侧约 200ms，支持 640×368@25FPS 的声画同步输出。
- 采用 Thinker-Performer 双通路与流式闭环架构，兼顾低延迟与高清视频生成。

## Wan-Streamer v0.2是什么

Wan-Streamer v0.2 是阿里通义实验室推出的面向实时双工交互的端到端全模态理解与生成模型。模型将”听、看、说、演”统一进单个 Transformer，原生支持文本、音频、视频的实时理解与同步生成，端到端响应延迟仅 550ms，输出分辨率 640×368@25FPS，让 AI 能像真人一样边听边看边回应，实现真正自然的面对面视频交流。

## Wan-Streamer v0.2的主要功能

- 
**实时音视频对话**：支持视频通话式面对面交互，AI 实时感知用户音视频并同步生成回应。

- 
**全模态理解**：原生支持文本、音频、视频输入的实时理解，无需外部模块拼装。

- 
**音视频同步生成**：同步输出语音与高清视频画面，实现声画完美同步。

- 
**微表情与手势生成**：可生成自然的眼神、身体姿态、手势动作及场景细节。

- 
**自由角色扮演**：支持通过自然语言描述实时生成任意角色进行对话。

## Wan-Streamer v0.2的技术原理

- 
**原生流式架构**：将用户输入与智能体输出统一映射到同一条因果时间线，无需等待整段话结束。

- 
**流式单元闭环**：每 160ms 完成一次感知、理解、生成、解码的完整闭环，实现边说边听边回应。

- 
**Thinker-Performer 双通路**：Thinker 单卡负责低延迟感知与语言推理，Performer 多卡 Ulysses 并行负责高清视频生成。

- 
**时序重叠调度**：单卡 Thinker 与多卡 Performer 计算窗口重叠，将视频生成成本从延迟敏感路径剥离。

- 
**端到端统一建模**：将文本、音频、视频输入与输出统一进单个 Transformer，避免流水线割裂。

## 如何使用Wan-Streamer v0.2

目前 Wan-Streamer v0.2 以研究项目形式发布，具体开放体验入口及 API 接入方式需关注通义实验室后续官方公告。

## Wan-Streamer v0.2的核心优势

- 
**极致低延迟**：端到端 550ms，模型侧仅 200ms，显著快于主流实时语音对话模型。

- 
**全模态端到端**：原生支持音视频同步理解与生成，无需 ASR、LLM、TTS 等外部模块拼装。

- 
**高画质输出**：640×368@25FPS，支持微表情、手势和场景细节，不再局限于悬浮头部。

- 
**全双工交互**：边说边听边回应，无需等待用户说完再处理，交流更自然。

- 
**架构可扩展**：Thinker-Performer 双通路设计在提升画质的同时保持极低延迟。

## Wan-Streamer v0.2的项目地址

- **项目官网**：https://wan-streamer.com/

- **arXiv技术论文**：https://arxiv.org/pdf/2607.04443

## Wan-Streamer v0.2的同类竞品对比

对比维度
Wan-Streamer v0.2
GPT-4o Realtime

研发方
阿里通义实验室
OpenAI

端到端延迟
约 0.55s（含 350ms 网络）
约 0.23–0.8s

模型侧延迟
约 200ms
约 230ms

视频输出
640×368 @ 25FPS
不支持

视频感知
支持
支持

音频输出
支持
支持

文本输出
支持
支持

端到端架构
原生端到端 Transformer
级联流水线（非端到端）

全双工交互
完全支持
部分支持

外部模块依赖
无（原生统一建模）
需 ASR + LLM + TTS 拼装

架构设计
Thinker-Performer 双通路 + Ulysses 并行
单一路径

## Wan-Streamer v0.2的应用场景

- 
**视频通话 AI 助手**：打开摄像头可面对面交流，适用口语陪练、面试模拟、心理咨询等需要”在场感”的场景。

- 
**场景化教育**：AI 老师可通过画面观察学生表情判断理解程度，实时调整教学节奏。

- 
**沉浸式游戏 NPC**：游戏角色拥有表情、肢体语言和实时反应，与玩家进行真正”面对面”对话。

- 
**无障碍交互**：为听障用户实时生成带精确唇语和手势的视频回应，为视障用户描述周围环境。

- 
**虚拟角色扮演**：可与历史人物、艺术形象或自定义角色实时对话，实现沉浸式文化体验。

## 常见问题解答 (FAQ)

### Wan-Streamer v0.2支持哪些输入输出？
它原生支持文本、音频、视频的实时理解，并同步生成语音与高清视频画面。文章提到模型可实现边听边看边回应，适合面对面视频交流、角色扮演和无障碍交互等场景。

### Wan-Streamer v0.2为什么延迟这么低？
核心在于原生流式架构与 Thinker-Performer 双通路设计。Thinker 负责低延迟感知和推理，Performer 负责高清视频生成，二者计算窗口重叠，减少了延迟敏感路径上的等待。

### Wan-Streamer v0.2现在可以直接使用吗？
目前它以研究项目形式发布，文章未给出公开体验入口或 API 接入方式。若想使用，需要关注通义实验室后续官方公告，以及项目官网和 arXiv 论文更新。

---
探索 2,800+ 全球实用 AI 工具与官方直达入口：[语宙 AI 导航 (https://ai.paooo.com/)](https://ai.paooo.com/)
