# FantasyID – 阿里联合北邮大学推出的身份保持视频生成框架

- Link: https://paooo.com/aigc-news/21580/
- Published: 2026-06-09T03:10:13+08:00
- Author: Prompt 语宙研究院

⚡ [Prompt](https://paooo.com/ai-image-prompts/) 语宙 AI 导读 · 30 秒核心看点

 * 基于扩散变换器与3D面部几何先验，FantasyID显著增强身份保持与结构稳定性。
 * 多视角人脸增强+分层感知注入，缓解“复制脸”问题并提升表情、姿态动态。
 * 无需针对单图微调即可生成高质量身份一致视频，适合大规模应用落地。

## FantasyID是什么

FantasyID 是阿里巴巴集团和北京邮电大学推出新型的身份保持[视频生成](https://ai-bot.cn/ai-video-generation-tools/)（
IPT2V）框架，基于增强人脸知识生成高质量的身份一致视频。FantasyID基于扩散变换器（
Diffusion Transformers），引入3D面部几何先验知识，确保视频合成中面部结构的稳定性
和合理性。FantasyID基于多视角人脸增强策略，避免模型简单复制参考人脸，增加面部表情
和头部姿态的动态性。FantasyID基于可学习的分层感知注入机制，将融合的2D和3D特征有选择
地注入到扩散模型的每一层，平衡身份保留和动作动态性。

阅读目录

 * [FantasyID是什么](https://paooo.com/aigc-news/21580/#fantasyid%e6%98%af%e4%bb%80%e4%b9%88)
 * [FantasyID的主要功能](https://paooo.com/aigc-news/21580/#fantasyid%e7%9a%84%e4%b8%bb%e8%a6%81%e5%8a%9f%e8%83%bd)
 * [FantasyID的技术原理](https://paooo.com/aigc-news/21580/#fantasyid%e7%9a%84%e6%8a%80%e6%9c%af%e5%8e%9f%e7%90%86)
 * [FantasyID的项目地址](https://paooo.com/aigc-news/21580/#fantasyid%e7%9a%84%e9%a1%b9%e7%9b%ae%e5%9c%b0%e5%9d%80)
 * [FantasyID的应用场景](https://paooo.com/aigc-news/21580/#fantasyid%e7%9a%84%e5%ba%94%e7%94%a8%e5%9c%ba%e6%99%af)

![FantasyID](https://paooo.com/wp-content/uploads/2026/06/FantasyID-website-1.avif)

## FantasyID的主要功能

 * **身份保留**：确保生成视频中的人物面部特征与输入的参考图像保持一致，在复杂的动作
   和表情变化中，维持高度的身份相似性。
 * **动态增强**：增加面部表情和头部姿态的多样性，避免生成视频中的“复制粘贴”现象。
 * **高质量视频生成**：结合3D面部几何先验和2D视觉特征，生成具有稳定结构和丰富细节
   的视频，同时保持视频的时空连贯性。
 * **无需微调**：无需针对每个输入图像进行额外的模型微调，实现高效、灵活的身份保留
   视频生成，适合大规模应用。

## FantasyID的技术原理

 * **3D 面部几何先验**：基于DECA框架从输入的人脸图像中提取3D面部结构（如形状点云），
   为视频生成提供稳定的几何约束，确保面部结构在动态变化中的稳定性。
 * **多视角人脸增强**：构建多视角人脸集合，从不同角度采样人脸图像，增强模型对2D面部
   外观特征的理解，避免生成视频中面部的单一性，提升动态表现。
 * **特征融合**：将提取的2D视觉特征和3D几何特征通过融合变换器结合，生成综合的面部
   描述符，用于指导视频生成。
 * **分层感知信号注入**：针对扩散变换器的层次化特性，设计一种可学习的分层感知机制，
   将融合后的特征有选择地注入到不同层次，实现身份保留与动态表现的平衡。
 * **扩散模型**：基于扩散模型的生成框架，通过逐步去噪的过程，从噪声中重建出符合文本
   描述和身份特征的视频内容。

## FantasyID的项目地址

 * **项目官网**：[https://fantasy-amap.github.io/fantasy-id/](https://fantasy-amap.github.io/fantasy-id/?utm_source=ai-bot.cn)
 * **GitHub仓库**：[https://github.com/Fantasy-AMAP/fantasy-id](https://github.com/Fantasy-AMAP/fantasy-id)
 * **arXiv技术论文**：[https://arxiv.org/pdf/2502.13995](https://arxiv.org/pdf/2502.13995)

## FantasyID的应用场景

 * **个性化虚拟形象**：用于虚拟社交、元宇宙和游戏，生成与用户身份一致的虚拟形象。
 * **虚拟内容创作**：生成动态视频内容，辅助影视、广告和短视频制作，降低创作成本。
 * **虚拟客服与数字人**：创建自然、逼真的数字人形象，用于在线客服和智能助手，提升
   交互体验。
 * **虚拟试妆与试衣**：结合电商和美容行业，生成试妆或试衣的动态视频，优化购物体验。
 * **互动式教育**：生成教师或培训师的动态视频，用于在线课程和模拟场景，增强教学效果。

❓ 常见问题解答（FAQ）

FantasyID适合做什么视频生成？

FantasyID主要用于身份保持视频生成，适合生成与参考人脸一致的动态视频。可用于虚拟形象、
数字人、短视频创作、虚拟试妆试衣和互动教育等场景，兼顾身份一致性与动作表现力。

FantasyID为什么能保持人物身份一致？

它通过DECA提取3D面部几何先验，再结合多视角人脸增强和2D/3D特征融合，把身份信息有选择
地注入扩散模型各层，从而在表情、头部姿态变化下仍尽量保持面部特征一致。

FantasyID需要针对每张图重新微调吗？

不需要。文章明确提到FantasyID支持无需微调的身份保持视频生成，这意味着输入参考图像
后即可直接生成视频，更适合高效使用和规模化应用。

🔬 语宙深潜追问 · 进阶实操拆解

身份保持和表情动态如何同时兼得？

关键是把身份特征和运动特征解耦：身份由稳定的几何与纹理约束，表情和动作由时序模块
驱动。实践中要避免过强的身份锁死，否则会牺牲表情幅度；也不能只追求动作自由，否则
容易脸崩。

这种框架适合哪些商业视频？

特别适合虚拟主播、数字人带货、品牌短片和角色化内容生产。若业务需要频繁换装、换场景
又要保持人物一致性，它能显著减少重拍和后期修脸成本，但仍建议配合人工审核与模板化
脚本。

🗳️ 读者观点微投票 · 您的实战立场是？

身份保持视频生成，最难的是像不像还是动得自然？

🕸️ 语宙向量知识图谱 · 语义强关联深度内链

[🐋 所属权威专题：DeepSeek 深度实战与部署 →](https://paooo.com/topics/deepseek/)

 * [ID-Animator – 腾讯等推出的个性化人物视频生成框架](https://paooo.com/aigc-news/27925/)
 * [FantasyTalking – 阿里联合北邮推出静态肖像生成可控数字人的框架](https://paooo.com/aigc-news/20414/)
 * [MagicPose – AI视频生成模型，能生成逼真的人体动作和面部表情](https://paooo.com/aigc-news/27463/)
 * [CharacterFactory – 大连理工推出的AI角色创作工具](https://paooo.com/aigc-news/27573/)

[🏛️ Prompt 语宙研究院](https://paooo.com/author/paooo-research/) · Prompt 语宙研究院（
paooo.com Research）专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示
词工程（Prompt Engineering）与全球高增长 AI 生产力工具实测追踪，致力于为中文开发
者与创作者提供一手、可复现的深度技术洞察。

[📄 Markdown 纯净版](https://paooo.com/aigc-news/21580/?format=md)

💡 这篇内容对您有启发吗？

[📡 RSS 订阅](https://paooo.com/feed/)[✨ 提交 AI 工具 / 合作](https://paooo.com/submit-tool/)

**🚀 Prompt 语宙 AI 创作者生态：**探索 2,800+ 全球实用 AI 工具与高精度生图提示词
咒语库

[🧭 语宙 AI 导航 (ai.paooo.com)](https://ai.paooo.com/)[🎨 AI 生图 Prompt 库](https://paooo.com/ai-image-prompts/)
[📚 核心专题导航](https://paooo.com/topics/)[⚡ AIGC 早报生成器](https://paooo.com/mtool/)
