# FaceShot – 同济大学联合上海 AI Lab等推出的肖像动画生成框架

- Link: https://paooo.com/aigc-news/18927/
- Published: 2026-06-08T12:12:22+08:00
- Author: Prompt 语宙研究院

⚡ [Prompt](https://paooo.com/ai-image-prompts/) 语宙 AI 导读 · 30 秒核心看点

 * 无需训练即可为人类、玩具、动物等任意角色生成自然肖像动画，突破现实肖像地标限制。
 * 外观引导地标匹配+坐标重定位双模块，兼顾语义一致性、全局运动与局部细节。
 * 可作为插件接入MOFA-Video等地标驱动模型，提升跨域动画的稳定性与整体效果。

## FaceShot是什么

FaceShot是同济大学、上海 AI Lab和南京理工大学推出的新型无需训练的肖像动画生成框架。
用外观引导的地标匹配模块和基于坐标的地标重定位模块，为各种角色生成精确且鲁棒的地
标序列，基于潜在扩散模型的语义对应关系，跨越广泛的角色类型生成面部动作序列。将地
标序列输入预训练的地标驱动动画模型生成动画视频。FaceShot突破对现实肖像地标的限制，
适用于任何风格化的角色和驱动视频，或作为插件与任何地标驱动的动画模型兼容，显著提升
整体性能。

阅读目录

 * [FaceShot是什么](https://paooo.com/aigc-news/18927/#faceshot%e6%98%af%e4%bb%80%e4%b9%88)
 * [FaceShot的主要功能](https://paooo.com/aigc-news/18927/#faceshot%e7%9a%84%e4%b8%bb%e8%a6%81%e5%8a%9f%e8%83%bd)
 * [FaceShot的技术原理](https://paooo.com/aigc-news/18927/#faceshot%e7%9a%84%e6%8a%80%e6%9c%af%e5%8e%9f%e7%90%86)
 * [FaceShot的项目地址](https://paooo.com/aigc-news/18927/#faceshot%e7%9a%84%e9%a1%b9%e7%9b%ae%e5%9c%b0%e5%9d%80)
 * [FaceShot的应用场景](https://paooo.com/aigc-news/18927/#faceshot%e7%9a%84%e5%ba%94%e7%94%a8%e5%9c%ba%e6%99%af)

![FaceShot](https://paooo.com/wp-content/uploads/2026/06/FaceShot-website-1.avif)

## FaceShot的主要功能

 * **角色动画生成**：为各种类型的角色生成流畅且自然的面部动画，保持角色的原始特征。
 * **跨领域动画**：支持从人类视频驱动非人类角色（如玩具、动物等）的动画，扩展肖像
   动画的应用范围。
 * **无需训练**：无需针对每个角色或驱动视频进行额外的训练或微调，直接生成高质量的
   动画。
 * **兼容性**：作为插件与任何地标驱动的动画模型无缝集成。

## FaceShot的技术原理

 * **外观引导的地标匹配模块**：基于潜在扩散模型的语义对应关系，结合外观先验知识，
   为任意角色生成精确的面部地标。用DDIM逆过程从参考图像和目标图像中提取扩散特征，
   基于图像提示减少不同领域之间的外观差异。用余弦距离进行地标匹配，确保地标在语义
   上的一致性，引入外观画廊进一步优化匹配效果。
 * **基于坐标的地标重定位模块**：基于坐标系变换捕捉驱动视频中的细微面部动作，生成
   与之对齐的地标序列。模块分为全局运动和局部运动两个阶段，全局运动负责计算面部的
   整体平移和旋转，局部运动则分别对眼睛、嘴巴、鼻子、眉毛和面部边界等部分进行相对
   运动和点运动的重定位。基于简单的坐标变换公式，模块能精确捕捉面部的全局和局部运动，
   生成稳定的地标序列。
 * **地标驱动的动画模型**：模块将生成的地标序列输入预训练的动画模型（如MOFA-Video），
   生成最终的动画视频。将地标序列作为额外条件输入到动画模型的U-Net中，确保模型能
   精确跟踪地标序列中的运动。基于这种方式，动画模型能用地标序列生成与驱动视频一致
   的动画效果，保持角色的视觉身份，实现高质量的肖像动画生成。

## FaceShot的项目地址

 * **项目官网**：[https://faceshot2024.github.io/faceshot/](https://faceshot2024.github.io/faceshot/?utm_source=ai-bot.cn)
 * **GitHub仓库**：[https://github.com/open-mmlab/FaceShot](https://github.com/open-mmlab/FaceShot)
 * **arXiv技术论文**：[https://arxiv.org/pdf/2503.00740](https://arxiv.org/pdf/2503.00740)

## FaceShot的应用场景

 * **影视娱乐**：为电影、电视剧中的角色生成生动动画，提升视觉效果。
 * **游戏开发**：快速生成游戏角色动画，增强表现力和趣味性。
 * **教育领域**：使教育内容更生动，提高学生学习兴趣和教学互动性。
 * **广告营销**：生成品牌吉祥物动画，提升品牌形象和用户参与感。
 * **VR/AR应用**：生成虚拟角色动画，提升沉浸感和交互体验。

❓ 常见问题解答（FAQ）

FaceShot适合哪些角色动画生成？

FaceShot面向任意风格化角色都可用，不仅能做人类肖像动画，也支持玩具、动物等非人类
角色。它通过地标匹配与重定位生成稳定序列，再交给预训练动画模型输出视频。

FaceShot为什么说是无需训练的框架？

因为它不需要针对每个角色或驱动视频单独微调。系统先生成适配目标角色的地标序列，再
输入预训练地标驱动模型完成动画生成，省去额外训练成本。

FaceShot能和现有动画模型一起用吗？

可以。FaceShot可作为插件与任何地标驱动的动画模型兼容，例如文中提到的MOFA-Video。
它把生成的地标序列作为额外条件输入模型，从而增强跟踪与动画质量。

🔬 语宙深潜追问 · 进阶实操拆解

任意角色动画最关键的技术点是什么？

最关键的是把驱动视频的运动信息和目标角色的外观信息解耦，再做稳定重定位。这样才能
在玩具、动物等不同域之间迁移表情和动作，同时尽量保住身份特征，不至于一动就“变脸”。

如何兼容现有地标驱动模型？

要在地标映射层做统一接口，把目标角色的关键点空间对齐到驱动视频的运动轨迹。这样可以
复用已有动画管线，只在前端增加外观引导和坐标重定位模块，迁移成本会低很多。

🗳️ 读者观点微投票 · 您的实战立场是？

跨域肖像动画，身份保持比动作迁移更难吗？

🕸️ 语宙向量知识图谱 · 语义强关联深度内链

[🐋 所属权威专题：DeepSeek 深度实战与部署 →](https://paooo.com/topics/deepseek/)

 * [CharacterFactory – 大连理工推出的AI角色创作工具](https://paooo.com/aigc-news/27573/)
 * [One Shot, One Talk – 中科大联合香港理工推出的动态图像生成技术](https://paooo.com/aigc-news/25023/)
 * [MagicPose – AI视频生成模型，能生成逼真的人体动作和面部表情](https://paooo.com/aigc-news/27463/)
 * [ID-Animator – 腾讯等推出的个性化人物视频生成框架](https://paooo.com/aigc-news/27925/)

[🏛️ Prompt 语宙研究院](https://paooo.com/author/paooo-research/) · Prompt 语宙研究院（
paooo.com Research）专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示
词工程（Prompt Engineering）与全球高增长 AI 生产力工具实测追踪，致力于为中文开发
者与创作者提供一手、可复现的深度技术洞察。

[📄 Markdown 纯净版](https://paooo.com/aigc-news/18927/?format=md)

💡 这篇内容对您有启发吗？

[📡 RSS 订阅](https://paooo.com/feed/)[✨ 提交 AI 工具 / 合作](https://paooo.com/submit-tool/)

**🚀 Prompt 语宙 AI 创作者生态：**探索 2,800+ 全球实用 AI 工具与高精度生图提示词
咒语库

[🧭 语宙 AI 导航 (ai.paooo.com)](https://ai.paooo.com/)[🎨 AI 生图 Prompt 库](https://paooo.com/ai-image-prompts/)
[📚 核心专题导航](https://paooo.com/topics/)[⚡ AIGC 早报生成器](https://paooo.com/mtool/)
