Prompt 语宙Prompt 语宙
  • 首页
  • 语宙 AI 导航
  • AIGC 资讯
    • AIGC 早报生成器Hot
    • 最新趋势
    • AI 工具
    • 热门资源
    • 强化 AI 学习
  • AI 绘图
    • Prompt 实战
    • AI 绘画教程
    • 模型精选
  • AI 图库
    • 人物
    • 展台场景
    • Banner
    • 游戏
    • 动物
    • 食物
    • 自然
    • 背景
    • 海报
    • 建筑
    • 室内设计
  • 出海数字营销宝典
  • AI 生图 Prompt
    • 写实人像
    • 产品与广告
    • 游戏资产与 3D
    • 界面与图标
    • 建筑与室内
    • 动漫与插画
    • 风景与自然
搜索 AIGC 资讯、Prompt 咒语与 AI 工具
  • 语宙 AI 导航
  • 全部资讯
  • AI 生图咒语库
  • AIGC 早报生成器
  • 核心专题
  • 提交工具 / 合作
© 2023–2026 Prompt 语宙 (paooo.com). HalfPX. All Rights Reserved.
阅读: FaceShot – 同济大学联合上海 AI Lab等推出的肖像动画生成框架
Share
通知 阅读更多
Font Resizer字体
Font Resizer字体
Prompt 语宙Prompt 语宙
搜索 AIGC 资讯、Prompt 咒语与 AI 工具
  • 首页
  • 语宙 AI 导航
  • AIGC 资讯
    • AIGC 早报生成器Hot
    • 最新趋势
    • AI 工具
    • 热门资源
    • 强化 AI 学习
  • AI 绘图
    • Prompt 实战
    • AI 绘画教程
    • 模型精选
  • AI 图库
    • 人物
    • 展台场景
    • Banner
    • 游戏
    • 动物
    • 食物
    • 自然
    • 背景
    • 海报
    • 建筑
    • 室内设计
  • 出海数字营销宝典
  • AI 生图 Prompt
    • 写实人像
    • 产品与广告
    • 游戏资产与 3D
    • 界面与图标
    • 建筑与室内
    • 动漫与插画
    • 风景与自然
已有帐户? 登陆
  • 语宙 AI 导航
  • 全部资讯
  • AI 生图咒语库
  • AIGC 早报生成器
  • 核心专题
  • 提交工具 / 合作
© 2023–2026 Prompt 语宙 (paooo.com). HalfPX. All Rights Reserved.
FaceShot – 同济大学联合上海 AI Lab等推出的肖像动画生成框架
Prompt 语宙 > AIGC 资讯 > FaceShot – 同济大学联合上海 AI Lab等推出的肖像动画生成框架
AIGC 资讯

FaceShot – 同济大学联合上海 AI Lab等推出的肖像动画生成框架

Prompt 语宙研究院
最近更新: 2026年6月7日 下午8:03
3D与空间智能 AI绘画提示词 AI视频生成 大模型微调 开源大模型
SHARE
⚡ Prompt 语宙 AI 导读 · 30 秒核心看点
  • 无需训练即可为人类、玩具、动物等任意角色生成自然肖像动画,突破现实肖像地标限制。
  • 外观引导地标匹配+坐标重定位双模块,兼顾语义一致性、全局运动与局部细节。
  • 可作为插件接入MOFA-Video等地标驱动模型,提升跨域动画的稳定性与整体效果。

FaceShot是什么

FaceShot是同济大学、上海 AI Lab和南京理工大学推出的新型无需训练的肖像动画生成框架。用外观引导的地标匹配模块和基于坐标的地标重定位模块,为各种角色生成精确且鲁棒的地标序列,基于潜在扩散模型的语义对应关系,跨越广泛的角色类型生成面部动作序列。将地标序列输入预训练的地标驱动动画模型生成动画视频。FaceShot突破对现实肖像地标的限制,适用于任何风格化的角色和驱动视频,或作为插件与任何地标驱动的动画模型兼容,显著提升整体性能。

阅读目录
  • FaceShot是什么
  • FaceShot的主要功能
  • FaceShot的技术原理
  • FaceShot的项目地址
  • FaceShot的应用场景

FaceShot

FaceShot的主要功能

  • 角色动画生成:为各种类型的角色生成流畅且自然的面部动画,保持角色的原始特征。
  • 跨领域动画:支持从人类视频驱动非人类角色(如玩具、动物等)的动画,扩展肖像动画的应用范围。
  • 无需训练:无需针对每个角色或驱动视频进行额外的训练或微调,直接生成高质量的动画。
  • 兼容性:作为插件与任何地标驱动的动画模型无缝集成。

FaceShot的技术原理

  • 外观引导的地标匹配模块:基于潜在扩散模型的语义对应关系,结合外观先验知识,为任意角色生成精确的面部地标。用DDIM逆过程从参考图像和目标图像中提取扩散特征,基于图像提示减少不同领域之间的外观差异。用余弦距离进行地标匹配,确保地标在语义上的一致性,引入外观画廊进一步优化匹配效果。
  • 基于坐标的地标重定位模块:基于坐标系变换捕捉驱动视频中的细微面部动作,生成与之对齐的地标序列。模块分为全局运动和局部运动两个阶段,全局运动负责计算面部的整体平移和旋转,局部运动则分别对眼睛、嘴巴、鼻子、眉毛和面部边界等部分进行相对运动和点运动的重定位。基于简单的坐标变换公式,模块能精确捕捉面部的全局和局部运动,生成稳定的地标序列。
  • 地标驱动的动画模型:模块将生成的地标序列输入预训练的动画模型(如MOFA-Video),生成最终的动画视频。将地标序列作为额外条件输入到动画模型的U-Net中,确保模型能精确跟踪地标序列中的运动。基于这种方式,动画模型能用地标序列生成与驱动视频一致的动画效果,保持角色的视觉身份,实现高质量的肖像动画生成。

FaceShot的项目地址

  • 项目官网:https://faceshot2024.github.io/faceshot/
  • GitHub仓库:https://github.com/open-mmlab/FaceShot
  • arXiv技术论文:https://arxiv.org/pdf/2503.00740

FaceShot的应用场景

  • 影视娱乐:为电影、电视剧中的角色生成生动动画,提升视觉效果。
  • 游戏开发:快速生成游戏角色动画,增强表现力和趣味性。
  • 教育领域:使教育内容更生动,提高学生学习兴趣和教学互动性。
  • 广告营销:生成品牌吉祥物动画,提升品牌形象和用户参与感。
  • VR/AR应用:生成虚拟角色动画,提升沉浸感和交互体验。
❓ 常见问题解答(FAQ)
FaceShot适合哪些角色动画生成?

FaceShot面向任意风格化角色都可用,不仅能做人类肖像动画,也支持玩具、动物等非人类角色。它通过地标匹配与重定位生成稳定序列,再交给预训练动画模型输出视频。

FaceShot为什么说是无需训练的框架?

因为它不需要针对每个角色或驱动视频单独微调。系统先生成适配目标角色的地标序列,再输入预训练地标驱动模型完成动画生成,省去额外训练成本。

FaceShot能和现有动画模型一起用吗?

可以。FaceShot可作为插件与任何地标驱动的动画模型兼容,例如文中提到的MOFA-Video。它把生成的地标序列作为额外条件输入模型,从而增强跟踪与动画质量。

🔬 语宙深潜追问 · 进阶实操拆解
任意角色动画最关键的技术点是什么?

最关键的是把驱动视频的运动信息和目标角色的外观信息解耦,再做稳定重定位。这样才能在玩具、动物等不同域之间迁移表情和动作,同时尽量保住身份特征,不至于一动就“变脸”。

如何兼容现有地标驱动模型?

要在地标映射层做统一接口,把目标角色的关键点空间对齐到驱动视频的运动轨迹。这样可以复用已有动画管线,只在前端增加外观引导和坐标重定位模块,迁移成本会低很多。

🗳️ 读者观点微投票 · 您的实战立场是?
跨域肖像动画,身份保持比动作迁移更难吗?
🕸️ 语宙向量知识图谱 · 语义强关联深度内链
🐋 所属权威专题:DeepSeek 深度实战与部署 →
  • CharacterFactory – 大连理工推出的AI角色创作工具
  • One Shot, One Talk – 中科大联合香港理工推出的动态图像生成技术
  • MagicPose – AI视频生成模型,能生成逼真的人体动作和面部表情
  • ID-Animator – 腾讯等推出的个性化人物视频生成框架
🏛️ Prompt 语宙研究院 · Prompt 语宙研究院(paooo.com Research)专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示词工程(Prompt Engineering)与全球高增长 AI 生产力工具实测追踪,致力于为中文开发者与创作者提供一手、可复现的深度技术洞察。
📄 Markdown 纯净版
💡 这篇内容对您有启发吗?
📡 RSS 订阅✨ 提交 AI 工具 / 合作
🚀 Prompt 语宙 AI 创作者生态:探索 2,800+ 全球实用 AI 工具与高精度生图提示词咒语库
🧭 语宙 AI 导航 (ai.paooo.com)🎨 AI 生图 Prompt 库📚 核心专题导航⚡ AIGC 早报生成器
InternVL3 – 上海 AI Lab 开源的多模态大语言模型
马斯克把Grok塞进Excel:选中一片数据就能问涨跌原因,图表直接插进表格
微软Mu模型发布:仅3.3亿参数,性能媲美Phi3.5,如何革新边缘AI体验?
小红书开源FireRed-Image-Edit:SOTA级图像编辑模型,文本引导编辑、老照片修复、虚拟试穿一步到位
京东AI Agent与腾讯元宝打通小程序生态,实现AI对话内一键下单
TAGGED:3D与空间智能AI绘画提示词AI视频生成大模型微调开源大模型
分享
Email 复制链接 打印
Share
Prompt 语宙研究院 头像
ByPrompt 语宙研究院
Follow:
Prompt 语宙研究院(paooo.com Research)专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示词工程(Prompt Engineering)与全球高增长 AI 生产力工具实测追踪,致力于为中文开发者与创作者提供一手、可复现的深度技术洞察。
上一篇 SWEET-RL – Meta 推出的多轮强化学习框架 SWEET-RL – Meta 推出的多轮强化学习框架
下一篇 LangGraph WhatsApp Agent – 用于构建与 WhatsApp 用户互动的 AI Agent LangGraph WhatsApp Agent – 用于构建与 WhatsApp 用户互动的 AI Agent
Ad image
Ad image

最近更新

NVIDIA Vera Rubin 亮相 MLPerf 评测并在训练与端点测试中领先
单GPU训练性能翻倍且智能体每瓦吞吐暴增10倍!NVIDIA Vera Rubin首战MLPerf大获全胜:DeepSeek-V3千卡扩展效率97%与Agentic端点推理全景深度拆解
AIGC 资讯
美国商务部大楼与半导体出口管制新规
算力超1200万TPP即触发许可且限期90天整改!美国商务部突发全球数据中心新规:封死离岸云端远程租用算力与废止AI扩散规则全景深度拆解
AIGC 资讯
AI 原生 CRM 初创公司 Dreamteam 获 5300 万美元融资,挑战 Salesforce 与 HubSpot
斩获5300万美元对标Salesforce!前Freshworks高管创办AI原生CRM Dreamteam:基于Company Brain虚拟记忆与自动化智能体流水线深度拆解
AI 工具
Optimizely 谈营销智能体落地:企业需将审核从输出转向输入
告别Vibe Coding虚火!Optimizely解密企业级营销智能体落地法则:从“输出审核”走向“输入约束”、专用Harness架构与800落地页规模化实战
最新趋势

相关推荐

RAG 与 GPT-4 的上下文窗口比较:准确性、成本和响应速度 [译]
强化 AI 学习

RAG 与 GPT-4 的上下文窗口比较:准确性、成本和响应速度 [译]

宝玉的分享
AI智能体 Llama OpenAI RAG检索增强 大模型微调
[AI生图咒语] 例441 – WILDCAMP 巨型帐篷广告海报
1
AI 生图 Prompt产品与广告

[AI生图咒语] 例441 – WILDCAMP 巨型帐篷广告海报

Prompt 语宙研究院
AI绘画提示词 Flux Midjourney
[AI生图咒语] 半写实二次元巨物化动漫女角
AI 生图 Prompt动漫与插画

[AI生图咒语] 半写实二次元巨物化动漫女角

Prompt 语宙研究院
AI绘画提示词 ChatGPT Midjourney stable diffusion
使用 NSFW 聊天机器人模拟人类 - 与 Jesse Silver 对话 [译]
强化 AI 学习

使用 NSFW 聊天机器人模拟人类 – 与 Jesse Silver 对话 [译]

宝玉的分享
ChatGPT Llama OpenAI stable diffusion 大模型微调
/ Prompt 语宙 /

探索生成式 AI 的无限创作潜能,一站式获取前沿 AIGC 资讯、高阶 Prompt 咒语与全球实用 AI 工具。

核心专栏

  • Remaker AI
  • BGRemaker 抠图Hot
  • AIGC 工具
  • Prompt 咒语生成器
  • 去水印工具

生态与服务

  • 语宙 AI 导航
  • 全部资讯
  • AI 生图咒语库
  • AIGC 早报生成器
  • 核心专题
  • 提交工具 / 合作

标签

开源大模型 AI智能体 AI办公效率 AI绘画提示词 OpenAI 大模型微调 Midjourney AI编程 stable diffusion AI视频生成 ChatGPT 3D与空间智能 HuggingFace AI音频与语音 RAG检索增强 Claude Flux AIGC Gemini 通义千问 Anthropic Llama Cursor DeepSeek Prompt AI Agent Kimi 智谱AI 具身智能 YouTube
Prompt 语宙Prompt 语宙
Follow US
© 2023–2026 Prompt 语宙 (paooo.com). HalfPX. All Rights Reserved.