# Ingredients – 多ID照片定制视频生成框架，基于多ID照片与视频扩散相结合

- Link: https://paooo.com/aigc-news/23175/
- Published: 2026-06-09T00:07:01+08:00
- Author: Prompt 语宙研究院

⚡ [Prompt](https://paooo.com/ai-image-prompts/) 语宙 AI 导读 · 30 秒核心看点

 * 通过面部提取器、多尺度投影器和ID路由器，Ingredients实现多身份视频生成的稳定身份
   保持。
 * 框架支持文本提示控制内容，同时无需为每个新身份单独训练或微调，定制效率更高。
 * 适合虚拟偶像、广告、教育、社交媒体与VR旅游等多场景个性化视频创作。

## Ingredients是什么

Ingredients是强大的框架，基于将多个特定身份（ID）照片与视频扩散Transformer相结合，
用在定制视频创作。Ingredients基于三个核心模块实现高度定制化的视频生成：面部提取器、
多尺度投影器和ID路由器。面部提取器从全局和局部视角捕捉每个身份的面部特征；多尺度
投影器将这些特征映射到视频扩散模型的上下文中；ID路由器则动态分配和组合多个身份特征
到相应的时间空间区域。基于精心设计的多阶段训练协议，Ingredients能在无需提示约束的
情况下，生成具有高度身份保真度和内容灵活性的个性化视频。

阅读目录

 * [Ingredients是什么](https://paooo.com/aigc-news/23175/#ingredients%e6%98%af%e4%bb%80%e4%b9%88)
 * [Ingredients的主要功能](https://paooo.com/aigc-news/23175/#ingredients%e7%9a%84%e4%b8%bb%e8%a6%81%e5%8a%9f%e8%83%bd)
 * [Ingredients的技术原理](https://paooo.com/aigc-news/23175/#ingredients%e7%9a%84%e6%8a%80%e6%9c%af%e5%8e%9f%e7%90%86)
 * [Ingredients的项目地址](https://paooo.com/aigc-news/23175/#ingredients%e7%9a%84%e9%a1%b9%e7%9b%ae%e5%9c%b0%e5%9d%80)
 * [Ingredients的应用场景](https://paooo.com/aigc-news/23175/#ingredients%e7%9a%84%e5%ba%94%e7%94%a8%e5%9c%ba%e6%99%af)

![Ingredients](https://paooo.com/wp-content/uploads/2026/06/Ingredients-website-
1.avif)

## Ingredients的主要功能

 * **保持身份一致性**：在生成的视频中保持多个参考图像中人物身份的一致性。
 * **灵活的内容控制**：支持用户用文本提示对视频内容进行精确控制。
 * **高质量视频生成**：生成具有高视觉质量和自然过渡的视频内容。
 * **无需训练的定制**：无需针对每个新身份进行模型训练或微调，实现定制化视频生成。

## Ingredients的技术原理

 * **面部提取器**：负责从输入的参考图像中提取每个身份的面部特征。基于全局和局部相
   结合的方法，从全局视角提取整体面部信息，从局部视角提取细节特征，确保生成视频中
   人物面部的多样性和准确性。
 * **多尺度投影器**：将提取的面部特征嵌入映射到视频扩散变换器的图像查询上下文中。
   用多尺度特征融合和交叉注意力机制，使面部特征与视频扩散模型中的视觉令牌进行有效
   交互，在生成过程中准确地反映人物身份信息。
 * **ID路由器**：负责在视频生成的时间空间区域内动态分配和组合多个身份特征。基于位置
   感知的路由网络，将每个潜在的面部区域分配给唯一的身份特征，避免身份特征的混合和
   混淆，确保生成视频中不同人物身份的清晰区分和一致性表达。

## Ingredients的项目地址

 * **GitHub仓库**：[https://github.com/feizc/Ingredients](https://github.com/feizc/Ingredients)
 * **HuggingFace模型库**：[https://huggingface.co/feizhengcong/Ingredients](https://huggingface.co/feizhengcong/Ingredients)
 * **arXiv技术论文**：[https://arxiv.org/pdf/2501.01790](https://arxiv.org/pdf/2501.01790)

## Ingredients的应用场景

 * **娱乐创作**：为虚拟偶像制作一段多场景的音乐视频，保持其面部特征和风格一致，增强
   粉丝互动。
 * **广告行业**：为时尚品牌定制不同风格的广告，展示目标受众在校园、街头等场景下的
   时尚造型，提高品牌吸引力。
 * **教育教学**：在语言学习应用中，创建国际会议场景视频，学习者观看不同国家代表的
   交流，学习商务英语和跨文化沟通。
 * **社交媒体**：用户制作家族历史视频，结合老照片和口述故事，展现家族成员在不同年代
   的生活场景，分享在社交媒体上引发共鸣。
 * **虚拟现实**：在虚拟现实旅游应用中，生成用户与虚拟导游在景点游览的视频，导游详细
   介绍景点历史和文化，增强旅游体验的真实感。

🧭 文中关联 [AI 工具](https://ai.paooo.com/)官网与参数卡（语宙 AI 导航）

**HuggingFace ↗**

HuggingFace：AI模型开发社区，面向大语言模型场景提供便捷实用的在线功能支持，涵盖大
模型等实用方向。

❓ 常见问题解答（FAQ）

Ingredients适合做什么类型的视频生成？

它主要用于多ID照片定制视频生成，适合需要同时保留多个人物身份一致性的场景，如虚拟
偶像、广告短片、教育演示、家族纪念视频和VR导览等。

Ingredients为什么能保持人物身份一致性？

核心在于面部提取器、多尺度投影器和ID路由器协同工作：先提取身份特征，再映射到视频
扩散模型上下文，最后按时间空间区域动态分配身份，减少混淆。

使用Ingredients需要为每个新身份重新训练吗？

不需要。文章指出它支持无需针对每个新身份进行训练或微调的定制化视频生成，配合多阶段
训练协议即可实现较高身份保真度和内容灵活性。

🔬 语宙深潜追问 · 进阶实操拆解

多身份视频生成最难的是什么？

最难的是身份保真、动作一致和文本可控三者同时成立。实际落地时要用身份编码隔离、分
阶段训练和约束采样，避免不同人物特征互相串扰，尤其在多人同框时更容易出错。

无需微调如何保持新身份一致性？

关键是把身份信息显式注入到生成过程，并在训练中见过足够多的身份组合。推理时可通过
参考图选择、注意力约束和身份一致性损失来稳住面部与服饰特征，减少漂移。

🗳️ 读者观点微投票 · 您的实战立场是？

多ID定制视频，免微调真能规模化吗？

🕸️ 语宙向量知识图谱 · 语义强关联深度内链

[🐋 所属权威专题：DeepSeek 深度实战与部署 →](https://paooo.com/topics/deepseek/)

 * [ID-Animator – 腾讯等推出的个性化人物视频生成框架](https://paooo.com/aigc-news/27925/)
 * [ConsisID – 北大联合鹏城实验室等机构推出的文本到视频生成模型](https://paooo.com/aigc-news/25065/)
 * [Phantom – 字节跳动推出的主体一致视频生成框架](https://paooo.com/aigc-news/21747/)
 * [DreaMoving – 阿里开源的基于扩散模型的人类视频生成框架](https://paooo.com/aigc-news/28021/)

[🏛️ Prompt 语宙研究院](https://paooo.com/author/paooo-research/) · Prompt 语宙研究院（
paooo.com Research）专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示
词工程（Prompt Engineering）与全球高增长 AI 生产力工具实测追踪，致力于为中文开发
者与创作者提供一手、可复现的深度技术洞察。

[📄 Markdown 纯净版](https://paooo.com/aigc-news/23175/?format=md)

💡 这篇内容对您有启发吗？

[📡 RSS 订阅](https://paooo.com/feed/)[✨ 提交 AI 工具 / 合作](https://paooo.com/submit-tool/)

**🚀 Prompt 语宙 AI 创作者生态：**探索 2,800+ 全球实用 AI 工具与高精度生图提示词
咒语库

[🧭 语宙 AI 导航 (ai.paooo.com)](https://ai.paooo.com/)[🎨 AI 生图 Prompt 库](https://paooo.com/ai-image-prompts/)
[📚 核心专题导航](https://paooo.com/topics/)[⚡ AIGC 早报生成器](https://paooo.com/mtool/)
