# AnchorCrafter – 中科院联合腾讯推出的AI虚拟主播带货视频制作技术 - Link: https://paooo.com/aigc-news/25143/ - Published: 2026-07-12T02:18:29+08:00 - Author: Prompt 语宙研究院 ⚡ [Prompt](https://paooo.com/ai-image-prompts/) 语宙 AI 导读 · 30 秒核心看点 * 基于扩散模型融合HOI建模，能生成更像真人主播的高保真带货视频。 * 通过外观感知、运动注入和区域重加权损失，提升物体细节与交互一致性。 * 适用于电商、虚拟直播、广告与教育视频制作，降低拍摄成本与制作门槛。 ## AnchorCrafter是什么 AnchorCrafter是基于扩散模型的智能视频制作系统，用在自动生成具有高保真度的主播风格 产品推广视频。基于整合人-物交互（HOI）到姿态引导的人体视频生成中，实现对物体外观 和运动控制的高度还原，及对复杂人物-物体交互的管理。系统采用HOI-appearance perception 和HOI-motion injection技术，及HOI-region reweighting loss训练目标，增强物体细节的 学习，确保视频生成过程中人物外观和动作的一致性。AnchorCrafter在物体外观保持、交互 感知以及视频质量方面优于现有方法，为在线广告和消费者参与提供了新的可能性。 阅读目录 * [AnchorCrafter是什么](https://paooo.com/aigc-news/25143/#anchorcrafter%e6%98%af%e4%bb%80%e4%b9%88) * [AnchorCrafter的主要功能](https://paooo.com/aigc-news/25143/#anchorcrafter%e7%9a%84%e4%b8%bb%e8%a6%81%e5%8a%9f%e8%83%bd) * [AnchorCrafter的技术原理](https://paooo.com/aigc-news/25143/#anchorcrafter%e7%9a%84%e6%8a%80%e6%9c%af%e5%8e%9f%e7%90%86) * [AnchorCrafter的项目地址](https://paooo.com/aigc-news/25143/#anchorcrafter%e7%9a%84%e9%a1%b9%e7%9b%ae%e5%9c%b0%e5%9d%80) * [AnchorCrafter的应用场景](https://paooo.com/aigc-news/25143/#anchorcrafter%e7%9a%84%e5%ba%94%e7%94%a8%e5%9c%ba%e6%99%af) ![AnchorCrafter](https://paooo.com/wp-content/uploads/2026/07/AnchorCrafter-website- 1.avif) ## AnchorCrafter的主要功能 * **高质量视频生成**：自动创建高保真度的主播风格产品推广视频。 * **人-物交互（HOI）集成**：将人物与物体的交互自然地融入视频中，提升视频的真实感 和互动性。 * **外观保持**：在视频中保持物体的外观细节，确保从多视角观察时物体的外观准确无误。 * **运动控制**：精确控制物体的运动轨迹，与人物动作协调一致。 * **互遮挡管理**：处理人物与物体交互时的遮挡问题，保持视频的连贯性和自然性。 * **细节增强学习**：基于HOI-region reweighting loss在训练过程中增强对物体细节的 学习。 ## AnchorCrafter的技术原理 * **视频扩散模型**：基于扩散模型架构，用扩散UNet和变分自编码器（VAE）处理视频帧， 将视频序列编码到潜在空间，从噪声中重建高质量的视频帧。 * **HOI-外观感知（HOI-appearance perception）**： - **多视角特征融合**：用多视角物体参考图像来提取物体的外观特征，增强模型对物体 形状和纹理的识别能力。 - **人-物双适配器**：基于替换UNet中的交叉注意力层，实现人物和物体特征的更好分离， 避免外观纠缠。 * **HOI-运动注入（HOI-motion injection）**： - **物体轨迹控制**：用深度图作为输入，基于轻量级卷积网络处理深度信息，控制视频 中物体的运动轨迹。 - **互遮挡处理**：结合3D手部网格输入，处理人物手部与物体交互时的遮挡问题，确保 交互的自然性和准确性。 * **HOI区域重加权损失（HOI-region reweighting loss）**：在训练过程中，增加手部- 物体交互区域的权重，让模型更加关注这些区域，提高物体细节的学习和生成质量。 ## AnchorCrafter的项目地址 * **项目官网**：[cangcz.github.io/Anchor-Crafter](https://cangcz.github.io/Anchor-Crafter/?utm_source=ai-bot.cn) * **GitHub仓库**：[https://github.com/cangcz/AnchorCrafter](https://github.com/cangcz/AnchorCrafter/)（ 即将开放） * **arXiv技术论文**：[https://arxiv.org/pdf/2411.17383](https://arxiv.org/pdf/2411.17383) ## AnchorCrafter的应用场景 * **在线购物平台**：自动生成产品介绍视频，提升商品页面的吸引力和用户购买意愿。 * **社交媒体营销**：为品牌和个人创作者提供工具，制作吸引人的产品推广内容，增加粉丝 互动和品牌曝光。 * **电视广告制作**：快速制作高质量的电视广告，减少传统拍摄成本和时间。 * **虚拟直播带货**：在直播中使用虚拟主播展示和推广产品，提高直播效率和观众体验。 * **教育培训**：制作教学视频，模拟实际操作过程，如烹饪、手工制作等，增强学习效果。 🧭 文中关联 [AI 工具](https://ai.paooo.com/)官网与参数卡（语宙 AI 导航） **中科院 ↗** 中科院：国家最高学术机构，面向AI 综合应用场景提供便捷实用的在线功能支持。 ❓ 常见问题解答（FAQ） AnchorCrafter适合做什么视频？ 它主要用于自动生成主播风格的产品推广视频，也可用于电商详情页、社交媒体营销、电视 广告、虚拟直播带货和教学演示等需要人物与物体交互的视频场景。 AnchorCrafter和普通视频生成有什么区别？ 它的重点不是单纯生成画面，而是把人-物交互、物体外观保持、运动轨迹控制和遮挡处理一起 纳入建模，因此更适合需要“拿着、展示、操作”产品的带货类视频。 AnchorCrafter的核心技术亮点是什么？ 核心包括HOI-appearance perception、HOI-motion injection和HOI-region reweighting loss。前者强化物体外观识别，后者控制运动与遮挡，训练目标则提升手部与物体交互区域 的细节质量。 🔬 语宙深潜追问 · 进阶实操拆解 带货视频里如何避免商品失真？ 关键是把商品作为独立条件输入，单独约束外观、Logo和关键细节，并在生成时加入物体保持 损失。实操上最好先做商品静态基准帧，再叠加主播动作，减少手部遮挡导致的形变。 虚拟主播如何兼顾口播与互动感？ 可将语音驱动、嘴型同步和手势生成拆成多模块协同，先保证音画对齐，再补充视线、停顿 和指向动作。若用于直播，建议预置多段动作模板，实时切换比完全自由生成更稳。 🗳️ 读者观点微投票 · 您的实战立场是？ AI虚拟主播带货，最难的是哪一关？ 🕸️ 语宙向量知识图谱 · 语义强关联深度内链 [🤖 所属权威专题：AI Agent 智能体工作流 →](https://paooo.com/topics/ai-agents/) * [字节跳动DreamActor-H1：DiT框架革新电商视频生成，3D动作引导+身份保留引领AIGC商业化](https://paooo.com/ai-tool/14909/) * [MimicMotion – 腾讯联合上海交大推出的AI视频生成框架](https://paooo.com/aigc-news/27765/) * [腾讯Hunyuan-GameCraft：实时交互式游戏视频生成框架，键盘鼠标精准控制，支持百万级AAA游戏场景](https://paooo.com/aigc-news/14718/) * [CustomCrafter – 腾讯联合浙大推出的自定义视频生成框架](https://paooo.com/aigc-news/27147/) [🏛️ Prompt 语宙研究院](https://paooo.com/author/paooo-research/) · Prompt 语宙研究院（ paooo.com Research）专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示 词工程（Prompt Engineering）与全球高增长 AI 生产力工具实测追踪，致力于为中文开发 者与创作者提供一手、可复现的深度技术洞察。 [📄 Markdown 纯净版](https://paooo.com/aigc-news/25143/?format=md) 💡 这篇内容对您有启发吗？ [📡 RSS 订阅](https://paooo.com/feed/)[✨ 提交 AI 工具 / 合作](https://paooo.com/submit-tool/) **🚀 Prompt 语宙 AI 创作者生态：**探索 2,800+ 全球实用 AI 工具与高精度生图提示词 咒语库 [🧭 语宙 AI 导航 (ai.paooo.com)](https://ai.paooo.com/)[🎨 AI 生图 Prompt 库](https://paooo.com/ai-image-prompts/) [📚 核心专题导航](https://paooo.com/topics/)[⚡ AIGC 早报生成器](https://paooo.com/mtool/)