# UniEdit – 免训练调优的统一视频编辑框架 - Link: https://paooo.com/aigc-news/28138/ - Published: 2026-07-10T01:41:14+08:00 - Author: Prompt 语宙研究院 ## UniEdit是什么 UniEdit是由浙江大学、微软研究院和北京大学的研究人员推出的一个创新的视频编辑框架， 允许用户在不需要进行模型微调的情况下，对视频的运动和外观进行编辑。该框架的核心优势 在于能够同时处理视频的时间维度（如动作变化）和空间维度（如风格化、物体替换、背景 修改）的编辑任务。 阅读目录 * [UniEdit是什么](https://paooo.com/aigc-news/28138/#uniedit%e6%98%af%e4%bb%80%e4%b9%88) * [UniEdit的官网入口](https://paooo.com/aigc-news/28138/#uniedit%e7%9a%84%e5%ae%98%e7%bd%91%e5%85%a5%e5%8f%a3) * [UniEdit的功能特性](https://paooo.com/aigc-news/28138/#uniedit%e7%9a%84%e5%8a%9f%e8%83%bd%e7%89%b9%e6%80%a7) * [UniEdit的工作原理](https://paooo.com/aigc-news/28138/#uniedit%e7%9a%84%e5%b7%a5%e4%bd%9c%e5%8e%9f%e7%90%86) ![UniEdit](https://paooo.com/wp-content/uploads/2026/07/uniedit-video-editing-framework- 1.avif) ## UniEdit的官网入口 * 官方项目主页：[https://jianhongbai.github.io/UniEdit/](https://jianhongbai.github.io/UniEdit/) * arXiv研究论文：[https://arxiv.org/abs/2402.13185](https://arxiv.org/abs/2402.13185) * GitHub代码库：[https://github.com/JianhongBai/UniEdit](https://github.com/JianhongBai/UniEdit)（ 源代码待上线） ## UniEdit的功能特性 * **视频对象动作编辑**：UniEdit能够根据文本指令编辑视频中对象的动作。例如，可以 将视频中的浣熊弹吉他的动作编辑成吃苹果或招手的动作。 * **视频风格化**：该框架支持对视频进行风格迁移，即用户可以通过文本描述来改变视频 的视觉风格，而不需要改变视频中的内容，如将视频转换为油画风格。 * **视频背景修改**：UniEdit允许用户修改更换视频中的背景。例如，可以将视频中的人物 置于完全不同的场景中。 * **视频对象物体替换**：UniEdit框架支持刚性和非刚性物体的替换，用户可以替换视频 中的静态或动态物体， * **无需训练微调**：UniEdit不需要额外的训练或微调，大大简化了模型的部署和使用， 使得用户可以快速上手进行视频编辑。 ## UniEdit的工作原理 ![UniEdit的工作原理](https://paooo.com/wp-content/uploads/2026/07/uniedit-framework- methods.avif) 1. **反演处理（Inversion）**：UniEdit首先对输入的视频进行反演处理，将其转换为一个随机 噪声表示。这个过程通常涉及到使用预训练的扩散视频生成模型（如 LaVie）的反演过程， 通过一系列去噪步骤将视频逐步从噪声状态转换回其原始状态。 2. **生成编辑路径**：在反演处理的基础上，UniEdit 使用预训练的 UNet 模型进行去噪步骤， 以生成编辑后的视频。该过程是在给定目标文本提示的条件下进行的，以确保生成的视频内容 符合用户的编辑意图。 3. **辅助重建分支**：为了保留源视频的非编辑内容，UniEdit 引入了一个辅助重建分支。这个 分支从相同的逆向噪声开始，但在给定源视频文本提示的条件下进行去噪，以重建原始视频 帧。重建过程中的特征被注入到主编辑路径的空间自注意力层中，以保持内容的一致性。 4. **辅助运动参考分支**：为了实现运动/动作编辑，UniEdit 引入了辅助运动参考分支，在 给定目标文本提示的条件下生成运动特征。这些特征通过时间自注意力层注入到主编辑路径 中，以引导视频的运动变化。 5. **内容保留与运动注入**：在主编辑路径中，UniEdit 通过替换空间自注意力层的值特征来 保留源视频的内容。同时，通过在时间自注意力层中注入运动特征，实现运动的编辑。 6. **空间结构控制**：在外观编辑中，UniEdit 通过替换主编辑路径中的空间自注意力层的查询 和键特征，来保持源视频的空间结构。这有助于在改变视频风格或外观时，保持物体的布局 和位置不变。 7. **文本引导编辑**：用户通过提供文本描述来指导视频编辑过程。UniEdit 解析这些文本描述， 并将其转化为视频编辑的指导信号，从而实现用户期望的编辑效果。 [🏛️ Prompt 语宙研究院](https://paooo.com/author/paooo-research/) · Prompt 语宙研究院（ paooo.com Research）专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示 词工程（Prompt Engineering）与全球高增长 AI 生产力工具实测追踪，致力于为中文开发 者与创作者提供一手、可复现的深度技术洞察。 [📄 Markdown 纯净版](https://paooo.com/aigc-news/28138/?format=md) 💡 这篇内容对您有启发吗？ [📡 RSS 订阅](https://paooo.com/feed/)[✨ 提交 AI 工具 / 合作](https://paooo.com/submit-tool/) **🚀 Prompt 语宙 AI 创作者生态：**探索 2,800+ 全球实用 AI 工具与高精度生图提示词 咒语库 [🧭 语宙 AI 导航 (ai.paooo.com)](https://ai.paooo.com/)[🎨 AI 生图 Prompt 库](https://paooo.com/ai-image-prompts/) [📚 核心专题导航](https://paooo.com/topics/)[⚡ AIGC 早报生成器](https://paooo.com/mtool/)