# ICEdit – 浙江大学联合哈佛大学推出的指令式图像编辑框架

- Link: https://paooo.com/aigc-news/19978/
- Published: 2026-06-08T12:59:37+08:00
- Author: Prompt 语宙研究院

⚡ [Prompt](https://paooo.com/ai-image-prompts/) 语宙 AI 导读 · 30 秒核心看点

 * 基于扩散变换器与上下文编辑机制，ICEdit可用自然语言直接完成精准图像修改。
 * 仅需0.1%训练数据和1%可训练参数，配合LoRA-MoE与早期筛选策略提升编辑效果。
 * 支持多轮编辑、风格转换、对象替换与添加，单张图像约9秒，适合快速创作。

## ICEdit是什么

ICEdit（In-Context Edit）是浙江大学和哈佛大学推出的指令式图像编辑框架。基于大规模
扩散变换器（Diffusion Transformer）的强大生成能力和上下文感知能力，用自然语言指令
对图像进行精准编辑。ICEdit仅需0.1%的训练数据和1%的可训练参数，相比传统方法大幅减少
资源需求，在多轮编辑和多任务编辑中表现出色。ICEdit具备开源、低成本、快速处理（单
张图像约9秒）等优势，适合广泛的应用场景。

阅读目录

 * [ICEdit是什么](https://paooo.com/aigc-news/19978/#icedit%e6%98%af%e4%bb%80%e4%b9%88)
 * [ICEdit的主要功能](https://paooo.com/aigc-news/19978/#icedit%e7%9a%84%e4%b8%bb%e8%a6%81%e5%8a%9f%e8%83%bd)
 * [ICEdit的技术原理](https://paooo.com/aigc-news/19978/#icedit%e7%9a%84%e6%8a%80%e6%9c%af%e5%8e%9f%e7%90%86)
 * [ICEdit的项目地址](https://paooo.com/aigc-news/19978/#icedit%e7%9a%84%e9%a1%b9%e7%9b%ae%e5%9c%b0%e5%9d%80)
 * [ICEdit的应用场景](https://paooo.com/aigc-news/19978/#icedit%e7%9a%84%e5%ba%94%e7%94%a8%e5%9c%ba%e6%99%af)

![ICEdit](https://paooo.com/wp-content/uploads/2026/06/ICEdit-website-1.avif)

## ICEdit的主要功能

 * **指令驱动的图像编辑**：基于自然语言指令对图像进行精准修改，例如更换背景、添加
   文字、改变人物服装等。
 * **多轮编辑**：支持连续多次编辑，每次编辑基于前一次的结果，适合复杂创作需求。
 * **风格转换**：支持将图像转换为不同艺术风格，如水彩画、漫画等。
 * **对象替换与添加**：替换图像中的对象或添加新元素，如将人物替换为卡通角色。
 * **高效处理**：处理速度快（单张图像约9秒），适合快速生成和迭代。

## ICEdit的技术原理

 * **上下文编辑框架（In-Context Editing Framework）**：基于“上下文提示”（In-Context
   Prompting），将编辑指令嵌入到生成提示中，模型基于处理提示生成编辑后的图像。无
   需对模型架构进行修改，避免传统方法中复杂的结构调整。基于上下文理解，模型直接生成
   符合指令的编辑结果。
 * **LoRA-MoE混合微调策略（LoRA-MoE Hybrid Fine-Tuning）**：结合参数高效的LoRA（
   Low-Rank Adaptation）适配器和动态专家路由（Mixture-of-Experts, MoE）。LoRA基于
   低秩矩阵分解，高效地调整模型参数，适应不同的编辑任务。MoE基于动态选择最适合当前
   任务的专家模块，进一步提升编辑质量和灵活性。仅需少量数据（50K样本）进行微调，
   显著提高编辑成功率。
 * **推理时早期筛选策略（Early Filter Inference-Time Scaling）**：在推理阶段，基于
   视觉语言模型（VLM）评估早期生成的噪声样本，筛选出最符合编辑指令的初始噪声。用
   少量步骤（如4步）评估编辑效果，快速选择最优的初始噪声，进一步提高编辑质量。

## ICEdit的项目地址

 * **项目官网**：[https://river-zhang.github.io/ICEdit-gh-pages/](https://river-zhang.github.io/ICEdit-gh-pages/?utm_source=ai-bot.cn)
 * **GitHub仓库**：[https://github.com/River-Zhang/ICEdit](https://github.com/River-Zhang/ICEdit)
 * **HuggingFace模型库**：[https://huggingface.co/sanaka87/ICEdit-MoE-LoRA](https://huggingface.co/sanaka87/ICEdit-MoE-LoRA)
 * **arXiv技术论文**：[https://arxiv.org/pdf/2504.20690](https://arxiv.org/pdf/2504.20690)
 * **在线体验Demo**：[https://huggingface.co/spaces/RiverZ/ICEdit](https://huggingface.co/spaces/RiverZ/ICEdit)

## ICEdit的应用场景

 * **创意设计**：将照片转为艺术风格（如水彩画），或添加创意元素，用在设计和广告。
 * **影视制作**：快速生成角色设计或场景概念图，辅助影视前期开发。
 * **社交媒体**：编辑个人照片（如换背景、加特效），制作吸引人的社交内容。
 * **教育领域**：生成教学用图，如将历史人物转为漫画风格，辅助教学。
 * **商业广告**：快速制作产品宣传图，如更换背景、添加品牌标志。

🧭 文中关联 [AI 工具](https://ai.paooo.com/)官网与参数卡（语宙 AI 导航）

**HuggingFace ↗**

HuggingFace：AI模型开发社区，面向大语言模型场景提供便捷实用的在线功能支持，涵盖大
模型等实用方向。

❓ 常见问题解答（FAQ）

ICEdit适合做哪些图像编辑？

ICEdit适合用自然语言完成背景更换、文字添加、服装修改、对象替换、风格转换等任务，
也支持多轮连续编辑，适合创意设计、社媒内容和广告素材制作。

ICEdit为什么说训练成本低？

文章显示，ICEdit仅需0.1%的训练数据和1%的可训练参数，并结合LoRA-MoE混合微调策略，
在较少样本下仍能提升编辑成功率，降低算力与数据成本。

ICEdit的处理速度快吗？

较快。文中提到单张图像处理约9秒，适合需要快速预览、反复迭代和多轮修改的场景，尤其
适合创意生产和快速出图需求。

🔬 语宙深潜追问 · 进阶实操拆解

低数据训练如何避免改图失真？

核心是把编辑任务拆成局部语义对齐与全局一致性两层。训练时保留身份、背景和结构约束，
优先用高质量指令-结果对；推理时限制一次改动幅度，分步编辑通常比一步到位更稳。

企业接入ICEdit该怎么评估成本？

先算单图时延、GPU占用和失败重试率，再看是否支持批处理与缓存。若面向生产，建议建立
人工抽检集，重点评估文字、局部物体和风格迁移三类任务，避免只看平均效果。

🗳️ 读者观点微投票 · 您的实战立场是？

0.1%数据做多轮改图，是真突破还是噱头？

🕸️ 语宙向量知识图谱 · 语义强关联深度内链

[🐋 所属权威专题：DeepSeek 深度实战与部署 →](https://paooo.com/topics/deepseek/)

 * [SuperEdit – 字节跳动等机构推出的图像编辑方法](https://paooo.com/aigc-news/19912/)
 * [SeedEdit – 字节豆包团队推出的AI图像编辑模型](https://paooo.com/aigc-news/25712/)
 * [PhotoDoodle – 字节联合新加坡国立大学等推出的艺术化图像编辑框架](https://paooo.com/aigc-news/21531/)
 * [DiffEditor – 北大联合腾讯推出的细粒度图像编辑工具](https://paooo.com/aigc-news/22685/)

[🏛️ Prompt 语宙研究院](https://paooo.com/author/paooo-research/) · Prompt 语宙研究院（
paooo.com Research）专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示
词工程（Prompt Engineering）与全球高增长 AI 生产力工具实测追踪，致力于为中文开发
者与创作者提供一手、可复现的深度技术洞察。

[📄 Markdown 纯净版](https://paooo.com/aigc-news/19978/?format=md)

💡 这篇内容对您有启发吗？

[📡 RSS 订阅](https://paooo.com/feed/)[✨ 提交 AI 工具 / 合作](https://paooo.com/submit-tool/)

**🚀 Prompt 语宙 AI 创作者生态：**探索 2,800+ 全球实用 AI 工具与高精度生图提示词
咒语库

[🧭 语宙 AI 导航 (ai.paooo.com)](https://ai.paooo.com/)[🎨 AI 生图 Prompt 库](https://paooo.com/ai-image-prompts/)
[📚 核心专题导航](https://paooo.com/topics/)[⚡ AIGC 早报生成器](https://paooo.com/mtool/)
