Prompt 语宙Prompt 语宙
  • 首页
  • 语宙 AI 导航
  • AIGC 资讯
    • AIGC 早报生成器Hot
    • 最新趋势
    • AI 工具
    • 热门资源
    • 强化 AI 学习
  • AI 绘图
    • Prompt 实战
    • AI 绘画教程
    • 模型精选
  • AI 图库
    • 人物
    • 展台场景
    • Banner
    • 游戏
    • 动物
    • 食物
    • 自然
    • 背景
    • 海报
    • 建筑
    • 室内设计
  • 出海数字营销宝典
  • AI 生图 Prompt
    • 写实人像
    • 产品与广告
    • 游戏资产与 3D
    • 界面与图标
    • 建筑与室内
    • 动漫与插画
    • 风景与自然
搜索 AIGC 资讯、Prompt 咒语与 AI 工具
  • 语宙 AI 导航
  • 全部资讯
  • AI 生图咒语库
  • AIGC 早报生成器
  • 核心专题
  • 提交工具 / 合作
© 2023–2026 Prompt 语宙 (paooo.com). HalfPX. All Rights Reserved.
阅读: SmartEraser – 中科大与微软亚洲研究院推出的图像对象移除技术
Share
通知 阅读更多
Font Resizer字体
Font Resizer字体
Prompt 语宙Prompt 语宙
搜索 AIGC 资讯、Prompt 咒语与 AI 工具
  • 首页
  • 语宙 AI 导航
  • AIGC 资讯
    • AIGC 早报生成器Hot
    • 最新趋势
    • AI 工具
    • 热门资源
    • 强化 AI 学习
  • AI 绘图
    • Prompt 实战
    • AI 绘画教程
    • 模型精选
  • AI 图库
    • 人物
    • 展台场景
    • Banner
    • 游戏
    • 动物
    • 食物
    • 自然
    • 背景
    • 海报
    • 建筑
    • 室内设计
  • 出海数字营销宝典
  • AI 生图 Prompt
    • 写实人像
    • 产品与广告
    • 游戏资产与 3D
    • 界面与图标
    • 建筑与室内
    • 动漫与插画
    • 风景与自然
已有帐户? 登陆
  • 语宙 AI 导航
  • 全部资讯
  • AI 生图咒语库
  • AIGC 早报生成器
  • 核心专题
  • 提交工具 / 合作
© 2023–2026 Prompt 语宙 (paooo.com). HalfPX. All Rights Reserved.
SmartEraser – 中科大与微软亚洲研究院推出的图像对象移除技术
Prompt 语宙 > AIGC 资讯 > SmartEraser – 中科大与微软亚洲研究院推出的图像对象移除技术
AIGC 资讯

SmartEraser – 中科大与微软亚洲研究院推出的图像对象移除技术

Prompt 语宙研究院
最近更新: 2026年6月9日 上午5:48
AI办公效率 AI智能体 AI绘画提示词 RAG检索增强 stable diffusion 开源大模型
SHARE
⚡ Prompt 语宙 AI 导读 · 30 秒核心看点
  • 采用掩码区域引导范式,较传统修复法更能准确定位并移除目标对象。
  • 依托Syn4Removal百万级合成数据与掩码增强训练,鲁棒性和泛化能力更强。
  • 适用于照片修图、广告设计、文物修复及医学/科研图像去干扰等场景。

SmartEraser是什么

SmartEraser是中国科学技术大学与微软亚洲研究院推出的图像编辑技术,专门用在从图像中移除用户指定的对象。SmartEraser基于创新的“掩码区域引导”(Masked-Region Guidance)范式,与传统的“掩码和修复”(mask-and-inpaint)方法不同,SmartEraser保留掩码区域作为移除过程的引导,能更准确地识别和移除目标对象,同时有效保留周围上下文。SmartEraser基于Syn4Removal大规模高质量数据集进行训练,引入掩码增强技术和基于CLIP的视觉引导,SmartEraser在对象移除任务中展现出卓越的性能。

阅读目录
  • SmartEraser是什么
  • SmartEraser的主要功能
  • SmartEraser的技术原理
  • SmartEraser的项目地址
  • SmartEraser的应用场景

SmartEraser

SmartEraser的主要功能

  • 目标对象识别与移除:准确识别用户基于掩码指定的目标对象,将其从图像中移除。
  • 上下文保留:在移除目标对象的同时,保留周围环境的细节和结构,确保图像的视觉连贯性。
  • 高质量图像生成:生成的图像在视觉上与原始图像保持一致,没有明显的失真或 artifacts。
  • 鲁棒性:对用户提供的不同形状和大小的掩码具有较高的鲁棒性,适应各种输入条件。
  • 适用于复杂场景:在复杂的场景中,如包含多个对象和复杂背景的图像中,有效地移除目标对象。

SmartEraser的技术原理

  • 掩码区域引导范式:
    • 保留掩码区域:与传统的“掩码和修复”方法不同,SmartEraser保留掩码区域在输入中的位置,将其作为移除过程的引导。模型能准确识别需要移除的对象,减少在掩码区域重新生成对象的风险。
    • 上下文信息:用户定义的掩码通常会超出目标对象本身,有助于模型在最终结果中保留周围上下文,使生成的图像更加自然和真实。
  • Syn4Removal数据集:
    • 合成数据生成:训练符合新范式的模型,用合成方法构建训练数据。该方法涉及将不同图像中的对象实例粘贴到不同的背景图像上,形成输入图像。粘贴对象的掩码作为输入掩码,原始背景图像作为真实值。
    • 大规模数据集:Syn4Removal数据集包含100万对图像三元组,涵盖多样的场景和对象类型,为模型训练提供丰富的数据支持。
  • 基于文本到图像扩散模型的框架:
    • 掩码增强:为增强模型对用户输入不同掩码形状的鲁棒性,在训练过程中应用多种掩码变形方法,模拟用户输入掩码的形状。这些方法包括原始掩码、腐蚀掩码、膨胀掩码、凸包掩码、椭圆掩码和边界框与贝塞尔曲线掩码。
    • 基于CLIP的视觉引导:用预训练的CLIP模型提取移除目标的视觉特征,映射到文本编码器的特征空间中。
    • 损失函数:模型的训练损失函数基于标准的扩散过程,最小化预测噪声和实际噪声之间的差异优化模型参数。

SmartEraser的项目地址

  • 项目官网:https://longtaojiang.github.io/smarteraser
  • GitHub仓库:https://github.com/longtaojiang/SmartEraser
  • arXiv技术论文:https://arxiv.org/pdf/2501.08279

SmartEraser的应用场景

  • 个人照片编辑:用在移除旅游照片中的路人、家庭照片中的不希望出现的人物或物体,及清理证件照和社交媒体头像的背景。
  • 专业图像处理:在广告和营销中,移除产品摄影中的干扰元素,优化广告设计的背景。
  • 平面设计:协助平面设计师在海报和封面设计中突出焦点,移除不必要的背景元素。
  • 文物修复:在文物修复中,如古画修复,移除污渍和破损。
  • 医疗和科研:在医学影像处理中,如X光和CT图像,移除设备伪影和标记;在科研图像处理中,如显微镜和卫星图像,清理背景噪声和干扰,提高图像分析价值。
❓ 常见问题解答(FAQ)
SmartEraser和传统修复工具有什么区别?

SmartEraser不是简单把掩码区域“抹掉再补全”,而是保留掩码作为引导信息,让模型更准确识别要移除的对象,同时尽量保留周围上下文,因此在复杂场景里通常更自然、更稳定。

SmartEraser适合哪些图像对象移除场景?

它适合旅游照路人清理、产品图干扰元素移除、海报与封面背景整理,也可用于文物修复、医学影像伪影去除,以及显微镜、卫星图像中的背景噪声清理。

SmartEraser为什么对不同形状掩码更鲁棒?

因为训练时加入了原始、腐蚀、膨胀、凸包、椭圆、边界框和贝塞尔曲线等多种掩码增强,模拟用户可能提供的不同标注形状,从而提升对输入变化的适应能力。

🔬 语宙深潜追问 · 进阶实操拆解
掩码区域引导比 inpaint 强在哪?

它先明确“删什么”,再围绕目标区域重建上下文,减少模型凭空补细节的偏差。对遮挡复杂、背景纹理连续的场景更友好,尤其适合需要保留结构一致性的商业修图。

百万级合成数据怎么避免训练偏差?

要混入真实场景和难例样本,不能只靠合成图。训练时建议按目标大小、遮挡比例、背景复杂度分桶采样,并用人工抽检验证边缘过渡、纹理延续和误删率。

🗳️ 读者观点微投票 · 您的实战立场是?
SmartEraser 会取代传统抠图修复吗?
🕸️ 语宙向量知识图谱 · 语义强关联深度内链
🐋 所属权威专题:DeepSeek 深度实战与部署 →
  • PixelHacker – 华中科技联合VIVO推出的图像修复模型
  • PromptFix – 微软开源的AI修图工具,通过提示词实现多种图像处理
  • Object Remover
  • DreamClear – 中科院联合字节推出的高性能图像修复技术
🏛️ Prompt 语宙研究院 · Prompt 语宙研究院(paooo.com Research)专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示词工程(Prompt Engineering)与全球高增长 AI 生产力工具实测追踪,致力于为中文开发者与创作者提供一手、可复现的深度技术洞察。
📄 Markdown 纯净版
💡 这篇内容对您有启发吗?
📡 RSS 订阅✨ 提交 AI 工具 / 合作
🚀 Prompt 语宙 AI 创作者生态:探索 2,800+ 全球实用 AI 工具与高精度生图提示词咒语库
🧭 语宙 AI 导航 (ai.paooo.com)🎨 AI 生图 Prompt 库📚 核心专题导航⚡ AIGC 早报生成器
升级到 GPT-4o 后使用提示词的五项调整 [译]”
DecipherIt: AI多智能体研究助手,深度整合全球多源信息与智能分析
DragGAN
偷拍质疑撕裂端侧AI穿戴!Google联手Warby Parker/Gentle Monster打响Gemini智能眼镜突围战:395美元起售、HTC声控停录与时尚外壳下的隐私博弈全景深度拆解
SemanticAudio – 港中文等推出的音频生成与编辑框架
TAGGED:AI办公效率AI智能体AI绘画提示词RAG检索增强stable diffusion开源大模型
分享
Email 复制链接 打印
Share
Prompt 语宙研究院 头像
ByPrompt 语宙研究院
Follow:
Prompt 语宙研究院(paooo.com Research)专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示词工程(Prompt Engineering)与全球高增长 AI 生产力工具实测追踪,致力于为中文开发者与创作者提供一手、可复现的深度技术洞察。
上一篇 Eko – Fellou AI 推出的开源 AI 代理开发框架 Eko – Fellou AI 推出的开源 AI 代理开发框架
下一篇 Tarsier2 – 字节跳动推出的视觉理解大模型 Tarsier2 – 字节跳动推出的视觉理解大模型
Ad image
Ad image

最近更新

Hello Partner 深度报道主图:2026 年黑五消费前夕 Barclays 与 KPMG 对英国消费者使用 AI 工具比价给出悬殊数据
55%用AI找黑五折扣还是仅12%问大模型?Barclays与KPMG调研打架真相:零点击比价、84%返利盲区与联盟归因断层全拆解
AI 工具
The Verge 专题主视觉:开发者正借助 Claude Code 与 Codex 等 AI 编程工具改造电视、相机与嵌入式硬件固件
从电视去广告到PS5跑老盘!Vibe Coding正席卷消费硬件固件:Take-Two预警强硬DRM反制与ESP32安全替代路径全拆解
最新趋势
Rest of World 调查揭示 AI 大模型数据产业链现状:高学历专家与全球劳动力正在被平台纳入按件计费的零工模式
美国心脏科医生时薪180美元、东南亚仅7.5美元?揭秘大模型“专家零工化”暗面:Scale AI与Mercor的算力人力套利
AIGC 资讯
Forrester 发布“信任与保障组织(TAO)”研究报告概念图:AI 重塑企业安全团队架构与 CISO 治理权责边界
37%企业AI项目未投产先折戟!Forrester呼吁CISO重构安全架构:打造TAO“信任与保障组织”,弥合权责与能力双缺口
最新趋势

相关推荐

HuggingChat macOS – Hugging Face开源的macOS聊天应用程序
AIGC 资讯

HuggingChat macOS – Hugging Face开源的macOS聊天应用程序

Prompt 语宙研究院
AI办公效率 AI编程 HuggingFace 开源大模型 通义千问
RunWay Gen-4.5 深度解析:电影级视频生成模型,多镜头编辑、音频同步与4K升级全面解读
AI 工具AIGC 资讯

RunWay Gen-4.5 深度解析:电影级视频生成模型,多镜头编辑、音频同步与4K升级全面解读

Prompt 语宙研究院
AIGC runway 多镜头编辑 电影级视频 视频生成模型
GRAPHICAARTIS/GETTY IMAGES
强化 AI 学习

人工智能,2023 年文化的新霸主 [译]

宝玉的分享
AI办公效率 AI智能体 ChatGPT Midjourney OpenAI
Claude分享链接配置翻车:用户私钥、公司机密被Google公开收录
AIGC 资讯

Claude分享链接配置翻车:用户私钥、公司机密被Google公开收录

Prompt 语宙研究院
AI办公效率 Anthropic ChatGPT Claude OpenAI
/ Prompt 语宙 /

探索生成式 AI 的无限创作潜能,一站式获取前沿 AIGC 资讯、高阶 Prompt 咒语与全球实用 AI 工具。

核心专栏

  • 语宙 AI 工具导航
  • EVA 视觉抠图工坊Hot
  • 出海数字营销宝典
  • AI 生图咒语灵感库
  • 24H 硅谷 AI 情报流

生态与服务

  • 语宙 AI 导航
  • 全部资讯
  • AI 生图咒语库
  • AIGC 早报生成器
  • 核心专题
  • 提交工具 / 合作

标签

开源大模型 AI智能体 AI办公效率 AI绘画提示词 OpenAI 大模型微调 Midjourney AI编程 stable diffusion AI视频生成 ChatGPT 3D与空间智能 HuggingFace AI音频与语音 RAG检索增强 Claude Flux AIGC Gemini 通义千问 Anthropic Llama Cursor DeepSeek Prompt AI Agent Kimi 智谱AI 具身智能 Claude Code
Prompt 语宙Prompt 语宙
Follow US
© 2023–2026 Prompt 语宙 (paooo.com). HalfPX. All Rights Reserved.