---
title: "PixelHacker – 华中科技联合VIVO推出的图像修复模型"
url: "https://paooo.com/aigc-news/19888/"
author: "Prompt 语宙研究院"
published_at: "2026-06-07T21:59:37+08:00"
updated_at: "2026-06-07T21:59:37+08:00"
categories: "AIGC 资讯"
tags: "AI绘画提示词, stable diffusion, 大模型微调, 开源大模型"
source: "Prompt 语宙 (https://paooo.com)"
ai_tools_directory: "语宙 AI 导航 (https://ai.paooo.com)"
---

# PixelHacker – 华中科技联合VIVO推出的图像修复模型

> 来源：[Prompt 语宙 (paooo.com)](https://paooo.com/aigc-news/19888/) · 作者：Prompt 语宙研究院 · 发布时间：2026-06-07

## AI 30 秒核心看点 (TL;DR)

- 采用潜在类别引导 LCG，将前景与背景分别编码，提升修复区域的结构和语义一致性。
- 基于扩散模型与线性注意力，在去噪过程中注入潜在特征，生成更自然逼真的修复结果。
- 先在 1400 万图像-掩码对上预训练，再在多个基准集微调，适合人脸、场景与复杂背景修复。

## PixelHacker是什么

PixelHacker 是华中科技大学和 VIVO AI Lab联合推出的图像修复（Image Inpainting）模型。基于引入潜在类别引导（Latent Categories Guidance, LCG）范式，分别对前景和背景进行编码，基于线性注意力将特征注入去噪过程中，实现结构和语义的一致性。模型基于大规模数据集（包含 1400 万图像 – 掩码对）进行预训练，在多个开源基准数据集（如 Places2、CelebA-HQ 和 FFHQ）上微调，展现出卓越的修复效果。

## PixelHacker的主要功能

- **高质量图像修复**：在自然场景、人脸图像等多种数据集上表现出色，生成逼真的修复内容。

- **结构和语义一致性**：确保修复区域与周围环境在纹理、形状和颜色上自然过渡，逻辑上符合场景。

- **适应多种场景**：对不同类型的图像（如风景、人脸、复杂背景）具有良好的适应性，支持多种分辨率和掩码类型。

## PixelHacker的技术原理

- **潜在类别引导（LCG）**：将图像分为前景和背景两部分，分别用在两个固定大小的嵌入（embeddings）编码潜在特征。方法避免对具体类别标签的依赖。在训练时，用多种掩码（如随机笔刷掩码、对象语义掩码、场景语义掩码等）构造图像-掩码对，分配到前景或背景嵌入中。

- **扩散模型架构**：基于扩散模型（Diffusion Model）作为其生成框架。扩散模型基于逐步去噪的过程生成图像内容，生成高质量且多样化的图像。在去噪过程中，基于线性注意力（Linear Attention）将前景和背景的潜在特征注入到模型中。

- **训练和微调**：在包含 1400 万图像掩码对的大规模数据集上进行预训练，学习到丰富的图像分布和语义信息。在预训练的基础上，PixelHacker 在多个开源基准数据集（如 Places2、CelebA-HQ 和 FFHQ）上进行微调，适应特定任务和数据分布，进一步提升性能。

- **多步交互**：在去噪的每一步中，基于线性注意力将前景和背景的潜在特征与当前的图像特征进行交互，确保生成内容在结构和语义上与周围环境保持一致。

- **分类器自由引导（CFG）**：在推理阶段，用分类器自由引导（Classifier-Free Guidance）技术，调整引导规模（guidance scale）平衡生成内容的多样性和一致性。

## PixelHacker的项目地址

- **项目官网**：[https://hustvl.github.io/PixelHacker/](https://hustvl.github.io/PixelHacker/?utm_source=ai-bot.cn)

- **GitHub仓库**：[https://github.com/hustvl/PixelHacker](https://github.com/hustvl/PixelHacker)

- **arXiv技术论文**：[https://arxiv.org/pdf/2504.20438](https://arxiv.org/pdf/2504.20438)

## PixelHacker的应用场景

- **修复老旧照片**：自动填补划痕、污渍或缺失部分，恢复照片完整性。

- **移除无关对象**：从图像中去除不需要的元素（如行人、杂物），保持背景自然。

- **创意内容生成**：辅助艺术家和设计师快速生成高质量图像，用于广告、海报或艺术创作。

- **医学影像修复**：填补医学图像中的缺失或损坏区域，提升诊断准确性。

- **文化遗产保护**：修复文物和古籍图像，填补缺失部分，助力文化传承。

## 常见问题解答 (FAQ)

### PixelHacker适合修复哪些类型的图片？
PixelHacker 适合自然场景、人脸图像、复杂背景等多种图像修复任务，可用于老照片修复、对象移除、文化遗产图像补全等场景，重点优势是修复结果自然且与上下文一致。

### PixelHacker的核心技术亮点是什么？
它的核心是潜在类别引导（LCG）与扩散模型结合：将前景和背景分别编码，并在去噪过程中通过线性注意力注入特征，从而兼顾结构完整性、语义一致性和生成质量。

### PixelHacker需要类别标签才能训练吗？
不需要依赖具体类别标签。文章提到它通过前景/背景划分和多种掩码构造图像-掩码对进行训练，避免对显式类别标签的依赖，同时提升对不同场景的泛化能力。

---
探索 2,800+ 全球实用 AI 工具与官方直达入口：[语宙 AI 导航 (https://ai.paooo.com/)](https://ai.paooo.com/)
