---
title: "Hi3DGen – 港中文、字节、清华联合推出的3D几何生成框架"
url: "https://paooo.com/aigc-news/20619/"
author: "Prompt 语宙研究院"
published_at: "2026-06-08T19:11:48+08:00"
updated_at: "2026-06-08T19:11:48+08:00"
categories: "AIGC 资讯"
tags: "3D与空间智能, AI视频生成, 大模型微调, 开源大模型"
source: "Prompt 语宙 (https://paooo.com)"
ai_tools_directory: "语宙 AI 导航 (https://ai.paooo.com)"
---

# Hi3DGen – 港中文、字节、清华联合推出的3D几何生成框架

> 来源：[Prompt 语宙 (paooo.com)](https://paooo.com/aigc-news/20619/) · 作者：Prompt 语宙研究院 · 发布时间：2026-06-08

## AI 30 秒核心看点 (TL;DR)

- 以法线图作中间表示，Hi3DGen 强化了2D到3D几何生成的细节保真度。
- 通过噪声注入与双流训练，图像到法线估计更稳定、可泛化且边缘更锐利。
- 两阶段生成结合3DGS与SDF重建，可输出更高分辨率多视角与高质量3D网格。

## Hi3DGen是什么

Hi3DGen 是香港中文大学（深圳）、字节跳动和清华大学的研究人员共同推出的高保真3D几何生成框架。能从2D图像生成高保真[3D模型](https://ai-bot.cn/ai-3d-model-generation-tools/)，通过基于法线图作为中间表示，Hi3DGen 可以生成丰富的几何细节，显著优于现有方法。框架包含三个关键组件：图像到法线估计器、法线到几何学习方法和3D数据合成管道。

## Hi3DGen的主要功能

- **从2D图像生成高保真3D模型**：能将2D图像转换为具有丰富细节的3D几何模型。

- **图像到法线估计**：通过噪声注入和双流训练，将低频和高频图像模式解耦，实现可泛化、稳定且锐利的法线估计。

- **法线到几何学习**：基于法线正则化的潜在扩散学习，增强3D几何生成的保真度。

- **3D数据合成**：构建高质量的3D数据集，支持训练。

## Hi3DGen的技术原理

- **图像到法线估计器**：组件通过噪声注入和双流训练，将图像的低频和高频模式解耦。低频模式负责整体形状和结构，高频模式负责细节和纹理。能生成可泛化、稳定且锐利的法线图，为后续的3D几何生成提供高质量的中间表示。

- **法线到几何学习方法**：基于法线图作为正则化手段，对潜在扩散模型进行训练。增强了3D几何生成的保真度，使生成的3D模型能保留更多的细节。

- **3D数据合成管道**：通过3D数据合成管道，构建高质量的3D数据集，用于训练模型。支持模型学习从2D图像到3D几何的映射关系。

- **两阶段生成过程**：Hi3DGen 采用两阶段生成过程：

**第一阶段：基础多视角生成**：使用预训练的视频扩散模型，通过额外的相机姿态条件进行微调，将单视角图像转换为低分辨率的3D感知序列图像（轨道视频）。

- **第二阶段：3D感知多视角细化**：将第一阶段生成的低分辨率多视角图像输入到3D感知视频到视频细化器中，进一步提升图像的分辨率和纹理细节。

- **3D高斯散射（3DGS）**：从生成的高分辨率多视角图像中学习隐式3D模型，通过3DGS渲染额外的插值视图。

- **基于SDF的重建**：通过基于SDF（Signed Distance Function）的重建方法，从增强的密集视图中提取高质量的3D网格。

## Hi3DGen的项目地址

- **项目官网**：[https://stable-x.github.io/Hi3DGen/](https://stable-x.github.io/Hi3DGen/?utm_source=ai-bot.cn)

- **Github仓库**：[https://github.com/Stable-X/Hi3DGen](https://github.com/Stable-X/Hi3DGen)

## Hi3DGen的应用场景

- **游戏开发**：快速生成高质量的3D游戏资产，如角色、道具和场景。

- **影视制作**：用于创建逼真的3D特效和动画，节省传统建模的时间和成本。

- **3D可视化**：从不同角度查看和分析3D模型，适用于建筑设计、工业设计等领域。

- **虚拟摄影**：生成不同视角的高质量图像，用于在线展示和营销。

- **文物保护**：从文物的单张照片重建3D模型，用于数字化保存和研究。

- **医学成像**：从医学图像（如X光、CT）生成3D模型，辅助诊断和治疗。

## 常见问题解答 (FAQ)

### Hi3DGen 主要解决什么问题？
Hi3DGen 主要解决从单张2D图像生成高保真3D几何时细节不足的问题。它通过法线图作为中间表示，并结合两阶段多视角生成与重建流程，提升模型的几何细节和整体保真度。

### Hi3DGen 的核心技术亮点是什么？
核心亮点包括图像到法线估计、法线到几何学习和3D数据合成管道。其图像到法线模块采用噪声注入与双流训练，能解耦低频结构与高频细节，从而生成更稳定、锐利的法线图。

### Hi3DGen 可以用于哪些场景？
可用于游戏开发、影视制作、3D可视化、虚拟摄影、文物保护和医学成像等场景。尤其适合需要从单张图片快速重建高质量3D资产或模型的任务。

---
探索 2,800+ 全球实用 AI 工具与官方直达入口：[语宙 AI 导航 (https://ai.paooo.com/)](https://ai.paooo.com/)
