# GeneMAN – 上海AI Lab联合北大等高校推出的3D人体模型创建框架

- Link: https://paooo.com/aigc-news/25128/
- Published: 2026-07-11T23:48:29+08:00
- Author: Prompt 语宙研究院

⚡ [Prompt](https://paooo.com/ai-image-prompts/) 语宙 AI 导读 · 30 秒核心看点

 * 可从单张图片生成高保真3D人体模型，且不依赖传统参数化人体模型。
 * 通过2D/3D人类先验、几何雕刻与多空间纹理细化，提升复杂姿势和服装下的重建效果。
 * 适用于虚拟试衣、AR/VR、游戏角色与时尚设计等需要3D人体建模的场景。

## GeneMAN是什么

GeneMAN是上海AI实验室、北京大学、南洋理工大学、上海交通大学联合推出的3D人形创建框架，
能从单张图片中创建出高保真度的3D人体模型。框架不依赖于参数化人体模型，是用多源高
质量人类数据集，包括3D扫描、多视角视频、单张照片和合成数据训练人类特定的2D和3D先验
模型。GeneMAN基于几何初始化、雕刻流程和多空间纹理细化技术，实现从自然环境数据图像
中提取高质量3D人体模型的目标，不论图像中的人体比例、姿势或服装如何变化。

阅读目录

 * [GeneMAN是什么](https://paooo.com/aigc-news/25128/#geneman%e6%98%af%e4%bb%80%e4%b9%88)
 * [GeneMAN的主要功能](https://paooo.com/aigc-news/25128/#geneman%e7%9a%84%e4%b8%bb%e8%a6%81%e5%8a%9f%e8%83%bd)
 * [GeneMAN的技术原理](https://paooo.com/aigc-news/25128/#geneman%e7%9a%84%e6%8a%80%e6%9c%af%e5%8e%9f%e7%90%86)
 * [GeneMAN的项目地址](https://paooo.com/aigc-news/25128/#geneman%e7%9a%84%e9%a1%b9%e7%9b%ae%e5%9c%b0%e5%9d%80)
 * [GeneMAN的应用场景](https://paooo.com/aigc-news/25128/#geneman%e7%9a%84%e5%ba%94%e7%94%a8%e5%9c%ba%e6%99%af)

![GeneMAN](https://paooo.com/wp-content/uploads/2026/07/GeneMAN-website-1.avif)

## GeneMAN的主要功能

 * **处理多样化的人体比例**：无论图片中的人物是全身、半身还是特写，GeneMAN都能重建
   出相应的3D模型。
 * **适应不同的服装和姿势**：GeneMAN能处理各种服装和人体姿势，包括自然姿势和常见
   物品。
 * **处理野外图像**：GeneMAN特别擅长处理自然环境下的图像，即所谓的“野外数据”，这些
   图像可能包含多种复杂背景和光照条件。
 * **生成高质量的纹理**：基于多空间纹理细化流程，GeneMAN能生成细节丰富、与输入图像
   一致的3D人体纹理。

## GeneMAN的技术原理

 * **2D和3D人类先验模型训练**：
    - **文本到图像扩散模型**：训练一个人类特定的文本到图像扩散模型，用在生成2D人类
      先验。
    - **视图条件扩散模型**：训练一个视图条件扩散模型，用在生成3D人类先验。
 * **几何初始化与雕刻流程**：
    - **无模板几何初始化**：用NeRF（神经辐射场）技术初始化一个无模板的3D几何形状。
    - **结合先验与损失**：结合GeneMAN的2D和3D先验及结构化差异损失（SDS损失）引导
      几何初始化。
    - **参考损失**：用参考损失确保与输入图像的对齐。
    - **高分辨率细化**：将NeRF转换为DMTet（深度多面体网格）进行高分辨率的几何细化，
      由预训练的人类特定的法线和深度适应扩散模型引导。
 * **多空间纹理细化流程**：
    - **粗纹理生成**：用多视图纹理技术生成粗略的纹理。
    - **潜在空间细化**：在潜在空间中迭代细化纹理。
    - **像素空间细化**：基于优化UV图在像素空间中获得详细纹理，用基于2D先验的ControlNet
      进行优化。

## GeneMAN的项目地址

 * **项目官网**：[roooooz.github.io/GeneMAN](https://roooooz.github.io/GeneMAN/?utm_source=ai-bot.cn)
 * **GitHub仓库**：[https://github.com/roooooz/GeneMAN](https://github.com/roooooz/GeneMAN)（
   即将开源）
 * **arXiv技术论文**：[https://arxiv.org/pdf/2411.18624](https://arxiv.org/pdf/2411.18624)

## GeneMAN的应用场景

 * **虚拟试衣**：用户上传自己的全身照片，生成3D模型，用于在线试穿服装，提供更真实
   的试衣体验。
 * **游戏和娱乐**：在游戏和电影制作中，创建或修改角色模型，提供更个性化和逼真的角色
   设计。
 * **增强现实（AR）和虚拟现实（VR）**：在AR和VR应用中，生成用户的3D化身，提高沉浸
   感和交互性。
 * **时尚设计**：设计师快速将设计草图转换成3D模型，加速设计流程。
 * **健身和健康管理**：基于分析用户的3D模型，提供个性化的健身指导和健康建议。

❓ 常见问题解答（FAQ）

GeneMAN能从单张照片生成3D人体模型吗？

可以。GeneMAN的核心能力就是从单张图片中重建高保真3D人体模型，并尽量保留人物比例、
姿势和服装细节，适合野外环境下的真实照片输入。

GeneMAN和传统人体重建方法有什么不同？

它不依赖参数化人体模型，而是利用多源高质量人类数据训练2D和3D先验，再结合几何初始
化、雕刻流程与纹理细化来完成重建，因此对复杂服装、姿势和背景更有适应性。

GeneMAN适合哪些实际应用场景？

主要适合虚拟试衣、游戏和影视角色制作、AR/VR化身生成、时尚设计以及健身健康管理等场景，
尤其适合需要从真实照片快速生成3D人体资产的工作流。

🔬 语宙深潜追问 · 进阶实操拆解

不靠参数化人体，怎么稳住姿态和服装？

核心是先做几何初始化，再用多空间纹理细化逐步收敛。这样能减少对固定人体模板的依赖，
更好适配复杂姿态、宽松服装和野外背景，但对遮挡与极端视角仍要依赖高质量先验与训练
数据。

这类3D重建最适合哪些实际业务？

更适合虚拟试衣、数字人资产生成、影视预演和运动分析等需要快速建模的场景。若追求实
时交互或严格尺寸精度，仍需结合多视角采集、人体测量或后处理校准。

🗳️ 读者观点微投票 · 您的实战立场是？

单图重建3D人体，你更看重泛化还是精度？

🕸️ 语宙向量知识图谱 · 语义强关联深度内链

[🐋 所属权威专题：DeepSeek 深度实战与部署 →](https://paooo.com/topics/deepseek/)

 * [MagicMan – 腾讯联合多所高校推出2D图像生成3D人类模型的AI项目](https://paooo.com/aigc-news/26994/)
 * [GAS – 卡内基梅隆联合上海 AI Lab 等推出的单图生成3D人体框架](https://paooo.com/aigc-news/22013/)
 * [CharacterFactory – 大连理工推出的AI角色创作工具](https://paooo.com/aigc-news/27573/)
 * [FaceLift – Adobe 联合加州大学推出的单张图像到 3D 头部模型生成技术](https://paooo.com/aigc-news/22945/)

[🏛️ Prompt 语宙研究院](https://paooo.com/author/paooo-research/) · Prompt 语宙研究院（
paooo.com Research）专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示
词工程（Prompt Engineering）与全球高增长 AI 生产力工具实测追踪，致力于为中文开发
者与创作者提供一手、可复现的深度技术洞察。

[📄 Markdown 纯净版](https://paooo.com/aigc-news/25128/?format=md)

💡 这篇内容对您有启发吗？

[📡 RSS 订阅](https://paooo.com/feed/)[✨ 提交 AI 工具 / 合作](https://paooo.com/submit-tool/)

**🚀 Prompt 语宙 AI 创作者生态：**探索 2,800+ 全球实用 AI 工具与高精度生图提示词
咒语库

[🧭 语宙 AI 导航 (ai.paooo.com)](https://ai.paooo.com/)[🎨 AI 生图 Prompt 库](https://paooo.com/ai-image-prompts/)
[📚 核心专题导航](https://paooo.com/topics/)[⚡ AIGC 早报生成器](https://paooo.com/mtool/)