# ViewCrafter – 北大、港中文联合腾讯提出的高保真新视图合成技术

- Link: https://paooo.com/aigc-news/27018/
- Published: 2026-07-09T08:33:12+08:00
- Author: 站外新闻

## ViewCrafter是什么

ViewCrafter 是北大和港中文联合腾讯提出的一种先进的视频扩散模型，能从单个或少量图像
中合成高保真的新视图。结合了视频扩散模型的生成能力和基于点的3D表示，精确控制相机
姿态生成高质量视频帧。通过迭代视图合成策略和相机轨迹规划，ViewCrafter 能逐步扩展
3D线索，生成更广泛的新视图。在多个数据集上展现了强大的泛化能力和性能，为实时渲染
的沉浸式体验和场景级文本到3D生成等应用提供了新的可能性。

阅读目录

 * [ViewCrafter是什么](https://paooo.com/aigc-news/27018/#viewcrafter%e6%98%af%e4%bb%80%e4%b9%88)
 * [ViewCrafte的主要功能](https://paooo.com/aigc-news/27018/#viewcrafte%e7%9a%84%e4%b8%bb%e8%a6%81%e5%8a%9f%e8%83%bd)
 * [ViewCrafte的技术原理](https://paooo.com/aigc-news/27018/#viewcrafte%e7%9a%84%e6%8a%80%e6%9c%af%e5%8e%9f%e7%90%86)
 * [ViewCrafte的项目地址](https://paooo.com/aigc-news/27018/#viewcrafte%e7%9a%84%e9%a1%b9%e7%9b%ae%e5%9c%b0%e5%9d%80)
 * [ViewCrafte的应用场景](https://paooo.com/aigc-news/27018/#viewcrafte%e7%9a%84%e5%ba%94%e7%94%a8%e5%9c%ba%e6%99%af)

![ViewCrafter – 北大、港中文联合腾讯提出的高保真新视图合成技术 - 配图](https://paooo.
com/wp-content/uploads/2026/07/ViewCrafte-website-1-1.avif)

## ViewCrafte的主要功能

 * **新视图合成**：从单个或少量图像中合成新的视图，扩展用户的视角。
 * **三维场景重建**：重建场景的三维结构，为新视图的生成提供几何基础。
 * **内容创作**：支持文本描述或其他创意输入生成三维场景，增强内容创作的灵活性。
 * **实时渲染**：优化三维场景表示，实现实时渲染，适用虚拟现实和增强现实应用。
 * **数据集泛化**：在多个数据集上验证模型性能，确保在不同场景下的泛化能力。

## ViewCrafte的技术原理

 * **点云重建**：基于密集立体视觉算法从输入图像中提取深度信息，构建场景的三维点云
   模型。
 * **视频扩散模型**：用深度学习中的生成模型，特别是扩散模型，生成新的视图。逐步从
   噪声图像中恢复出清晰的图像。
 * **迭代视图合成**：不断优化新视图的生成，每次迭代包括生成新视图和更新点云模型。
 * **摄像机轨迹规划**：自动规划摄像机的移动轨迹，从不同角度捕捉场景，生成更全面的
   视图。
 * **三维场景理解**：通过点云和生成模型结合，理解场景的三维结构，生成与原始场景一致
   的新视图。

## ViewCrafte的项目地址

 * **项目官网**：[https://drexubery.github.io/ViewCrafter/](https://drexubery.github.io/ViewCrafter/)
 * **GitHub仓库**：[https://github.com/Drexubery/ViewCrafter](https://github.com/Drexubery/ViewCrafter)
 * **arXiv技术论文**：[https://arxiv.org/pdf/2409.02048v1](https://arxiv.org/pdf/2409.02048v1)
 * **HuggingFace Demo体验**：[https://huggingface.co/spaces/Doubiiu/ViewCrafter](https://huggingface.co/spaces/Doubiiu/ViewCrafter)

## ViewCrafte的应用场景

 * **影视制作**：生成特效镜头中的新视角，在后期制作中增强场景的视觉效果。
 * **游戏开发**：电子游戏创建逼真的游戏环境和背景，提供更加沉浸式的游戏体验。
 * **虚拟现实（VR）**：在虚拟现实应用中，ViewCrafter 生成360度全景图像，增强用户
   的沉浸感。
 * **增强现实（AR）**：在现实世界中无缝地融入虚拟对象，提供更加丰富的交互体验。
 * **建筑可视化**：帮助设计师从不同角度展示建筑模型，提供更加直观的设计评估。

**🚀 Prompt 语宙 AI 创作者生态：**探索 2,000+ 全球实用 AI 工具与高精度生图提示词
咒语库

[🧭 语宙 AI 导航 (ai.paooo.com)](https://ai.paooo.com/)[🎨 AI 生图 Prompt 库](https://paooo.com/ai-image-prompts/)
[⚡ AIGC 早报生成器](https://paooo.com/mtool/)