# GameFactory – 香港大学和快手联合推出的可泛化游戏场景框架

- Link: https://paooo.com/aigc-news/22744/
- Published: 2026-06-09T03:18:22+08:00
- Author: Prompt 语宙研究院

⚡ [Prompt](https://paooo.com/ai-image-prompts/) 语宙 AI 导读 · 30 秒核心看点

 * 基于预训练视频扩散模型，GameFactory 解决游戏视频生成的场景泛化难题。
 * 三阶段训练配合动作控制模块，实现可控动作与无限长度交互式生成。
 * GF-Minecraft 提供 70 小时高质量标注数据，为开放域游戏视频生成提供支撑。

## GameFactory是什么

GameFactory 是香港大学和快手科技联合提出的创新框架，解决游戏[视频生成](https://ai-bot.cn/ai-video-generation-tools/)
中的场景泛化难题。框架基于预训练的视频扩散模型，结合开放域视频数据和小规模高质量
的游戏数据集，通过多阶段训练策略，实现动作可控的游戏视频生成。

阅读目录

 * [GameFactory是什么](https://paooo.com/aigc-news/22744/#gamefactory%e6%98%af%e4%bb%80%e4%b9%88)
 * [GameFactory的主要功能](https://paooo.com/aigc-news/22744/#gamefactory%e7%9a%84%e4%b8%bb%e8%a6%81%e5%8a%9f%e8%83%bd)
 * [GameFactory的技术原理](https://paooo.com/aigc-news/22744/#gamefactory%e7%9a%84%e6%8a%80%e6%9c%af%e5%8e%9f%e7%90%86)
 * [GameFactory的项目地址](https://paooo.com/aigc-news/22744/#gamefactory%e7%9a%84%e9%a1%b9%e7%9b%ae%e5%9c%b0%e5%9d%80)
 * [GameFactory的应用场景](https://paooo.com/aigc-news/22744/#gamefactory%e7%9a%84%e5%ba%94%e7%94%a8%e5%9c%ba%e6%99%af)

![GameFactory – 香港大学和快手联合推出的可泛化游戏场景框架 - 配图](https://paooo.
com/wp-content/uploads/2026/06/GameFactory-website-1-1.avif)

## GameFactory的主要功能

 * **场景泛化能力**：GameFactory 能生成多样化的游戏场景，不局限于单一风格或预设的
   场景。使生成的视频更具真实感和多样性。
 * **动作可控性**：通过动作控制模块，GameFactory 可以实现对生成视频中角色或物体动作
   的精确控制。
 * **高质量数据集支持**：为了支持动作可控的视频生成，GameFactory 采用了 GF-Minecraft
   数据集。该数据集包含 70 小时的《我的世界》游戏视频，具有多样化的场景和详细的动作
   标注。
 * **交互式视频生成**：GameFactory 支持生成无限长度的交互式游戏视频。用户可以通过
   输入指令或交互信号来控制视频内容的变化。

## GameFactory的技术原理

 * **预训练视频扩散模型**：GameFactory 基于在开放域视频数据上预训练的视频扩散模型，
   能生成多样化的游戏场景，突破了传统方法对特定游戏风格和场景的限制。
 * **三阶段训练策略**
    - **第一阶段**：使用 LoRA（Low-Rank Adaptation）对预训练模型进行微调，使其适应
      目标游戏领域，同时保留大部分原始参数。确保模型在开放域的泛化能力得以保留。
    - **第二阶段**：冻结预训练参数和 LoRA，专注于训练动作控制模块，避免风格与控制
      信号之间的纠缠。目标是确保生成的视频能根据用户输入进行准确的动作控制。
    - **第三阶段**：移除 LoRA 权重，保留动作控制模块参数，使系统能在各种开放域场景
      中生成受控的游戏视频，不局限于特定的游戏风格。
 * **动作控制模块**：GameFactory 引入了动作控制模块，支持自回归动作控制，能生成无限
   长度的交互式游戏视频。
 * **GF-Minecraft 数据集**：为了支持动作可控的视频生成，研究团队发布了高质量的动作
   标注视频数据集 GF-Minecraft。数据集包含 70 小时的《我的世界》游戏视频，具有多样
   化的场景和详细的动作标注。数据集的设计满足了以下三个关键需求：
    - **可定制的动作**：支持大规模、低成本的数据收集。
    - **无偏的动作序列**：确保动作组合的多样性和低概率事件的覆盖。
    - **多样化的场景**：通过预设的环境配置（如不同的生物群落、天气条件和时间段）
      增强场景多样性。

## GameFactory的项目地址

 * **项目官网**：[https://vvictoryuki.github.io/gamefactory](https://vvictoryuki.github.io/gamefactory/?utm_source=ai-bot.cn)
 * **arXiv技术论文**：[https://arxiv.org/pdf/2501.08325](https://arxiv.org/pdf/2501.08325)

## GameFactory的应用场景

 * **游戏开发**：GameFactory 通过预训练的视频扩散模型和动作控制模块，能生成多样化
   的游戏场景和交互式视频内容。
 * **游戏内容创新**：GameFactory 的开放域生成能力使其能够突破传统游戏引擎的限制，
   创造出全新的游戏风格和场景。
 * **自动驾驶**：其动作控制模块和场景生成能力可以用于模拟自动驾驶环境，生成多样化
   的驾驶场景。
 * **具身智能（Embodied AI）**：通过生成多样化的交互场景，为具身智能的研究提供支持。

❓ 常见问题解答（FAQ）

GameFactory 主要解决什么问题？

GameFactory 主要解决游戏视频生成中的场景泛化难题。它基于开放域视频预训练模型，并
结合动作控制模块，让生成结果既能覆盖多样场景，又能按指令精确控制角色或物体动作。

GameFactory 的三阶段训练有什么作用？

第一阶段用 LoRA 微调以适应游戏领域；第二阶段冻结预训练参数和 LoRA，专注训练动作控制
模块；第三阶段移除 LoRA，仅保留控制模块参数，从而在开放域场景中保持可控生成能力。

GF-Minecraft 数据集有什么特点？

GF-Minecraft 包含 70 小时《我的世界》游戏视频，带有详细动作标注。它强调可定制动作、
无偏动作序列和多样化场景，便于低成本收集并支持动作可控的视频生成研究。

🔬 语宙深潜追问 · 进阶实操拆解

三阶段训练最关键的一步是什么？

通常最关键的是把“动作可控”与“场景多样”分开学，再在后期做联合对齐。先稳住时序一致性
和动作响应，再补风格泛化，能显著降低模型只会“像视频”不会“像游戏”的问题。

GF-Minecraft 数据集怎么迁移到自家项目？

先抽取你项目里的核心交互动作和镜头规则，再按任务拆成可控标签、场景模板和失败样本
三类数据。不要直接照搬游戏外观，重点迁移动作语义、状态转移和可编辑约束，才能提升
泛化。

🗳️ 读者观点微投票 · 您的实战立场是？

你会把游戏场景生成交给通用视频扩散吗？

🕸️ 语宙向量知识图谱 · 语义强关联深度内链

[🐋 所属权威专题：DeepSeek 深度实战与部署 →](https://paooo.com/topics/deepseek/)

 * [GameGen-X – 香港科技大学联合多所机构推出的交互式开放世界游戏生成算法](https://paooo.com/aigc-news/25793/)
 * [GameGen-O – 腾讯推出的游戏视频生成模型，自动生成角色、场景、动作和事件](https://paooo.com/aigc-news/26892/)
 * [港中文开源OpenGame框架：端到端生成可玩网页游戏，揭秘AI游戏开发新范式](https://paooo.com/aigc-news/10818/)
 * [AnimeGamer – 腾讯联合香港城市大学推出的动漫生活模拟系统](https://paooo.com/aigc-news/20518/)

[🏛️ Prompt 语宙研究院](https://paooo.com/author/paooo-research/) · Prompt 语宙研究院（
paooo.com Research）专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示
词工程（Prompt Engineering）与全球高增长 AI 生产力工具实测追踪，致力于为中文开发
者与创作者提供一手、可复现的深度技术洞察。

[📄 Markdown 纯净版](https://paooo.com/aigc-news/22744/?format=md)

💡 这篇内容对您有启发吗？

[📡 RSS 订阅](https://paooo.com/feed/)[✨ 提交 AI 工具 / 合作](https://paooo.com/submit-tool/)

**🚀 Prompt 语宙 AI 创作者生态：**探索 2,800+ 全球实用 AI 工具与高精度生图提示词
咒语库

[🧭 语宙 AI 导航 (ai.paooo.com)](https://ai.paooo.com/)[🎨 AI 生图 Prompt 库](https://paooo.com/ai-image-prompts/)
[📚 核心专题导航](https://paooo.com/topics/)[⚡ AIGC 早报生成器](https://paooo.com/mtool/)
