Prompt 语宙Prompt 语宙
  • 首页
  • 语宙 AI 导航
  • AIGC 资讯
    • AIGC 早报生成器Hot
    • 最新趋势
    • AI 工具
    • 热门资源
    • 强化 AI 学习
  • AI 绘图
    • Prompt 实战
    • AI 绘画教程
    • 模型精选
  • AI 图库
    • 人物
    • 展台场景
    • Banner
    • 游戏
    • 动物
    • 食物
    • 自然
    • 背景
    • 海报
    • 建筑
    • 室内设计
  • 出海数字营销宝典
  • AI 生图 Prompt
    • 写实人像
    • 产品与广告
    • 游戏资产与 3D
    • 界面与图标
    • 建筑与室内
    • 动漫与插画
    • 风景与自然
搜索 AIGC 资讯、Prompt 咒语与 AI 工具
  • 语宙 AI 导航
  • 全部资讯
  • AI 生图咒语库
  • AIGC 早报生成器
  • 核心专题
  • 提交工具 / 合作
© 2023–2026 Prompt 语宙 (paooo.com). HalfPX. All Rights Reserved.
阅读: GameFactory – 香港大学和快手联合推出的可泛化游戏场景框架
Share
通知 阅读更多
Font Resizer字体
Font Resizer字体
Prompt 语宙Prompt 语宙
搜索 AIGC 资讯、Prompt 咒语与 AI 工具
  • 首页
  • 语宙 AI 导航
  • AIGC 资讯
    • AIGC 早报生成器Hot
    • 最新趋势
    • AI 工具
    • 热门资源
    • 强化 AI 学习
  • AI 绘图
    • Prompt 实战
    • AI 绘画教程
    • 模型精选
  • AI 图库
    • 人物
    • 展台场景
    • Banner
    • 游戏
    • 动物
    • 食物
    • 自然
    • 背景
    • 海报
    • 建筑
    • 室内设计
  • 出海数字营销宝典
  • AI 生图 Prompt
    • 写实人像
    • 产品与广告
    • 游戏资产与 3D
    • 界面与图标
    • 建筑与室内
    • 动漫与插画
    • 风景与自然
已有帐户? 登陆
  • 语宙 AI 导航
  • 全部资讯
  • AI 生图咒语库
  • AIGC 早报生成器
  • 核心专题
  • 提交工具 / 合作
© 2023–2026 Prompt 语宙 (paooo.com). HalfPX. All Rights Reserved.
GameFactory – 香港大学和快手联合推出的可泛化游戏场景框架
Prompt 语宙 > AIGC 资讯 > GameFactory – 香港大学和快手联合推出的可泛化游戏场景框架
AIGC 资讯

GameFactory – 香港大学和快手联合推出的可泛化游戏场景框架

Prompt 语宙研究院
最近更新: 2026年6月9日 上午3:18
3D与空间智能 AI视频生成 大模型微调 开源大模型
SHARE
⚡ Prompt 语宙 AI 导读 · 30 秒核心看点
  • 基于预训练视频扩散模型,GameFactory 解决游戏视频生成的场景泛化难题。
  • 三阶段训练配合动作控制模块,实现可控动作与无限长度交互式生成。
  • GF-Minecraft 提供 70 小时高质量标注数据,为开放域游戏视频生成提供支撑。

GameFactory是什么

GameFactory 是香港大学和快手科技联合提出的创新框架,解决游戏视频生成中的场景泛化难题。框架基于预训练的视频扩散模型,结合开放域视频数据和小规模高质量的游戏数据集,通过多阶段训练策略,实现动作可控的游戏视频生成。

阅读目录
  • GameFactory是什么
  • GameFactory的主要功能
  • GameFactory的技术原理
  • GameFactory的项目地址
  • GameFactory的应用场景

GameFactory – 香港大学和快手联合推出的可泛化游戏场景框架 - 配图

GameFactory的主要功能

  • 场景泛化能力:GameFactory 能生成多样化的游戏场景,不局限于单一风格或预设的场景。使生成的视频更具真实感和多样性。
  • 动作可控性:通过动作控制模块,GameFactory 可以实现对生成视频中角色或物体动作的精确控制。
  • 高质量数据集支持:为了支持动作可控的视频生成,GameFactory 采用了 GF-Minecraft 数据集。该数据集包含 70 小时的《我的世界》游戏视频,具有多样化的场景和详细的动作标注。
  • 交互式视频生成:GameFactory 支持生成无限长度的交互式游戏视频。用户可以通过输入指令或交互信号来控制视频内容的变化。

GameFactory的技术原理

  • 预训练视频扩散模型:GameFactory 基于在开放域视频数据上预训练的视频扩散模型,能生成多样化的游戏场景,突破了传统方法对特定游戏风格和场景的限制。
  • 三阶段训练策略
    • 第一阶段:使用 LoRA(Low-Rank Adaptation)对预训练模型进行微调,使其适应目标游戏领域,同时保留大部分原始参数。确保模型在开放域的泛化能力得以保留。
    • 第二阶段:冻结预训练参数和 LoRA,专注于训练动作控制模块,避免风格与控制信号之间的纠缠。目标是确保生成的视频能根据用户输入进行准确的动作控制。
    • 第三阶段:移除 LoRA 权重,保留动作控制模块参数,使系统能在各种开放域场景中生成受控的游戏视频,不局限于特定的游戏风格。
  • 动作控制模块:GameFactory 引入了动作控制模块,支持自回归动作控制,能生成无限长度的交互式游戏视频。
  • GF-Minecraft 数据集:为了支持动作可控的视频生成,研究团队发布了高质量的动作标注视频数据集 GF-Minecraft。数据集包含 70 小时的《我的世界》游戏视频,具有多样化的场景和详细的动作标注。数据集的设计满足了以下三个关键需求:
    • 可定制的动作:支持大规模、低成本的数据收集。
    • 无偏的动作序列:确保动作组合的多样性和低概率事件的覆盖。
    • 多样化的场景:通过预设的环境配置(如不同的生物群落、天气条件和时间段)增强场景多样性。

GameFactory的项目地址

  • 项目官网:https://vvictoryuki.github.io/gamefactory
  • arXiv技术论文:https://arxiv.org/pdf/2501.08325

GameFactory的应用场景

  • 游戏开发:GameFactory 通过预训练的视频扩散模型和动作控制模块,能生成多样化的游戏场景和交互式视频内容。
  • 游戏内容创新:GameFactory 的开放域生成能力使其能够突破传统游戏引擎的限制,创造出全新的游戏风格和场景。
  • 自动驾驶:其动作控制模块和场景生成能力可以用于模拟自动驾驶环境,生成多样化的驾驶场景。
  • 具身智能(Embodied AI):通过生成多样化的交互场景,为具身智能的研究提供支持。
❓ 常见问题解答(FAQ)
GameFactory 主要解决什么问题?

GameFactory 主要解决游戏视频生成中的场景泛化难题。它基于开放域视频预训练模型,并结合动作控制模块,让生成结果既能覆盖多样场景,又能按指令精确控制角色或物体动作。

GameFactory 的三阶段训练有什么作用?

第一阶段用 LoRA 微调以适应游戏领域;第二阶段冻结预训练参数和 LoRA,专注训练动作控制模块;第三阶段移除 LoRA,仅保留控制模块参数,从而在开放域场景中保持可控生成能力。

GF-Minecraft 数据集有什么特点?

GF-Minecraft 包含 70 小时《我的世界》游戏视频,带有详细动作标注。它强调可定制动作、无偏动作序列和多样化场景,便于低成本收集并支持动作可控的视频生成研究。

🔬 语宙深潜追问 · 进阶实操拆解
三阶段训练最关键的一步是什么?

通常最关键的是把“动作可控”与“场景多样”分开学,再在后期做联合对齐。先稳住时序一致性和动作响应,再补风格泛化,能显著降低模型只会“像视频”不会“像游戏”的问题。

GF-Minecraft 数据集怎么迁移到自家项目?

先抽取你项目里的核心交互动作和镜头规则,再按任务拆成可控标签、场景模板和失败样本三类数据。不要直接照搬游戏外观,重点迁移动作语义、状态转移和可编辑约束,才能提升泛化。

🗳️ 读者观点微投票 · 您的实战立场是?
你会把游戏场景生成交给通用视频扩散吗?
🕸️ 语宙向量知识图谱 · 语义强关联深度内链
🐋 所属权威专题:DeepSeek 深度实战与部署 →
  • GameGen-X – 香港科技大学联合多所机构推出的交互式开放世界游戏生成算法
  • GameGen-O – 腾讯推出的游戏视频生成模型,自动生成角色、场景、动作和事件
  • 港中文开源OpenGame框架:端到端生成可玩网页游戏,揭秘AI游戏开发新范式
  • AnimeGamer – 腾讯联合香港城市大学推出的动漫生活模拟系统
🏛️ Prompt 语宙研究院 · Prompt 语宙研究院(paooo.com Research)专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示词工程(Prompt Engineering)与全球高增长 AI 生产力工具实测追踪,致力于为中文开发者与创作者提供一手、可复现的深度技术洞察。
📄 Markdown 纯净版
💡 这篇内容对您有启发吗?
📡 RSS 订阅✨ 提交 AI 工具 / 合作
🚀 Prompt 语宙 AI 创作者生态:探索 2,800+ 全球实用 AI 工具与高精度生图提示词咒语库
🧭 语宙 AI 导航 (ai.paooo.com)🎨 AI 生图 Prompt 库📚 核心专题导航⚡ AIGC 早报生成器
OpenMath-Nemotron – 英伟达开源的数学推理系列模型
SANA 1.5 – 英伟联合MIT、清北等机构推出的文生图新框架
OpenMemory MCP – 基于MCP协议的本地AI记忆共享工具
Gemma 3 QAT – 谷歌推出的最新开源模型,Gemma 3 量化版
Galileo AI
TAGGED:3D与空间智能AI视频生成大模型微调开源大模型
分享
Email 复制链接 打印
Share
Prompt 语宙研究院 头像
ByPrompt 语宙研究院
Follow:
Prompt 语宙研究院(paooo.com Research)专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示词工程(Prompt Engineering)与全球高增长 AI 生产力工具实测追踪,致力于为中文开发者与创作者提供一手、可复现的深度技术洞察。
上一篇 Prometheus – 浙大联合蚂蚁等高校推出的3D感知潜在扩散模型 Prometheus – 浙大联合蚂蚁等高校推出的3D感知潜在扩散模型
下一篇 DiffuEraser – 阿里通义实验室推出的视频修复模型 DiffuEraser – 阿里通义实验室推出的视频修复模型
Ad image
Ad image

最近更新

花旗银行、摩根大通与美国银行等多家大型商业银行收紧服务条款,明确用户授权第三方 AI 智能体受损需自行担责
哪怕被黑客盗刷也不赔!花旗、摩根大通与美银等五大银行集体改写条款:使用第三方AI智能体风险由客户全权自担,生态入口博弈全面打响
AIGC 资讯
LangSmith for Coding Agents 代码智能体按 PR 结果核算成本与 ROI 官方封面图
340亿美元编码AI开销如何算清账?LangSmith上线代码智能体ROI追踪:按PR结果归因成本、五大工具全统一与线程上下文通胀治理指南
最新趋势
Axiom Math 利用 AI 多智能体集群完成 1.5 万页有限单群分类定理(CFSG)与 7500 页 Stacks 项目数学形式化验证的可视化点阵图
4300万行代码堪比Linux内核!Axiom Math用AI智能体攻克1.5万页“庞大定理”与Stacks项目形式化验证:百个里程碑与分层多智能体架构全拆解
最新趋势
印度具身智能数据初创公司 Humyn Labs 联合创始人 Ishank Gupta(左)与 Manish Agarwal(右)
半年营收破千万且90%来自美国!印度物理AI数据创企Humyn Labs获4700万美元A轮:双摄硬件、2100万债权垫资与20国采集网全拆解
AIGC 资讯

相关推荐

Logomaster AI
AI 工具

Logomaster AI

remaker
AI办公效率 AI绘画提示词 开源大模型
腾讯混元Turbo S – 腾讯推出的新一代快思考模型
AIGC 资讯

腾讯混元Turbo S – 腾讯推出的新一代快思考模型

Prompt 语宙研究院
ChatGPT Claude DeepSeek Llama 腾讯混元
TripoSG – VAST AI 开源的高保真 3D 形状合成技术
AIGC 资讯

TripoSG – VAST AI 开源的高保真 3D 形状合成技术

Prompt 语宙研究院
3D与空间智能 AI智能体 HuggingFace 开源大模型
大语言模型 (LLM) 的模式沿着数据到用户的轴线分布,展现了从防御到进攻的转变。
强化 AI 学习

构建基于大语言模型的系统与产品的策略 [译]

宝玉的分享
AI智能体 OpenAI RAG检索增强 大模型微调
/ Prompt 语宙 /

探索生成式 AI 的无限创作潜能,一站式获取前沿 AIGC 资讯、高阶 Prompt 咒语与全球实用 AI 工具。

核心专栏

  • 语宙 AI 工具导航
  • EVA 视觉抠图工坊Hot
  • 出海数字营销宝典
  • AI 生图咒语灵感库
  • 24H 硅谷 AI 情报流

生态与服务

  • 语宙 AI 导航
  • 全部资讯
  • AI 生图咒语库
  • AIGC 早报生成器
  • 核心专题
  • 提交工具 / 合作

标签

开源大模型 AI智能体 AI办公效率 AI绘画提示词 OpenAI 大模型微调 Midjourney AI编程 stable diffusion AI视频生成 ChatGPT 3D与空间智能 HuggingFace AI音频与语音 RAG检索增强 Claude Flux AIGC Gemini 通义千问 Anthropic Llama Cursor DeepSeek Prompt AI Agent Kimi 智谱AI 具身智能 YouTube
Prompt 语宙Prompt 语宙
Follow US
© 2023–2026 Prompt 语宙 (paooo.com). HalfPX. All Rights Reserved.