网易首页 > 网易号 > 正文 申请入驻

迈向通用游戏智能,清华、米哈游开源GameScaling系列模型

0
分享至



部分作者介绍:

张宽:清华大学人工智能学院博士生,研究游戏智能体。

苏悦:香港大学 MMLab 博士生,研究世界模型与具身智能。

罗润:新加坡国立大学博士生,研究全模态基础模型。

郑银河:米哈游崩坏系列 AI NPC & Gameplay 技术团队负责人。

李一鸣:清华大学人工智能学院助理教授,厘清智能创始人,前英伟达研究科学家。

近日,米哈游联合清华大学、香港大学、新加坡国立大学等学术机构,开源首个通用游戏模型 GameScaling 系列:覆盖0.8B、2B、9B、27B 四档规模,共八个模型,权重与推理代码均以 Apache 2.0 协议发布。



视频链接:https://mp.weixin.qq.com/s/T2LNcUGe5L4LR7duwVfNPg

  • 项目主页: https://gamescaling.github.io
  • 模型网址: https://huggingface.co/THUSI-Lab/GameScaling
  • 代码仓库: https://github.com/THUSI-Lab/GameScaling

GameScaling 可以在《我的世界》中采矿、合成、打僵尸,在 Doom 中战斗、导航,在场景逃脱任务中寻找出路。它根据画面、任务提示和近期交互历史,生成键盘与鼠标操作,随着游戏的变化不断决定下一步。



图 1 GameScaling-2B-S3 在 Minecraft 中执行采集、合成与战斗任务的实时演示片段。来源: GameScaling 网站宣传视频

GameScaling 模型炫酷的操作背后也有扎实的评测分数:在《我的世界》MCU 基准的 30 项任务中,GameScaling-27B-S1 的平均成功率达到63.3%。据团队实测,其中的 0.8 - 9B 的 6 个模型在单张 H200 或 RTX 5090上,即可实现接近每秒 5 次观测、每秒 30 步动作的实时游戏交互。

研究团队开源 GameScaling 模型,是希望能与社区一起研究:AI 怎样才能把在一个世界学到的经验,带到另一个世界?这也是游戏与人工智能长期相伴之后,一道自然浮现的新考题。1997 年,深蓝击败国际象棋世界冠军;2012 年深度学习爆发以来,AlphaGo 和 AlphaStar 分别在围棋和《星际争霸 II》中战胜世界冠军,OpenAI Five 在 Dota 2 中展示了多智能体协作的能力;到了大模型时代,Voyager 又在《我的世界》里探索环境、积累技能。游戏见证并推动着 AI 从搜索、学习走向规划与行动。但通用游戏智能还要面对另一层挑战。在现实世界中,无论机器人走进工厂还是家庭,重力、碰撞等物理规律依然成立,共同的规律为经验积累与规模化学习提供了基础。虚拟世界却可以重新设定一切:画面风格、物理机制、动作空间和任务目标,换一款游戏就可能全部改变。同样是「向前走」,背后可能是第一人称视角下的三维移动,可能是上帝视角下的平面移动,也可能是横版世界中的平台跳跃。



图 2 现实世界遵循一套固定物理规律,为经验积累与规模化学习提供了基础;游戏的画面风格、物理机制、动作空间和任务目标都可以改变,能否维持 “Scaling Law” 还没有被系统研究。来源:GameScaling 论文图 1

当世界本身的规则不断变化,增加数据量、丰富多样性、扩大模型,曾经无往不利的 Scaling Law 还能继续奏效吗?

为了回答这个问题,GameScaling 团队基于 Qwen3.5 系列开展持续预训练,使用开源社区的游戏轨迹,将视觉语言模型的知识与可执行操作连接起来。模型根据游戏画面、任务提示和近期交互历史,输出接下来 200 毫秒的键盘与鼠标操作。看见画面、快速思考、做出动作、接收新画面,再决定下一步,构成了智能体在游戏中行动的基本循环。

实验将模型,数据时长,数据多样性三个变量分开考察:设计0.8B 至 27B 的四档模型规模、50 至 1600 小时的六档游戏数据预算,以及游戏轨迹从全部来自《我的世界》到多游戏混合的五种数据多样性配比,共形成120 组受控配置。评测也从训练覆盖的世界 MineCraft 和 Doom,延伸到未见过的相近 3D 世界,以及视角和操作机制差异更大的 2D 和 2.5D 世界,观察经验与智能究竟能迁移多远。

研究首先发现了一种有意思的学习节奏:模型早期像是在熟悉自己的「手」。经过初始训练,按键、鼠标和动作格式的预测迅速改善,收益也出现在训练未覆盖的世界。团队将其称为「接口阶段」;随后进入「世界阶段」,进一步提升越来越依赖模型经历过哪些游戏,收益主要集中在训练覆盖和相近的世界,对遥远的世界的损失甚至会上升。



图 4 早期训练中,按键、鼠标和动作格式的预测误差迅速下降。四幅图依次为按键损失、鼠标损失、格式损失和鼠标方向预测准确率。S1 为单游戏轨迹配比,S4 为多游戏轨迹配比。来源:GameScaling 论文图 2。

这让数据多样性的价值变得具体。在同为 1600 小时的预算下,多游戏混合训练在 OmniGameArena 七个未见过的相关 3D 世界中,跨配比、跨模型规模的平均得分约为单独训练 MineCraft 的2.8 倍。移动、转向、瞄准等经验,确实有机会跨越游戏边界。



图 5 GameScaling 在 OmniGameArena 未见过的相关 3D 环境中的任务演示,包括移动、射击、障碍穿越和场景逃脱。来源:GameScaling 官网宣传视频。

模型规模则呈现出另一面。更大的模型通常能更高效地吸收有限经验,但如果长期只训练一个游戏,它在差异较大的世界中也可能退步得更明显。这提示研究者,参数量、数据量和数据配比需要共同设计:学得更快,并不自动意味着迁移得更远。

团队进一步拟合了关联这三个因素的验证损失经验 Scaling Law,为估计训练覆盖世界中的学习收益提供依据。但对于差异较大的未见世界,继续增加训练数据和模型大小并未带来稳定改善。GameScaling 因而同时呈现了扩展的潜力与边界:现有持续预训练能够积累可迁移的操作经验,更广泛的泛化还需要探索更充分的世界覆盖与交互学习机制。

此外,如果模型想走进真正运转的游戏,还有一个绕不开的因素:时间。

敌人正在逼近,目标正在移动,几秒前的正确判断可能已经失效。为此,团队分别测试了「模型思考时暂停游戏」和「游戏持续运行」两种模式。在论文的实时评测设置下,GameScaling-9B-S3 在四个基准上的平均分达到25.3,高于所测 OpenAI, Anthropic, Google 前沿模型的最高值 19.2。该比较尽管包含部署与服务延迟的影响,但仍然揭示了游戏智能的一项实际要求,即决策必须来得及改变局面。



图 6: 实时战斗演示:左侧为 Claude Opus 5.0,右侧为 GameScaling-9B。游戏在模型生成动作时持续运行,画面时延为该片段记录,包含相应部署与调用方式的影响。来源:GameScaling 官网宣传视频。

作者表示,GameScaling 当前侧重探索跨世界的 Scaling 现象,尚未针对最终游戏表现做特定优化。希望 GameScaling 的经验可以指导后续游戏数据的收集、构建与配比,让扩大训练规模更有依据,也为打造能力更强、适应范围更广的游戏模型提供方向。同时,跨越更远的世界,仍需要探索更广泛的游戏经验,以及在实际交互中利用成败反馈学习的机制。这也让通用游戏智能的下一步有了更明确的目标。

电影《头号玩家》的吸引力,既在于规则各异的世界,也在于其中能够共同冒险的伙伴。通往这样的未来,需要不断扩展的虚拟内容,也需要能理解不同规则、真正参与其中的智能同伴。

我们相信,随着技术发展,未来的智能游戏 NPC 或许能在玩家说出「帮我守住入口」后,观察地形、选择位置,并随着战况调整行动;玩家与他的智能伙伴,可以保留上一个世界的经验,共赴下一场冒险。GameScaling 模型的开源为此提供了一个可检验的研究起点:探索如何让在一个世界中学到的本领,成为走进下一个世界的能力。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
俄媒:匈牙利计划放弃从俄罗斯进口天然气

俄媒:匈牙利计划放弃从俄罗斯进口天然气

参考消息
2026-11-05 12:16:15
2000年中央派人看望原副总理姬鹏飞,姬鹏飞说见你们比见毛主席还难!

2000年中央派人看望原副总理姬鹏飞,姬鹏飞说见你们比见毛主席还难!

海佑讲史
2026-10-08 15:10:09
又一省级金融局局长,拟任地级市市委书记

又一省级金融局局长,拟任地级市市委书记

清华金融评论
2026-11-05 08:57:50
果然工作留痕的含金量还在上升,网友:关键时候可以保命

果然工作留痕的含金量还在上升,网友:关键时候可以保命

夜深爱杂谈
2026-10-30 17:03:14
乔姐喊话易建联要青春,帖子秒删却留下一个更难看的真相

乔姐喊话易建联要青春,帖子秒删却留下一个更难看的真相

眼界看世界
2026-11-04 21:55:04
河南姑娘极简婚礼火了!三轮车接亲,婆婆当司仪,整场只花2600元,当事人:8.8万元彩礼一分不要,娘家又添8000元带回来,只图老公这个人

河南姑娘极简婚礼火了!三轮车接亲,婆婆当司仪,整场只花2600元,当事人:8.8万元彩礼一分不要,娘家又添8000元带回来,只图老公这个人

极目新闻
2026-11-04 20:33:58
两性关系:女人实话实说,男性过了73岁,对女人的最大需求有5点

两性关系:女人实话实说,男性过了73岁,对女人的最大需求有5点

荔子言
2026-11-05 10:19:03
创业板指翻绿,早盘一度涨超3%

创业板指翻绿,早盘一度涨超3%

澎湃新闻
2026-11-05 14:09:27
终于不装了!经纪人:詹姆斯在76人比湖人更开心!

终于不装了!经纪人:詹姆斯在76人比湖人更开心!

爱体育
2026-11-04 22:15:34
A股三大指数集体低开,上证指数跌1.07%,创业板指跌2%

A股三大指数集体低开,上证指数跌1.07%,创业板指跌2%

每日经济新闻
2026-11-05 09:36:05
花生被点名了!医生:糖尿病病人吃花生,不必等多久或有5大好处

花生被点名了!医生:糖尿病病人吃花生,不必等多久或有5大好处

芹姐说生活
2026-08-04 22:50:02
【油价大跌】来了,原油3天“暴跌超16%”,11月95,92号汽油“越跌越多”,11月12日油价或“大跌超300元/吨”

【油价大跌】来了,原油3天“暴跌超16%”,11月95,92号汽油“越跌越多”,11月12日油价或“大跌超300元/吨”

油价早知道
2026-11-05 09:05:19
印度20岁女子与丈夫争吵,怕遭家暴报警,在警局寻求庇护反被警员性侵,15人被停职;民众举行抗议集会,要求判嫌疑人死刑

印度20岁女子与丈夫争吵,怕遭家暴报警,在警局寻求庇护反被警员性侵,15人被停职;民众举行抗议集会,要求判嫌疑人死刑

洪观新闻
2026-11-04 11:07:37
中国怎么办?欧盟这次是动真格了。2027 年 12 月 14 日起,要求补交三年的用工记录...

中国怎么办?欧盟这次是动真格了。2027 年 12 月 14 日起,要求补交三年的用工记录...

网络易不易
2026-10-08 06:40:17
法国妈妈坐高铁给宝宝冲奶,要杯热水竟被收3.40欧!SNCF的解释也很离谱

法国妈妈坐高铁给宝宝冲奶,要杯热水竟被收3.40欧!SNCF的解释也很离谱

新欧洲
2026-11-03 21:49:28
贝克汉姆收购曼联?拉特克利夫离开曼联的条件已触发

贝克汉姆收购曼联?拉特克利夫离开曼联的条件已触发

夜白侃球
2026-11-05 16:13:39
最新民调:蒋万安支持度破五成!领先沈伯洋8.8个百分点

最新民调:蒋万安支持度破五成!领先沈伯洋8.8个百分点

健身狂人
2026-11-05 14:47:35
纯钛杯、纯钛餐具的第一批受害者出现了…

纯钛杯、纯钛餐具的第一批受害者出现了…

新住家居
2026-10-24 18:06:53
日本可能与中国开战?日专家:与中国发生战争,最长只能坚持一周

日本可能与中国开战?日专家:与中国发生战争,最长只能坚持一周

窥史
2026-10-14 10:20:37
北京八宝山,数万坟位期满却无人再缴,并非儿孙不孝,实在是家里兜不住了。

北京八宝山,数万坟位期满却无人再缴,并非儿孙不孝,实在是家里兜不住了。

回京历史梦
2026-11-05 09:17:27
2026-11-05 17:12:49
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
14403文章数 142755关注度
往期回顾 全部

游戏要闻

《羊蹄山之魂》将加入巅峰境井仁 重制60余段动作

头条要闻

91岁老人去世在殡仪馆火化 家属安葬时却发现领错骨灰

头条要闻

91岁老人去世在殡仪馆火化 家属安葬时却发现领错骨灰

体育要闻

40岁,正是绝杀的年纪!

娱乐要闻

关婷娜43岁仍未婚早有后路

财经要闻

伯克希尔,连续3天扫货!

科技要闻

美国AI基建,突然急踩刹车!

汽车要闻

省钱 它是认真的!银河星耀6EF每公里成本只要2毛

态度原创

亲子
旅游
游戏
本地
公开课

亲子要闻

这下你可以看个够了

旅游要闻

寻味义安丨我宣布:义安已到“最佳赏味期”!

任天堂公布软件销量 《斯普拉遁:涂击队》达242万份

本地新闻

乌兰察布:以前种土豆,现在种Token

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版