网易首页 > 网易号 > 正文 申请入驻

腾讯混元郭春超:仅靠视频,很难真正进入游戏和工业化生产流程

0
分享至


作者:SY

出品:明亮公司

2026北京智源大会世界模型分论坛上,腾讯混元3D及世界模型负责人郭春超以《混元3D:从物体生成到世界模型的研发探索》为题,系统分享了腾讯混元在3D资产生成、3D生产管线以及HY World系列世界模型方面的最新进展。

随着World Model成为人工智能领域最热门的方向之一,行业正沿着视频生成、具身智能和空间智能等不同路线展开探索。相比从视频生成出发构建世界模型,腾讯更强调3D资产和三维空间的重要性。

在郭春超看来,世界模型不仅需要“看起来像世界”,更需要进入真实生产流程,服务于游戏开发、数字内容生产和工业仿真等场景。而这些场景背后,都离不开可编辑、可修改、可复用的3D资产。

“仅靠视频,很难真正进入游戏和工业生产流程。”郭春超表示,视频路线在视觉表现和动态生成方面具有天然优势,但如果希望兼容游戏引擎、工业仿真以及内容生产体系,仅有视频远远不够。世界模型不仅需要生成世界,更需要理解世界、编辑世界,并与现有生产系统相兼容。

因此,在HY World的发展过程中,腾讯始终坚持保留三维空间表达能力。从支持Mesh场景资产导出,到兼容图形引擎,再到围绕生成、导航、扩展和重建构建完整的3D世界生成框架,核心目标始终是让世界模型从展示层走向生产层。


北京智源大会、腾讯混元(下同)

与此同时,郭春超也指出,当前World Model(世界模型)仍处于非常早期的发展阶段。一方面,行业尚未形成统一的评测标准;另一方面,大多数模型虽然能够实现视觉上的合理生成,但距离真正理解物理规律仍有较大差距。如何从“视觉正确”走向“物理正确”,如何让模型具备更强的可交互性和决策能力,仍是未来几年行业需要持续攻克的问题。

在他看来,未来世界模型的发展不会是单一路线的胜出。视频世界模型与3D世界模型将长期并行发展,而空间智能与语言智能也将逐渐走向融合。

以下为「明亮公司」基于现场速记、演示文稿整理的演讲内容:

从3D资产到3D世界

腾讯混元是一个多模态模型家族,覆盖语言、图像、视频、语音以及3D等多个模态,并服务于腾讯内部众多业务场景。具体到3D方向,我们的发展主要围绕两条主线展开。

第一条主线是3D物体生成。从2024年开始,我们持续迭代混元3D系列模型,陆续发布了混元3D 1.0、3D2.0、3D2.5、3D3.0等多个版本。

第二条主线是3D世界模型。从2025年开始,我们持续推进HY World系列模型研发,也是业内较早开源的3D世界生成模型之一。


整体来看,我们的研发布局围绕两部分展开:一是生成式3D资产,二是3D世界模型,希望推动AI 3D技术的发展与商业化落地。

为什么先做3D资产生成

3D资产本质上是连接人与计算机的重要载体。无论是工业设计、数字内容生产、游戏开发,还是机器人仿真,底层都离不开3D资产。过去3D内容生产存在一个明显问题:门槛高、成本高、专业性强。一个成熟建模师往往需要经过长期训练,很多企业和团队难以承担相关成本。

而AIGC和3D大模型的出现,为3D资产生产带来了新的可能性。我们认为,3D资产是构成世界的基础元素,也是距离商业化最近的一环。因此团队最早并没有直接切入世界模型,而是先从3D资产生成开始,希望重构3D生成的底层语言。


目前,3D单体生成已经发展到较好的水平,同时我们也在持续推进3D生产管线的AI化,希望利用AI重塑传统CG工作流。

从物体生成迈向世界生成

当3D资产生成能力逐步成熟之后,一个自然的问题出现了:能否进一步构建完整的世界?因此我们开始探索3D世界模型。在我们的理解中,世界模型的发展路径可以概括为:3D资产生成 → 场景生成 → 主体与场景交互 → 世界演化与模拟。最终实现世界的生成、重建、编辑与交互的一体化。


我们对于“世界”的定义其实很简单:世界本质上是一个可交互的三维场景。它既可以是虚拟世界,例如游戏、VR以及数字内容场景;也可以是真实世界,例如数字孪生、工业仿真以及机器人场景。

世界模型仍处于早期阶段

过去一年,World Model成为行业最热门的话题之一。随着具身智能的发展,大量公司开始发布自己的世界模型产品,整个行业也进入快速探索阶段。

从我们的观察来看,目前行业对世界模型的理解并不统一。有人认为视频模型就是世界模型;有人认为LLM本身也可以被视作一种世界模型;还有人认为空间智能才是世界模型的核心。


从技术路线来看,目前主要可以分为三类:第一类是交互式视频世界模型,通过实时生成和预测像素序列完成世界模拟;第二类是显式3D世界模型,直接构建三维空间几何结构;第三类是在Latent Space中进行预测和推理的世界模型。

如果进一步扩展定义,把VLA等基于LLM的体系纳入进来,也可以认为存在第四类路线。目前整个行业仍然处于百家争鸣阶段,无论是底层架构还是训练方式,都还没有完全收敛。

HY World的发展路径

腾讯较早开始探索世界模型方向。2025年1月,HY World项目正式启动;2025年7月,我们发布了第一版开源3D世界模型,并支持消费级显卡部署。随后团队陆续推出HY World 1.5和HY World 2.0。其中,HY World 1.5是一套结合2D与3D能力的实时交互世界模型。当时我们实现了24FPS、720P实时生成能力,并将推理延迟控制在1秒左右,是当时国内较早可实时体验的视频世界模型之一。


对于Video-based World Model而言,视频训练、视频推理和视频展示天然一致,因此视觉效果往往比较突出,这也是视频路线能够快速流行的重要原因。不过我们始终认为,仅有视频并不足以满足工业和游戏生产需求。如果希望兼容游戏引擎、物理仿真和工业流程,最终仍然需要可编辑、可修改、可导出的3D资产。因此从HY World 1.0开始,我们就坚持支持Mesh场景资产导出,希望让模型真正进入生产系统,而不仅仅停留在演示阶段。

HY World 2.0:多模态3D世界模型

2026年4月,我们正式发布并开源HY World 2.0。相比前代产品,HY World 2.0进一步增强了多模态能力。输入侧支持文本、单图、多图、视频流以及几何白模等多种形式。输出侧则支持图片、视频、3D Gaussian Splatting以及Mesh场景等多种结果形式。


整个系统由四个核心模块组成:第一阶段是HY-Pano,负责生成全景图,为后续世界扩展提供空间先验;第二阶段是WorldNav,负责导航和路径规划。因为在一个世界中并非所有区域都可以通行,因此需要结合导航和路径搜索能力实现合理漫游;第三阶段是WorldStereo,负责世界扩展与新视角生成。它利用视频模型生成高质量的新视角内容,同时引入空间一致性记忆机制,保证扩展区域与原场景保持一致;第四阶段是WorldMirror,负责三维重建。我们希望打造一个统一的3D重建模型,支持多视图、视频流等多种输入,并输出点云、深度图、相机参数以及3DGS等结果。

通过这四个模块协同工作,HY World 2.0实现了从生成、导航、扩展到重建的完整闭环。

对世界模型未来的思考

过去一年多时间里,我们在世界模型方向投入了大量资源,也积累了一些经验。在我们看来,目前世界模型仍然面临几个核心挑战。

首先,行业还缺乏统一标准去定义“什么是好的World Model”。如果只是视觉质量高,其实远远不够。真正重要的是,它是否能够理解世界、模拟世界,并支持后续决策。

其次,物理可用性是世界模型的重要价值。目前很多模型能够做到视觉正确,但距离物理正确仍有差距。视频数据中包含大量视觉信息,但缺少精确的物理标注,因此模型在涉及复杂物理规律时仍然容易出错。

第三,评测体系仍然不完善。对于世界模型而言,可交互性和物理准确性往往比视觉质量更重要,但目前行业尚未形成统一的评价标准。


最后,我们认为未来的发展方向一定不是单纯扩大模型规模。世界模型的发展既依赖模型本身,也依赖高质量数据引擎。未来生成与重建将共同构成数据引擎,推动世界模型持续演进。同时,视频世界模型和3D世界模型也会长期并行发展,并根据不同应用场景进行组合。

更重要的是,空间智能与语言智能最终不会割裂,而会不断融合。我们希望未来能够构建一个统一的多模态空间智能基础模型。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
一个奇怪现象 : 为何网上失业哀鸿遍野 , 现实中大家都按部就班的工作

一个奇怪现象 : 为何网上失业哀鸿遍野 , 现实中大家都按部就班的工作

青史卷中人
2026-10-03 02:55:17
努尔哈赤有多猛?小他20岁的大妃阿巴亥哭诉:他在就得活在阴影里

努尔哈赤有多猛?小他20岁的大妃阿巴亥哭诉:他在就得活在阴影里

凡人侃史
2026-10-14 16:09:36
科技爆发 韩国熔断 A股明天大考

科技爆发 韩国熔断 A股明天大考

趋势巡航
2026-10-28 14:48:02
北大教授韩毓海:毛主席在世时,我根本没有能力真正理解他!

北大教授韩毓海:毛主席在世时,我根本没有能力真正理解他!

开箱历史
2026-10-21 07:25:07
重庆这家老牌互联网小贷公司被执行超千万元

重庆这家老牌互联网小贷公司被执行超千万元

呼呼历史论
2026-10-28 13:23:25
中国老人存款标准曝光:70岁达到这3个标准,就是家庭的福分

中国老人存款标准曝光:70岁达到这3个标准,就是家庭的福分

爱看剧的阿峰
2026-10-28 07:24:51
郑钦文和李娜能打进决赛并夺冠,为何中国网球男选手,经常一轮游

郑钦文和李娜能打进决赛并夺冠,为何中国网球男选手,经常一轮游

体育大学僧
2026-10-15 09:04:18
卡住加州两万张选票图谋落空!上诉法院紧急驳回特朗普诉求,重审州选举权力优先,中期选举博弈总统再添败绩

卡住加州两万张选票图谋落空!上诉法院紧急驳回特朗普诉求,重审州选举权力优先,中期选举博弈总统再添败绩

14号观星辰
2026-10-27 17:20:03
刘涛遭73岁创始人咸猪手:手从肩部滑至腰胸之间,她一转脸笑意消失

刘涛遭73岁创始人咸猪手:手从肩部滑至腰胸之间,她一转脸笑意消失

韩小娱
2026-10-28 18:20:03
一场3-2,上演补时绝杀,科瓦奇神换人:替补神兵任意球破门

一场3-2,上演补时绝杀,科瓦奇神换人:替补神兵任意球破门

足球狗说
2026-10-28 05:58:43
美国承认了,很多人以为美国不介入台海是还在犹豫。错了!真相是,他们早就做好了算术题:打不赢,也赔不起

美国承认了,很多人以为美国不介入台海是还在犹豫。错了!真相是,他们早就做好了算术题:打不赢,也赔不起

扶苏聊历史
2026-10-12 13:53:05
中国四杰挥别首尔被称内地男网之痛,大威首次回应屡战屡败

中国四杰挥别首尔被称内地男网之痛,大威首次回应屡战屡败

网球之家
2026-10-28 22:36:06
79岁李保田老到认不出,住处杂乱喝10元桶装水,儿子求着他拍视频

79岁李保田老到认不出,住处杂乱喝10元桶装水,儿子求着他拍视频

长歌侃娱
2026-10-12 09:22:42
走遍全国终于懂了:为什么广州,是中国最“良心”的一线城市

走遍全国终于懂了:为什么广州,是中国最“良心”的一线城市

白米饭怎么吃
2026-10-27 22:07:29
公元581年,杨坚抓获了高纬的宠妃冯小怜。她美貌依旧,却几乎没有大臣愿意娶她。杨坚喜道:“快,送去李将军后院。”

公元581年,杨坚抓获了高纬的宠妃冯小怜。她美貌依旧,却几乎没有大臣愿意娶她。杨坚喜道:“快,送去李将军后院。”

沐书闲读
2026-10-28 12:55:10
同比增近300%,亨通光电第三季度净利超30亿元 但章建平、方文艳退出前十大股东名单

同比增近300%,亨通光电第三季度净利超30亿元 但章建平、方文艳退出前十大股东名单

每日经济新闻
2026-10-28 21:56:06
凶宅试睡员在上海一别墅中被吓死,警方调查傻眼:这不是被吓死的

凶宅试睡员在上海一别墅中被吓死,警方调查傻眼:这不是被吓死的

罪案洞察者
2025-06-12 13:45:25
消息称红果短剧年收入400亿元 官方回应

消息称红果短剧年收入400亿元 官方回应

TechWeb
2026-10-28 09:30:09
河南多家工厂暴雷!老板作恶害百姓,还撂狠话,谁拿他们都没办法

河南多家工厂暴雷!老板作恶害百姓,还撂狠话,谁拿他们都没办法

郭蛹包工头
2026-10-28 15:31:50
南京同曦:总经理赛前说一个篮板500块,于是杜润旺抢了八个

南京同曦:总经理赛前说一个篮板500块,于是杜润旺抢了八个

懂球帝
2026-10-28 08:15:06
2026-10-29 04:04:49
明亮Company incentive-icons
明亮Company
追踪新商业、好公司。
749文章数 412关注度
往期回顾 全部

科技要闻

宇树科技前三季净利暴增270%

头条要闻

仅退款后冰柜仍插着电在使用 买家回应

头条要闻

仅退款后冰柜仍插着电在使用 买家回应

体育要闻

0胜4负与篮网国王一桌 热火字母哥赌错了?

娱乐要闻

巾帼不让须眉!章子怡拿下重磅荣誉

财经要闻

iPhone Duo七年等来一场吐槽大会

汽车要闻

首销期权益价23.98万起 2026款理想i6上市

态度原创

本地
游戏
数码
健康
公开课

本地新闻

十月奔赴迪庆,解锁梅里日照金山

盖世小鸡推出《GTA6》配色手柄 但疑似没有联动

数码要闻

苹果首次将“灵动岛”引入MacBook Pro

查不出猝死风险?可能是项目没做对

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版