网易首页 > 网易号 > 正文 申请入驻

从ChatGPT到世界模型:李飞飞一天三篇论文,AI下半场开始了

0
分享至

No.0313

Science Partner

Bring you to the side of science


导 读

6月11日,李飞飞的World Labs在同一天悄悄上传了三篇技术论文到arXiv。没有发布会,没有CEO直播,没有吊足胃口的预热推文。三篇论文、代码链接、项目主页、Demo全部附上。

熟悉AI圈节奏的人会意识到这意味着什么:这家公司要出那口憋了快两年的气。

三篇论文的主题分别是深度感知与图像生成的统一、3D场景的可见域外几何预测、以及人体动态的4D重建,覆盖了空间智能这个赛道从底层表示到高层应用的三个关键环节。也让我们管窥到世界模式是什么,也知道这件事有多难。

走,跟伙伴君来!


今日主笔 | 恒意

从ChatGPT到世界模型:李飞飞一天三篇论文,AI下半场开始了

01. 一场被很多人低估的路线之争

要理解这三篇论文的意义,得先弄清楚一个问题:大语言模型(LLM)和世界模型(World Model),到底在争什么?

过去三年,ChatGPT的成功让“下一个词预测”这件事变成了全球最热门的投资主题。训练数据更多、参数更大、算力更强,模型就越聪明。这套逻辑驱动了数千亿美元的资本流向,也主导了整个AI行业的技术路线。

但“邪路”从2024年底就已经出现了。

OpenAI的联合创始人之一Ilya Sutskever在2024年12月的NeurIPS年会上领了一个“时间考验奖”,上台发言时说了一句被广泛截图的话“我们所知道的预训练将会终结”。他把互联网比作AI的石燃料,警告这种资源是有限的。这位亲手参与建造大语言模型体系的人,给自己的路线判了一个有条件的死刑。

Yann LeCun比Ilya早说了好几年,炮火也猛烈的多得多。这位2018年与Hinton、Bengio共享图灵奖的得主(三人后来撕了),在Meta担任首席AI科学家超过十二年,期间反复在公开场合宣称:大语言模型永远无法实现人类水平的推理,因为它们缺少一个对世界的内在模型。2025年11月,他宣布离开Meta,2025年12月正式确认创立AMI Labs(Advanced Machine Intelligence),目标只有一个:训练世界模型。

虽然方向相同,但李飞飞给出的是另一种表述。她在2026年6月3日那篇长文里写道:大语言模型学的是文本的统计规律,而世界模型学的是时空的统计规律,光怎么照在物体上,东西受力后怎么运动,空间里的遮挡关系如何变化。一个从未见过物理世界的系统,对“苹果从树上掉下来”的理解,永远只是一组词与词之间的条件概率。

说白了,这是一场关于AI的下一步到底是什么的根本性分歧。

02. 数据墙有多真实

批评LLM路线的人,最常拿出来说的论据是数据墙(Data Wall)。

这个概念的核心逻辑并不复杂:互联网上的高质量文本数据是有限的。Forbes在2026年3月的分析指出,某些研究机构预测,可公开获取的高质量文本数据最早可能在2029年前耗尽,这一拐点正在加速逼近。AI公司的应对方案是合成数据,即用AI自己生成训练数据再喂给自己。但Forbes的分析直白地说,这时候真正稀缺的是人类无法被合成替代的高信号数据:合成数据可以量产,但它无法复现人类思维中那些罕见、独特、有创造性的边缘样本,模型反复在自我生成的数据上训练,最终会退化成对均值的模糊近似。

世界模型这条路的回答是:绕开文本数据的瓶颈,从视觉、空间、物理交互中学习。三维世界的信息密度远高于文字,而且不会枯竭。

现实世界永远在产生新的数据。

TechCrunch在2026年5月的一篇报道里揭示了这条逻辑链的商业延伸:一家叫Origin Lab的初创公司刚刚完成800万美元融资,专门帮电子游戏公司把游戏资产转化成世界模型训练数据,客户直接锁定的就是AMI Labs和World Labs。数据稀缺的问题,整个行业都感受到了。

03. 三篇文章看World Labs在赌什么

从外部能观察到的动作来看,World Labs的打法相当激进。

这家公司2024年9月从隐身状态现身,融了2.3亿美元。2026年2月18日,它宣布完成10亿美元融资,投资方包括NVIDIA、AMD、Autodesk,其中Autodesk单笔投入2亿美元,并拿下了一个战略顾问席位。彭博此前报道该轮估值约为50亿美元。从隐身到估值50亿美元,不到18个月。

2026年4月,World Labs入选Forbes年度AI 50榜单,被定位为空间智能赛道的奠基型公司。

这周的三篇论文,本质上是在给World Labs的产品Marble补技术底座。Marble是2025年11月上线的第一款商业产品,核心是从文字、图像或视频生成可导航的三维世界,定价从免费到95美元/月四个档位。咱们就看看,这三篇都说了啥:

第一篇:Modality Forcing

解决的是“如何用同一个模型同时学会看图和估深度的问题,即把图像和深度信息统一到一个Diffusion Transformer(DiT)里训练,仅用稀疏的深度数据就让模型学会几何感知。关键数据:深度估计误差(AbsRel指标)比现有同类方法降低57%;从3.7亿参数扩展到33亿参数时性能持续提升,说明这条路线有效的Scaling性质。

第二篇:World Tracing

传统的3D重建只能重建相机能看到的部分,如被遮挡的物体背面、桌子底下的地板,全是盲区。World Tracing为每一个输入像素预测一个“有序3D点堆栈”,第一层是可见表面,后续层是被遮挡的几何面,让模型能够“猜”出视野之外的世界结构。这篇论文在arXiv上直接标注为World Labs Technical Report(技术公告)。

第三篇:Flex4DHuman

把一段普通的单目视频里的人物,变成可以从任意角度观看的4D高斯泼溅(4D Gaussian Splats)。不需要骨骼数据、不需要深度图,只需要相对相机位姿。怎么样,这个能力对游戏、AR/VR、影视制作的意义不言而喻了吧。

04. LeCun和李飞飞的路线是两回事

虽然都是做世界模型,大家也经常将Yan LeCun和李飞飞并提,但其实,有一个细节容易被忽略:他们走的其实不是同一条路,甚至在某些技术假设上是对立的。

LeCun主推的是联合嵌入预测架构(Joint Embedding Predictive Architecture,JEPA)。2026年2月4日,他在蒙特利尔MILA研究院举办的世界建模研讨会上做了一场主题演讲,题目直接叫“为什么世界模型需要用JEPA,而不是生成式架构”。JEPA的逻辑是:不生成原始图像或视频,只在压缩的抽象表示空间里做预测,避开高维感官数据的噪声问题。LeCun认为生成每一个像素是浪费,世界模型应该学的是抽象的因果结构,而不是表象的视觉细节,感觉他读了经书有没有,LoL。

2026年3月,AMI Labs宣布完成10.3亿美元融资,估值35亿美元,创下欧洲史上最大种子轮纪录。机构投资方包括Cathay Innovation、Greycroft等五家,天使投资人名单里有Tim Berners-Lee、Mark Cuban和Eric Schmidt。

World Labs走的则是生成式路线。这周三篇论文核心也都是生成。李飞飞在6月3日那篇分类文章里明确写道,能够生成符合物理规律的世界,是世界模型区别于其他AI系统的首要标志。

这两条细分路线谁对谁错,现在下结论还太早。但这个分歧本身很有意思:两个都在批评LLM的人,但对于接下来该怎么做的答案,是相当不一样的。

05. 这对真实世界意味着什么

如果用最简单的话来说,大语言模型改变了我们和信息打交道的方式,世界模型要改变的是机器和物理世界打交道的方式。

这不是一个抽象的哲学问题。机器人、自动驾驶、工业自动化、AR/VR内容生成,这些领域的瓶颈,几乎无一例外是机器无法理解三维空间和物理规律,而不是机器不够会说话。Forbes在2026年1月指出,AI的下一阶段正在向“从自身感知和经验中学习的系统”倾斜,这描述的正是世界模型的基本工作逻辑。

World Labs这三篇论文,技术细节扎实,工程取向明确,没有Anthropic和OpenAI那种颠覆一切的宏大叙事。但恰恰是这种低调,是不是反而成了判断一个技术团队是否真的在做事的正向信号?

当然,回到最开始”世界模型最终能不能打败大语言模型“?其实这个问题本身就问错了。更可能的结局是:LLM负责语言和推理,世界模型负责感知和空间,两者协同,共同构成下一代AI的骨架。

伙伴,你怎么看这个事儿?欢迎后台私信留言~


本文仅作科普分享使用,欢迎小伙伴们点、收藏、关注,以备不时之需,当然更欢迎您把 介绍给周边可能需要的更多伙伴们呀。


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
网友称孩子在广州一大家乐就餐后进ICU,大家乐餐厅致歉:涉事消费者当天均进食了蛋炒饭,已完成抽样送检,涉事门店暂停营业

网友称孩子在广州一大家乐就餐后进ICU,大家乐餐厅致歉:涉事消费者当天均进食了蛋炒饭,已完成抽样送检,涉事门店暂停营业

大风新闻
2026-09-06 09:28:06
伯纳乌内讧危机!输球爆发矛盾!皇马巨星当众无视穆里尼奥

伯纳乌内讧危机!输球爆发矛盾!皇马巨星当众无视穆里尼奥

奶盖熊本熊
2026-09-06 08:06:29
医生大势已定?不出意外的话,未来5年,医疗行业或将出现4大巨变

医生大势已定?不出意外的话,未来5年,医疗行业或将出现4大巨变

华庭讲美食
2026-09-06 09:17:17
从月销4223台跌到367台!尊界销量暴跌90%!真要歇菜了吗?

从月销4223台跌到367台!尊界销量暴跌90%!真要歇菜了吗?

玩车专家1
2026-09-05 16:28:53
30万斤堆积如山,树上6万斤无人问津,低价卖不动,农民满心无奈

30万斤堆积如山,树上6万斤无人问津,低价卖不动,农民满心无奈

三农雷哥
2026-09-05 12:16:13
65岁刘德华登新闻联播冲上热搜:四十载沉淀,影协副主席职位加身

65岁刘德华登新闻联播冲上热搜:四十载沉淀,影协副主席职位加身

行者聊官
2026-09-04 17:29:47
日本队惨败!同组最强敌73-82爆冷,世界杯A组积分榜:3队同分

日本队惨败!同组最强敌73-82爆冷,世界杯A组积分榜:3队同分

菜菜说体育
2026-09-06 01:46:26
头号“国际巨婴”!苏联喂15年,中国养20多年,如今依旧穷得叮当响

头号“国际巨婴”!苏联喂15年,中国养20多年,如今依旧穷得叮当响

历史点行
2026-09-06 03:24:59
“长的这么漂亮,还是带家去吧!”高一女生不想住校,因颜值逃过一劫!

“长的这么漂亮,还是带家去吧!”高一女生不想住校,因颜值逃过一劫!

林林先生
2026-09-04 11:10:12
刷墙绿化换不来乡村振兴,救不了乡村衰败的危机

刷墙绿化换不来乡村振兴,救不了乡村衰败的危机

涛哥锐评
2026-09-05 08:02:08
21世纪世界最伟大的 10 位数学家(综合影响力参考排名)

21世纪世界最伟大的 10 位数学家(综合影响力参考排名)

林子说事
2026-09-05 02:35:10
别再打普通人的主意了,40年房贷也救不了楼市

别再打普通人的主意了,40年房贷也救不了楼市

百花谷周伯通
2026-09-05 07:17:07
1-0!神锋连场破门两轮3球 新帅上任14.5亿豪门开局3连胜领跑积分榜

1-0!神锋连场破门两轮3球 新帅上任14.5亿豪门开局3连胜领跑积分榜

狍子歪解体坛
2026-09-05 23:54:19
别再考虑夺冠了!张雪机车想获得车队第二和车手第一 只剩理论上的可能性了!

别再考虑夺冠了!张雪机车想获得车队第二和车手第一 只剩理论上的可能性了!

沉睡月亮m
2026-09-06 04:49:08
又开打了!伊朗头号盟友参战,导弹突袭斩首多名军官

又开打了!伊朗头号盟友参战,导弹突袭斩首多名军官

黑鹰观军事
2026-09-05 18:05:29
欧盟加入经济弃儿行动,美以一致:终结伊朗政权

欧盟加入经济弃儿行动,美以一致:终结伊朗政权

移光幻影
2026-09-05 17:02:52
驻俄大使馆开始“提醒”某些人了!

驻俄大使馆开始“提醒”某些人了!

走读新生
2026-09-03 11:48:48
2026年9月,养老金通知来了!滚动认证开启,补发涨薪消息别上当

2026年9月,养老金通知来了!滚动认证开启,补发涨薪消息别上当

陈博世财经
2026-09-06 09:55:14
我若死,小马科斯夫妇得陪葬!莎拉祸从口出,菲律宾法院下令逮捕

我若死,小马科斯夫妇得陪葬!莎拉祸从口出,菲律宾法院下令逮捕

国际法大视野
2026-09-05 10:42:06
《求是》重磅评论坦言社会活力减弱,信号意义非同寻常!

《求是》重磅评论坦言社会活力减弱,信号意义非同寻常!

识局Insight
2026-09-05 17:15:13
2026-09-06 11:56:49
科学伙伴 incentive-icons
科学伙伴
把科学用通俗易懂的方式带到您身边
290文章数 58关注度
往期回顾 全部

科技要闻

DeepSeek被曝将采购16万颗华为昇腾950DT

头条要闻

男子1.38万捡漏二手大众CC 懂车帝称操作失误未发货

头条要闻

男子1.38万捡漏二手大众CC 懂车帝称操作失误未发货

体育要闻

本西蒙斯加盟国王,不管怎样,回来就好

娱乐要闻

低调富养!郭富城两女儿入读香港名校

财经要闻

亏损高达200亿,昔日彩电霸主走下巅峰!

汽车要闻

带升降立标MPV 岚图梦想家9预售价42.99万起

态度原创

亲子
艺术
教育
时尚
公开课

亲子要闻

揪心一幕:幼儿园开学,孩子哭闹、甚至逃跑,家长不舍地扒墙观望

艺术要闻

有光的静物花卉,俄罗斯当代画家维罗尼卡·洛巴列娃

教育要闻

大鹏老师《初中数学压轴题杠上系列》完整内容目录!

金秋最流行的鞋子,“红色”更时髦!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版