网易首页 > 网易号 > 正文 申请入驻

从ChatGPT到世界模型:李飞飞一天三篇论文,AI下半场开始了

0
分享至

No.0313

Science Partner

Bring you to the side of science


导 读

6月11日,李飞飞的World Labs在同一天悄悄上传了三篇技术论文到arXiv。没有发布会,没有CEO直播,没有吊足胃口的预热推文。三篇论文、代码链接、项目主页、Demo全部附上。

熟悉AI圈节奏的人会意识到这意味着什么:这家公司要出那口憋了快两年的气。

三篇论文的主题分别是深度感知与图像生成的统一、3D场景的可见域外几何预测、以及人体动态的4D重建,覆盖了空间智能这个赛道从底层表示到高层应用的三个关键环节。也让我们管窥到世界模式是什么,也知道这件事有多难。

走,跟伙伴君来!


今日主笔 | 恒意

从ChatGPT到世界模型:李飞飞一天三篇论文,AI下半场开始了

01. 一场被很多人低估的路线之争

要理解这三篇论文的意义,得先弄清楚一个问题:大语言模型(LLM)和世界模型(World Model),到底在争什么?

过去三年,ChatGPT的成功让“下一个词预测”这件事变成了全球最热门的投资主题。训练数据更多、参数更大、算力更强,模型就越聪明。这套逻辑驱动了数千亿美元的资本流向,也主导了整个AI行业的技术路线。

但“邪路”从2024年底就已经出现了。

OpenAI的联合创始人之一Ilya Sutskever在2024年12月的NeurIPS年会上领了一个“时间考验奖”,上台发言时说了一句被广泛截图的话“我们所知道的预训练将会终结”。他把互联网比作AI的石燃料,警告这种资源是有限的。这位亲手参与建造大语言模型体系的人,给自己的路线判了一个有条件的死刑。

Yann LeCun比Ilya早说了好几年,炮火也猛烈的多得多。这位2018年与Hinton、Bengio共享图灵奖的得主(三人后来撕了),在Meta担任首席AI科学家超过十二年,期间反复在公开场合宣称:大语言模型永远无法实现人类水平的推理,因为它们缺少一个对世界的内在模型。2025年11月,他宣布离开Meta,2025年12月正式确认创立AMI Labs(Advanced Machine Intelligence),目标只有一个:训练世界模型。

虽然方向相同,但李飞飞给出的是另一种表述。她在2026年6月3日那篇长文里写道:大语言模型学的是文本的统计规律,而世界模型学的是时空的统计规律,光怎么照在物体上,东西受力后怎么运动,空间里的遮挡关系如何变化。一个从未见过物理世界的系统,对“苹果从树上掉下来”的理解,永远只是一组词与词之间的条件概率。

说白了,这是一场关于AI的下一步到底是什么的根本性分歧。

02. 数据墙有多真实

批评LLM路线的人,最常拿出来说的论据是数据墙(Data Wall)。

这个概念的核心逻辑并不复杂:互联网上的高质量文本数据是有限的。Forbes在2026年3月的分析指出,某些研究机构预测,可公开获取的高质量文本数据最早可能在2029年前耗尽,这一拐点正在加速逼近。AI公司的应对方案是合成数据,即用AI自己生成训练数据再喂给自己。但Forbes的分析直白地说,这时候真正稀缺的是人类无法被合成替代的高信号数据:合成数据可以量产,但它无法复现人类思维中那些罕见、独特、有创造性的边缘样本,模型反复在自我生成的数据上训练,最终会退化成对均值的模糊近似。

世界模型这条路的回答是:绕开文本数据的瓶颈,从视觉、空间、物理交互中学习。三维世界的信息密度远高于文字,而且不会枯竭。

现实世界永远在产生新的数据。

TechCrunch在2026年5月的一篇报道里揭示了这条逻辑链的商业延伸:一家叫Origin Lab的初创公司刚刚完成800万美元融资,专门帮电子游戏公司把游戏资产转化成世界模型训练数据,客户直接锁定的就是AMI Labs和World Labs。数据稀缺的问题,整个行业都感受到了。

03. 三篇文章看World Labs在赌什么

从外部能观察到的动作来看,World Labs的打法相当激进。

这家公司2024年9月从隐身状态现身,融了2.3亿美元。2026年2月18日,它宣布完成10亿美元融资,投资方包括NVIDIA、AMD、Autodesk,其中Autodesk单笔投入2亿美元,并拿下了一个战略顾问席位。彭博此前报道该轮估值约为50亿美元。从隐身到估值50亿美元,不到18个月。

2026年4月,World Labs入选Forbes年度AI 50榜单,被定位为空间智能赛道的奠基型公司。

这周的三篇论文,本质上是在给World Labs的产品Marble补技术底座。Marble是2025年11月上线的第一款商业产品,核心是从文字、图像或视频生成可导航的三维世界,定价从免费到95美元/月四个档位。咱们就看看,这三篇都说了啥:

第一篇:Modality Forcing

解决的是“如何用同一个模型同时学会看图和估深度的问题,即把图像和深度信息统一到一个Diffusion Transformer(DiT)里训练,仅用稀疏的深度数据就让模型学会几何感知。关键数据:深度估计误差(AbsRel指标)比现有同类方法降低57%;从3.7亿参数扩展到33亿参数时性能持续提升,说明这条路线有效的Scaling性质。

第二篇:World Tracing

传统的3D重建只能重建相机能看到的部分,如被遮挡的物体背面、桌子底下的地板,全是盲区。World Tracing为每一个输入像素预测一个“有序3D点堆栈”,第一层是可见表面,后续层是被遮挡的几何面,让模型能够“猜”出视野之外的世界结构。这篇论文在arXiv上直接标注为World Labs Technical Report(技术公告)。

第三篇:Flex4DHuman

把一段普通的单目视频里的人物,变成可以从任意角度观看的4D高斯泼溅(4D Gaussian Splats)。不需要骨骼数据、不需要深度图,只需要相对相机位姿。怎么样,这个能力对游戏、AR/VR、影视制作的意义不言而喻了吧。

04. LeCun和李飞飞的路线是两回事

虽然都是做世界模型,大家也经常将Yan LeCun和李飞飞并提,但其实,有一个细节容易被忽略:他们走的其实不是同一条路,甚至在某些技术假设上是对立的。

LeCun主推的是联合嵌入预测架构(Joint Embedding Predictive Architecture,JEPA)。2026年2月4日,他在蒙特利尔MILA研究院举办的世界建模研讨会上做了一场主题演讲,题目直接叫“为什么世界模型需要用JEPA,而不是生成式架构”。JEPA的逻辑是:不生成原始图像或视频,只在压缩的抽象表示空间里做预测,避开高维感官数据的噪声问题。LeCun认为生成每一个像素是浪费,世界模型应该学的是抽象的因果结构,而不是表象的视觉细节,感觉他读了经书有没有,LoL。

2026年3月,AMI Labs宣布完成10.3亿美元融资,估值35亿美元,创下欧洲史上最大种子轮纪录。机构投资方包括Cathay Innovation、Greycroft等五家,天使投资人名单里有Tim Berners-Lee、Mark Cuban和Eric Schmidt。

World Labs走的则是生成式路线。这周三篇论文核心也都是生成。李飞飞在6月3日那篇分类文章里明确写道,能够生成符合物理规律的世界,是世界模型区别于其他AI系统的首要标志。

这两条细分路线谁对谁错,现在下结论还太早。但这个分歧本身很有意思:两个都在批评LLM的人,但对于接下来该怎么做的答案,是相当不一样的。

05. 这对真实世界意味着什么

如果用最简单的话来说,大语言模型改变了我们和信息打交道的方式,世界模型要改变的是机器和物理世界打交道的方式。

这不是一个抽象的哲学问题。机器人、自动驾驶、工业自动化、AR/VR内容生成,这些领域的瓶颈,几乎无一例外是机器无法理解三维空间和物理规律,而不是机器不够会说话。Forbes在2026年1月指出,AI的下一阶段正在向“从自身感知和经验中学习的系统”倾斜,这描述的正是世界模型的基本工作逻辑。

World Labs这三篇论文,技术细节扎实,工程取向明确,没有Anthropic和OpenAI那种颠覆一切的宏大叙事。但恰恰是这种低调,是不是反而成了判断一个技术团队是否真的在做事的正向信号?

当然,回到最开始”世界模型最终能不能打败大语言模型“?其实这个问题本身就问错了。更可能的结局是:LLM负责语言和推理,世界模型负责感知和空间,两者协同,共同构成下一代AI的骨架。

伙伴,你怎么看这个事儿?欢迎后台私信留言~


本文仅作科普分享使用,欢迎小伙伴们点、收藏、关注,以备不时之需,当然更欢迎您把 介绍给周边可能需要的更多伙伴们呀。


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
1979年那场仗,中国人叫“自卫反击”,可越南人把这口气憋了47年,憋到近年才有人敢说实话

1979年那场仗,中国人叫“自卫反击”,可越南人把这口气憋了47年,憋到近年才有人敢说实话

扶苏聊历史
2026-09-04 13:53:44
特斯拉无人驾驶电动车正式运营,没有踏板没有方向盘,售价约20万元;马斯克解释金色外观由来:我们的交通在黄金时代

特斯拉无人驾驶电动车正式运营,没有踏板没有方向盘,售价约20万元;马斯克解释金色外观由来:我们的交通在黄金时代

极目新闻
2026-09-04 11:06:16
今晚11点,郑钦文将与斯瓦泰克争夺美网8强,此前交手1胜7负,复仇战即将打响

今晚11点,郑钦文将与斯瓦泰克争夺美网8强,此前交手1胜7负,复仇战即将打响

鲁中晨报
2026-09-06 08:07:02
突发!史上最大IPO推迟

突发!史上最大IPO推迟

PE星球
2026-09-06 08:35:23
中国会不会出现第2个毛主席?外国专家曾说:天才出现具有偶然性

中国会不会出现第2个毛主席?外国专家曾说:天才出现具有偶然性

傲傲讲历史
2026-09-05 16:30:30
因苹果对质量要求极其严格,消息称折叠屏iPhone初期日产仅数百部

因苹果对质量要求极其严格,消息称折叠屏iPhone初期日产仅数百部

IT之家
2026-09-04 21:29:03
复盘:美国估计也蒙了!年初抓马杜罗中国没翻脸,后来炸伊朗中国也没翻脸,但你要是盯着中国看,会发现一个特别有意思的细节!

复盘:美国估计也蒙了!年初抓马杜罗中国没翻脸,后来炸伊朗中国也没翻脸,但你要是盯着中国看,会发现一个特别有意思的细节!

扶苏聊历史
2026-09-05 12:37:50
这是85岁李讷的近照,注意她的坐姿,终于明白她为何一直没去纪念堂

这是85岁李讷的近照,注意她的坐姿,终于明白她为何一直没去纪念堂

南书房
2026-09-03 15:50:12
9月7日白露,牢记:1不穿,2不坐,3要戴,4多吃,千万别大意!

9月7日白露,牢记:1不穿,2不坐,3要戴,4多吃,千万别大意!

简食记工作号
2026-09-05 01:08:20
丰田RAV4卖太好反成烦恼,经销商直呼"真不寻常"

丰田RAV4卖太好反成烦恼,经销商直呼"真不寻常"

灰度测试中
2026-09-05 02:51:15
韩网友曾提问:在铁证面前,中国人为何还不承认汉字起源于韩国?

韩网友曾提问:在铁证面前,中国人为何还不承认汉字起源于韩国?

小豫讲故事
2026-09-06 06:00:14
酒店回应女子因“二次元穿搭”被拒绝入内用餐:无相关要求,后续会在官方平台进行澄清

酒店回应女子因“二次元穿搭”被拒绝入内用餐:无相关要求,后续会在官方平台进行澄清

扬子晚报
2026-09-05 09:02:45
恩里克最大短板凸显!登贝莱、弗兰均被踢出首发,大巴黎盛极必衰

恩里克最大短板凸显!登贝莱、弗兰均被踢出首发,大巴黎盛极必衰

体育世界
2026-09-05 20:45:25
喝酒四巨头全没了,最大35岁最小26岁,直播间成了他们最后的地方

喝酒四巨头全没了,最大35岁最小26岁,直播间成了他们最后的地方

绚丽的画卷
2026-09-05 06:56:57
10万亿转移支付的真相!一旦沿海税源萎缩,体制内会面临什么?

10万亿转移支付的真相!一旦沿海税源萎缩,体制内会面临什么?

说故事的阿袭
2026-09-05 06:47:30
全场0射正!夏窗豪掷3.6亿欧 8亿豪门天崩开局 3轮0进球只拿1分

全场0射正!夏窗豪掷3.6亿欧 8亿豪门天崩开局 3轮0进球只拿1分

狍子歪解体坛
2026-09-06 00:06:56
捷克女篮放话:打中国必须赢,最好大比分拿下

捷克女篮放话:打中国必须赢,最好大比分拿下

赛场名场面
2026-09-06 15:05:17
北京传来了振奋人心的好消息!

北京传来了振奋人心的好消息!

流逝的颜值
2026-09-05 13:57:32
如果主科是俄语,他们还会吼着取消吗?

如果主科是俄语,他们还会吼着取消吗?

手高在民间
2026-09-05 12:52:30
25岁中国女留学生遇害案新进展!韩警方确认双方恋人关系,更多细节曝光,疑点彻底失控

25岁中国女留学生遇害案新进展!韩警方确认双方恋人关系,更多细节曝光,疑点彻底失控

老猫观点
2026-09-05 08:05:41
2026-09-06 15:48:49
科学伙伴 incentive-icons
科学伙伴
把科学用通俗易懂的方式带到您身边
290文章数 58关注度
往期回顾 全部

科技要闻

DeepSeek被曝将采购16万颗华为昇腾950DT

头条要闻

马克龙42岁继女爱上小20岁男友 上演妈妈的忘年恋剧情

头条要闻

马克龙42岁继女爱上小20岁男友 上演妈妈的忘年恋剧情

体育要闻

本西蒙斯加盟国王,不管怎样,回来就好

娱乐要闻

低调富养!郭富城两女儿入读香港名校

财经要闻

亏损高达200亿,昔日彩电霸主走下巅峰!

汽车要闻

带升降立标MPV 岚图梦想家9预售价42.99万起

态度原创

亲子
家居
本地
公开课
军事航空

亲子要闻

北京经开区托育综合服务中心开园,开设2-3岁全日托服务

家居要闻

2026建博会(广州) 公装联探展交流活动

本地新闻

扒完小作文,富豪们私藏的度假胜地有多绝

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

美伊互袭油轮 伊朗军方称或对美进行更大规模打击

无障碍浏览 进入关怀版