网易首页 > 网易号 > 正文 申请入驻

自动驾驶世界模型就只是做了预测这件事吗?

0
分享至

[首发于智驾最前沿微信公众号]2026年的自动驾驶领域,世界模型技术被广泛应用,很多人在第一次接触到世界模型的概念时,可能感觉它只是在做预测。

也就是在预测下一秒的画面、预测车辆轨迹、预测行人动向。

如果只是这样的话,那它和传统的时序预测模型有什么区别?

01

预测只是起点,不是终点

世界模型确实要做预测,这是它的基础能力,也就是给定过去几秒的观察和自车接下来的动作,世界模型需要推演出未来交通场景如何演变。

没有这项能力,后续一切都无从谈起,可一旦进入真实道路环境,情况就完全不一样了。

开过车,尤其是在闹区开过车的小伙伴应该都有这样一种体会。

在一个复杂的路口,电动车可能从盲区钻出来,公交车也可能会突然靠边,有些行人还会盯着手机过马路,而不观察路况。



图片源自:网络

在这种环境里,系统如果只是做像素级别的画面预测,而不理解画面中各类元素之间的因果交互,那这种预测对决策的价值就很有限。

真实的交通场景有太多的交互,举个例子,若自车打转向灯准备右转,旁边的自行车会不会减速让行,取决于车速、距离、骑车人的意图,甚至当时的天气。

这些因素之间的因果关系,才是驾驶决策的真正依据。

2026年很多企业发布的技术就是围绕这个问题展开,小鹏在CVPR上公布的X-Mind框架,核心思路是在生成动作之前先完成一段隐式的思维推演。

系统会提前判断前车急刹的概率、匝道汇入的冲突点、十字路口各个方向来车的潜在轨迹。

这项工作的厉害之处在于,不是因为它预测得准,而是因为它把预测结果直接和决策绑定在了一起。

预测完了交给规划模块自己去想办法,那是老思路;预测本身就是决策的依据,这是新思路。

小米在ECCV上发表的CausalDrive也印证了这个方向。

论文里指出了一个行业里心照不宣的问题,那就是不少驾驶世界模型在训练时偷偷用了周围车辆未来的轨迹信息,这相当于提前知道了答案。

CausalDrive刻意切断了这条捷径,只给模型初始图像、自车轨迹和文本提示,让模型自己学会推断其他交通参与者的反应。

这种设计逼迫模型理解因果关系,而不是做表面上的模式匹配。

02

从看见未来到创造场景

预测和生成之间其实有本质区别,预测是在既有数据的边界内推演,而生成是突破这个边界创造新东西。

2026年被行业称为物理AI元年,生成式技术在这个节点上真正成熟了。

视频时序生成、长链条推理、直接从视觉输入做规划等能力在过去是割裂的,现在开始整合在一个框架里。

商汤绝影在去年WAIC上展示的绝影开悟世界模型,一个很实际的用途就是生成训练数据。

真实路采的数据天然偏向常规场景,极端情况占比极低,而一个自动驾驶系统要在复杂的道路环境下安全运行,必须见过足够多的长尾案例。



图片源自:网络

像是施工路段临时改道、前方车辆掉落货物、夜间突然出现的动物横穿等场景,若靠路采积累,效率极低。

世界模型可以生成大量这样的场景用于训练,而且可以精确控制雨量大小、能见度距离、障碍物出现的位置和速度等参数。

Helm.ai今年5月发布的GenSim-3则实现了全高清分辨率的六摄像头环视数据生成,这套系统输出的不仅是单一视角的画面,而是完整的360度空间感知结果。

对于需要多传感器融合的自动驾驶系统来说,这种能力比单视角预测实用得多。

文远知行推出的WeRide GENESIS则试图打通真实世界和虚拟仿真之间的壁垒,让在仿真环境里训练出来的能力可以直接迁移到真实道路上。

智驾最前沿以为,对于世界模型来说,生成比预测可能更具意义。

预测解决的是接下来会发生什么,而生成解决的是如果发生这种事我该怎么办,前者是被动观察,后者是主动构建能力。

一个只能预测的模型,永远受限于训练数据的边界,而一个能生成的模型,才有可能覆盖那些数据里没有、但真实世界里可能出现的场景。

03

预测和规划之间的那道墙正在消失

传统自动驾驶架构里,感知、预测、规划是三个独立的模块。

感知模块输出障碍物的位置和类别;预测模块推算它们接下来怎么运动;规划模块根据预测结果制定自车轨迹。

这种分工清晰明了,但有一个根本问题,那就是信息在传递过程中会丢失。

感知模块为了输出结构化数据,不得不把连续的世界离散成有限的类别。

一个物体是行人还是骑自行车的人,这个标签决策本身就包含了不确定性。

传递给后续模块时这种不确定性有时又会被抹掉了,规划模块拿到的是一个已经确定的世界描述,也会基于这个描述做决策。

在这个情况下,一旦感知出错,后面就会全错。



图片源自:网络

世界模型不再输出离散标签,而是维护一个连续的环境表征。

在这个表征空间里,规划不再是一个独立的模块,而是模型内部的一个自然输出。

系统在预测未来状态的同时,就可以评估不同动作带来的后果,选择最优的那条轨迹。

在这个情况下,预测和规划之间的边界被消解了。

2025年发表的一篇综述文章《自动驾驶中的世界模型:综述与展望》将自动驾驶世界模型的研究归为未来场景生成与理解、端到端驾驶策略学习、闭环仿真系统三个方向。

这三个方向看似不同,底层逻辑却是一致的,都是让模型在统一的表征空间里同时完成感知、预测和规划。

WorldRFT框架(论文全称《WorldRFT: Latent World Model Planning with Reinforcement Fine-Tuning for Autonomous Driving》)则提出通过对齐场景表征和规划目标,用强化学习微调来提升安全关键场景的表现。

UniDrive-WM(论文全称《UniDrive-WM: Unified Understanding, Planning and Generation World Model For Autonomous Driving》)明确提出,世界模型的目标是从历史观测推断自车状态和动态环境,直接服务于规划和预测。

从上面提到的这些内容中可以发现,它们都不把预测当作世界模型的终点。

预测是手段,规划才是目的,一个好的世界模型,其输出的状态空间本身就是可规划的,不需要额外搭建一座桥把预测结果搬到规划模块里去。

04

融合趋势下再看世界模型的位置

2025年到2026年初,行业里关于VLA和世界模型哪条路线更优的争论非常激烈。

VLA路线把大语言模型的能力引入自动驾驶,让系统具备场景理解和推理能力;世界模型路线则强调对物理规律的建模和未来状态的推演。

两条路线的支持者各执一词,争论一度相当尖锐。

但到了2026年下半年,争论的声音逐渐小了,头部企业的实践表明,这并不是一个二选一的问题。

小鹏在CVPR 2026上明确表示VLA可以负责学习如何行动,世界模型则负责学习行动之后世界如何变化,两者共同构成完整的决策基础;

理想发布的MindVLA O1则在强化空间物理认知方面做了大量工作;

吉利、Momenta、轻舟智航这些不同背景的玩家,也都在向世界模型技术靠拢。



图片源自:网络

智驾最前沿以为,如果世界模型只是一个预测器,那它和VLA之间确实是互补关系,一个负责理解场景,一个负责预测演化。

但行业实际走向是融合而不是简单并列,这说明世界模型承担的角色比预测更底层。

它不仅要预测未来,还要为决策提供可操作的环境表征,甚至直接参与轨迹评估和选择。

对于世界模型是不是一个高级的视频预测器这个问题,智驾最前沿认为,它不是,只能说,预测是它的起点,但远远不是全部。

一个只做预测的系统,本质上是在回答未来会怎样这个单一问题,它把世界当作一个可以被动观察的演化过程,系统本身不介入、不干预,只输出推演结果。

而一个整合了预测、生成、规划的系统,回答的是如果我这样做,未来会怎样;如果那样做,又会怎样;我应该怎么做这三个递进的问题。

前者是被动的观察者,后者是主动的推演者和决策者。

在真实道路环境中,这两种系统的差距是结构性的,一个预测再准的系统,如果无法把预测结果转化为决策依据,那它的价值就止步于看得准。

而无法解决开得好的问题,而这正是世界模型和传统时序预测模型最根本的区别所在。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
矛盾升级!WTT赛程惹大麻烦,日本乒协放话:这样的安排无法接受

矛盾升级!WTT赛程惹大麻烦,日本乒协放话:这样的安排无法接受

湘村大余
2026-10-31 11:56:44
李小冉给天下女人上了一课!你可以结婚,也可以离婚,但你一定要记住,结婚之后不要任性不生孩子。

李小冉给天下女人上了一课!你可以结婚,也可以离婚,但你一定要记住,结婚之后不要任性不生孩子。

背包旅行
2026-10-30 19:15:31
没有引号!比亚迪,被美军给封杀了

没有引号!比亚迪,被美军给封杀了

小李车评李建红
2026-10-30 08:00:06
入职前问学院领导,考核不过咋办,领导说先进来再说,不过也没关系!结果最终考核是人事处说了算,学院过了人事处也可能不给过......

入职前问学院领导,考核不过咋办,领导说先进来再说,不过也没关系!结果最终考核是人事处说了算,学院过了人事处也可能不给过......

高教经纬88
2026-10-31 16:55:03
当年刘銮雄当着张晋的面直说:"你老婆跟了我六年"全场一下安静了

当年刘銮雄当着张晋的面直说:"你老婆跟了我六年"全场一下安静了

共情故事会
2026-10-31 13:18:49
李连杰一家三口拜见仁波切,64岁利智许久不见,颜值回春如昔日!

李连杰一家三口拜见仁波切,64岁利智许久不见,颜值回春如昔日!

娱乐团长
2026-06-02 15:09:12
“余生好好走”,前央视主持王小丫,病床前歪歪扭扭留言字字催泪

“余生好好走”,前央视主持王小丫,病床前歪歪扭扭留言字字催泪

海棠未眠a
2026-10-17 03:07:11
湖人输勇士发布会!雷迪克甩锅球员,里弗斯反思,东契奇话语矛盾

湖人输勇士发布会!雷迪克甩锅球员,里弗斯反思,东契奇话语矛盾

细话篮球
2026-10-31 14:50:52
西安6岁女童被拐9年,每天隐忍不发背家庭地址,最终找到父母并将人贩子送进监狱

西安6岁女童被拐9年,每天隐忍不发背家庭地址,最终找到父母并将人贩子送进监狱

磊子讲史
2026-10-20 15:39:41
跟网约车的师傅聊天,真正感受到经济下行了

跟网约车的师傅聊天,真正感受到经济下行了

祥子札记
2026-10-12 19:46:58
0时0分正式生效,日本内阁突然颁布法令,对中国加税,为期5年

0时0分正式生效,日本内阁突然颁布法令,对中国加税,为期5年

金戈远望
2026-10-30 15:06:36
火箭发射大厅,坐了满满一屋子人,他们都在干嘛?

火箭发射大厅,坐了满满一屋子人,他们都在干嘛?

清沐执笔
2026-10-21 21:40:08
时隔23年!瑞士外长再次访问朝鲜

时隔23年!瑞士外长再次访问朝鲜

IN朝鲜
2026-10-31 11:47:53
美国慌了,日方急了,印度懵了,菲律宾腿软了

美国慌了,日方急了,印度懵了,菲律宾腿软了

叶老四
2026-10-28 12:52:48
国家房改课题组原组长孟晓苏:房价肯定会涨,已有牛市抬头迹象

国家房改课题组原组长孟晓苏:房价肯定会涨,已有牛市抬头迹象

细说职场
2026-10-31 16:35:33
法国力挺姆巴佩,公然跟中国作对!扬言已经道歉,这事也该翻篇了

法国力挺姆巴佩,公然跟中国作对!扬言已经道歉,这事也该翻篇了

史智文道
2026-10-30 14:37:44
WTT,冠军赛,1-4,决赛对阵出炉!国乒锁定一席,林诗栋梁靖崑硬战强敌

WTT,冠军赛,1-4,决赛对阵出炉!国乒锁定一席,林诗栋梁靖崑硬战强敌

风信子的花
2026-10-31 11:40:20
陈小春问张智霖,你要是不做艺人了想干嘛,张智霖想都没想就说,我就想开个麻将馆

陈小春问张智霖,你要是不做艺人了想干嘛,张智霖想都没想就说,我就想开个麻将馆

一世菜鸟a
2026-10-29 13:37:45
赵丽颖解锁新身份:出任金鸡创投主评审,成85后第一人,网友:不鸣则已一鸣惊人

赵丽颖解锁新身份:出任金鸡创投主评审,成85后第一人,网友:不鸣则已一鸣惊人

韩小娱
2026-10-31 09:37:40
小小徐婚宴后续:婚礼直播间全被关,善意奔赴恐被流量带偏!

小小徐婚宴后续:婚礼直播间全被关,善意奔赴恐被流量带偏!

行者聊官
2026-10-31 17:29:49
2026-10-31 18:07:00
智驾最前沿
智驾最前沿
自动驾驶领域专业的技术、资讯分享平台。我们的slogan是:聚焦智能驾驶 ,紧盯行业前沿。
629文章数 11关注度
往期回顾 全部

科技要闻

苦等两年!国行苹果AI下周开测,12月推出

头条要闻

女子减重40斤后被指撞脸王祖贤 已去景区扮演"聂小倩"

头条要闻

女子减重40斤后被指撞脸王祖贤 已去景区扮演"聂小倩"

体育要闻

决胜时刻三连击!勒布朗绝命补篮价值千金

娱乐要闻

赵丽颖解锁新身份 出任金鸡创投主评审

财经要闻

Meta、谷歌、英特尔增发认购者集体浮亏

汽车要闻

钛7上市一年销量突破30万 海外半年销量2.7万

态度原创

教育
本地
旅游
数码
军事航空

教育要闻

一眼就能看出答案的几何题,孩子没有解答出来

本地新闻

秋假去哪玩,4 站打卡京郊限定秋色

旅游要闻

何以中国·壮美八桂|“门票经济”之外,桂林文旅正寻找新的增长点

数码要闻

439元小米智能门铃4 Pro双摄版发售:5MP双摄+ 9800mAh电池

军事要闻

美国批准向乌克兰出售500枚爱国者导弹

无障碍浏览 进入关怀版