网易首页 > 网易号 > 正文 申请入驻

驾驶是向前看,为什么自动驾驶还要记住过去?

0
分享至

本文首发于智驾最前沿微信公众号,2026年,小鹏第二代VLA引入了30秒历史上下文,同时加入未来6秒预测。

这里有一个很有意思的问题,驾驶本质上是在判断下一步该怎么走,为什么模型还需要不断回看已经发生的事情?

01

只看现在

为什么还不够?

假设前方有一辆车,当前距离你的车有40米。

单看这一帧,自动驾驶系统可以知道前方有车,并估计它当前的位置等空间状态,但很难仅凭这一瞬间判断它接下来究竟会怎么走。

如果把过去几秒的信息加入进来,情况就不同了。

这辆车可能原本保持车道行驶,随后逐渐向旁边偏移,接着又开始减速。



图片源自:网络

单独看当前画面,它只是距离40米的一辆车;把连续状态串起来后,系统看到的则是一个正在发生变化的交通参与者。

这也是历史信息真正的价值。

它不是为了让模型知道过去发生过什么,而是让模型知道当前状态经过怎样的变化形成。

驾驶场景中有大量类似情况。

一个行人重新出现在车辆前方,当前画面只能告诉模型这里出现了一个行人。

但如果此前这个行人曾被停靠车辆遮挡,或者一直在朝道路方向移动,那么历史信息就能帮助模型理解,这次出现并不是一个孤立事件。

旁边车辆突然靠近也是如此。

当前距离只是一个结果,过去几秒的横向位置变化,才能帮助系统判断它是在正常行驶,还是正在持续向自己的车道靠近。

也就是说,当前状态可以告诉智驾模型现在是什么样,历史状态则可以告诉智驾模型这个状态是经过怎样的变化形成的。

而这恰是预测未来所需要的信息。

02

预测未来

为什么反而离不开过去?

自动驾驶真正要做的,并不是判断当前画面,而是根据当前道路状态决定下一步动作。

但当前状态本身并不会包含足够的信息。

比如一辆车当前正在减速。它可能只是短暂减速,也可能已经连续减速了几秒;它可能很快恢复正常行驶,也可能因为前方拥堵停车。

这些情况在某一个瞬间可能非常相似,但对应的未来完全不同。

所以,自动驾驶预测未来时,需要的不只是当前的空间状态,还需要知道状态正在朝哪个方向变化。

这也是时间信息进入自动驾驶模型的重要原因。



图片源自:网络

CVPR 2025的研究《Bridging Past and Future: End-to-End Autonomous Driving with Historical Prediction and Planning》就专门讨论了历史信息与未来预测、规划之间的关系。

该研究通过历史信息增强感知与运动规划,并在nuScenes的开放环和闭环测试中验证了这种时序建模方法。

该研究指出,传统方法要么在运动规划中丢失历史信息,要么未能与规划的多步性质对齐;历史信息需要根据规划的时间步结构,在感知和规划的不同阶段分别注入。

这背后逻辑可以理解为,过去发生了什么,决定了当前状态是怎样形成的;当前状态和变化趋势,又决定了未来可能出现什么。

因此,自动驾驶模型记住过去,并不是把过去当成一个单独的信息库,而是把与当前驾驶相关的历史状态变成预测未来的一部分。

03

记住过去之后

自动驾驶到底多知道了什么?

对于智驾系统来说,真正有价值的历史信息,并不是越多越好。

如果将大量与当前驾驶无关的历史内容全部保留下来,只会增加模型处理上下文的计算成本,也可能引入与当前决策无关的信息。

真正需要保留的,是那些能够解释当前状态、帮助判断未来的历史信息。

譬如一个行人刚刚被遮挡,车辆需要知道他此前出现在哪里;前车开始减速,系统需要判断这种变化是瞬时状态,还是已经形成了持续趋势。



图片源自:网络

这意味着自动驾驶需要的记忆,并不是人类意义上的完整记忆,而更接近一种与当前驾驶任务相关的时序上下文。

小鹏官方在2026年8月公布的第二代VLA升级方案中,将Infini-VLA描述为长时序架构,在车端保留30秒历史上下文,让此前发生的动作、位置和场景继续参与当前判断;

同时,X-Foresight根据车辆位置、速度和环境等变化预判未来6秒的场景变化,车端方案以6秒作为预测窗口。

04

最后的话

智驾最前沿以为,自动驾驶模型开始记住过去,并不是驾驶逻辑发生了变化,而是模型开始更完整地处理驾驶本身的时间属性。

人类驾驶员在判断前车下一步动作时,也不会只依据眼前这一瞬间做决定,而会结合刚才观察到的速度、方向和运动变化进行判断。

驾驶看起来是在预测未来,但预测未来的依据,往往来自过去的状态变化。

对自动驾驶来说,真正需要的也不是记住所有过去,而是保留那些能够解释当前状态、帮助判断未来的时间信息。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
伟大的绝杀!终结美国,力克日本,中国是冠军!人民日报发文赞誉

伟大的绝杀!终结美国,力克日本,中国是冠军!人民日报发文赞誉

粵語经典歌單
2026-10-24 10:48:58
夫妻俩因家庭纠纷到派出所调解,丈夫竟两次抢夺警枪,想要用枪击打妻子,获刑4年

夫妻俩因家庭纠纷到派出所调解,丈夫竟两次抢夺警枪,想要用枪击打妻子,获刑4年

扬子晚报
2026-10-31 13:31:12
蔡康永:未来不会再到大陆表演,欠粉丝太多,但这不是我造成的!

蔡康永:未来不会再到大陆表演,欠粉丝太多,但这不是我造成的!

你是我心中最美星空
2026-10-30 22:31:36
“十岁女孩长这样,天塌了”,家长晒低审美照片,刷新了网友认知

“十岁女孩长这样,天塌了”,家长晒低审美照片,刷新了网友认知

世界圈
2026-10-31 18:22:13
“你们这是想在水下杀了我!”中国潜水教练在马尔代夫18米水下遭3人拉拽、脚踢、抓手臂 潜水呼吸调节器和面镜差点被摘掉!

“你们这是想在水下杀了我!”中国潜水教练在马尔代夫18米水下遭3人拉拽、脚踢、抓手臂 潜水呼吸调节器和面镜差点被摘掉!

闪电新闻
2026-10-31 11:09:49
我感觉其实不用再猜了,万斯大概率就是下一届美国总统。真要是他入主白宫,首当其冲的就是中国

我感觉其实不用再猜了,万斯大概率就是下一届美国总统。真要是他入主白宫,首当其冲的就是中国

扶苏聊历史
2026-10-26 17:56:12
姐的好身材,是我炫耀的资本

姐的好身材,是我炫耀的资本

疾跑的小蜗牛
2026-10-31 20:27:15
四强赛看孙颖莎!就在今晚20:30!如果莎莎能赢下26岁早田希娜,国乒将会收获3大利好!CCTV5直播,早田恐第22次被虐

四强赛看孙颖莎!就在今晚20:30!如果莎莎能赢下26岁早田希娜,国乒将会收获3大利好!CCTV5直播,早田恐第22次被虐

篮球热嗖
2026-10-31 19:15:36
对于后天周一A股,我只说3句话:第一,3574点很可能是个开始?

对于后天周一A股,我只说3句话:第一,3574点很可能是个开始?

股侠指北针
2026-10-31 09:29:35
特朗普:伊朗战事将“很快结束” 届时汽油、柴油以及其他各类商品的价格都会下降

特朗普:伊朗战事将“很快结束” 届时汽油、柴油以及其他各类商品的价格都会下降

闪电新闻
2026-10-31 11:34:21
新能源时代的悲哀:最低的油价、最好的发动机,但卖出了最差销量

新能源时代的悲哀:最低的油价、最好的发动机,但卖出了最差销量

兴趣知识
2026-10-31 11:19:52
安徽14岁初中女生突发脑梗,家属称其长期吃外卖、烧烤、喝奶茶,医生提醒

安徽14岁初中女生突发脑梗,家属称其长期吃外卖、烧烤、喝奶茶,医生提醒

齐鲁壹点
2026-10-31 10:07:12
河南郑州一景区工作人员向人群中扔炸药包,被楼下NPC扔回后直接爆炸,景区客服:炸药包只是道具,真正爆炸装置在二楼

河南郑州一景区工作人员向人群中扔炸药包,被楼下NPC扔回后直接爆炸,景区客服:炸药包只是道具,真正爆炸装置在二楼

台州交通广播
2026-10-30 15:41:16
才知道,原来人民币只有在中国才叫人民币,在国外的叫法高大上

才知道,原来人民币只有在中国才叫人民币,在国外的叫法高大上

解锁世界风云
2026-10-31 04:45:32
网红小姐姐用她这身打扮证明了,穿运动装也可以很有魅力

网红小姐姐用她这身打扮证明了,穿运动装也可以很有魅力

美女穿搭分享
2026-10-27 21:06:35
不打了!再见莫兰特!NBA伤病潮史诗级离谱

不打了!再见莫兰特!NBA伤病潮史诗级离谱

篮球实战宝典
2026-10-31 16:14:28
德国总理默茨在日本,说到台海问题语出惊人,让高市早苗没话说了

德国总理默茨在日本,说到台海问题语出惊人,让高市早苗没话说了

北海史记
2026-10-31 10:11:04
“偷东西的全家死光”,中国店主货架贴标语被意大利市民举报犯威胁罪

“偷东西的全家死光”,中国店主货架贴标语被意大利市民举报犯威胁罪

观察者网
2026-10-31 08:31:23
离谱!辽宁一中学筛查肺结核时,多名学生共用一个针头,当地通报:涉及78名学生

离谱!辽宁一中学筛查肺结核时,多名学生共用一个针头,当地通报:涉及78名学生

聊斋新志
2026-10-29 19:02:48
56岁女子每天等孙子孙女睡着后关灯刷手机到凌晨,视力严重受损仅剩0.1,医生:若未及时处理,可致失明

56岁女子每天等孙子孙女睡着后关灯刷手机到凌晨,视力严重受损仅剩0.1,医生:若未及时处理,可致失明

都市快报橙柿互动
2026-10-31 03:46:38
2026-11-01 00:16:49
智驾最前沿
智驾最前沿
自动驾驶领域专业的技术、资讯分享平台。我们的slogan是:聚焦智能驾驶 ,紧盯行业前沿。
629文章数 11关注度
往期回顾 全部

科技要闻

苦等两年!国行苹果AI下周开测,12月推出

头条要闻

媒体:美防长宣布启动"子午线计划" 马斯克"接管"军队

头条要闻

媒体:美防长宣布启动"子午线计划" 马斯克"接管"军队

体育要闻

决胜时刻三连击!勒布朗绝命补篮价值千金

娱乐要闻

41岁吾恩胃癌七年去世,伴侣也确诊癌

财经要闻

Meta、谷歌、英特尔增发认购者集体浮亏

汽车要闻

好开更好坐 马自达EZ-60激光版补齐最后短板

态度原创

数码
游戏
本地
房产
公开课

数码要闻

18A工艺下放真香!英特尔Wildcat Lake全面售罄:高管直言需求远超供应

《使命召唤:现代战争4》制作组访谈:不要越线

本地新闻

秋假去哪玩,4 站打卡京郊限定秋色

房产要闻

单月杀进全省前十!崖州卖最火的盘,产品真能打

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版