网易首页 > 网易号 > 正文 申请入驻

从自动驾驶到具身智能,一套基础模型真的能通吃吗?

0
分享至

本文首发于智驾最前沿微信公众号,现在很多企业探索让自动驾驶和具身智能使用相似的基础模型。

小鹏已经将VLA 2.0、Robotaxi和人形机器人纳入Physical AI布局,并提出以物理世界基础模型支撑不同智能载体。

学术界也有研究让同一个模型跨越车辆、轮式机器人、无人机等不同载体完成导航任务。

汽车和机器人面对的环境、传感器、运动方式都不同,为什么还要尝试共用一套基础模型?

01 为什么汽车和机器人开始需要相似的基础模型?

过去,自动驾驶和机器人基本沿着各自的技术路线发展。

自动驾驶面对的是道路、车辆、行人、交通信号和复杂交通关系,需要持续完成环境感知、场景理解、行为预测、路径规划和车辆控制。

机器人面对的环境则更加多样,除了移动,还涉及目标识别、抓取、搬运、操作等任务。

两者看起来差别很大,但从更底层的角度看,它们解决的都是一个相似问题,即如何让机器理解真实世界,并根据理解结果采取行动。



图片源自:网络

视觉语言动作模型(Vision-Language-Action,VLA)的出现,正好把这个问题进一步向前推进。

VLA不只是识别图像中的物体,而是尝试把视觉信息、任务目标和动作联系起来,让模型从看到了什么进一步走向接下来应该做什么。

对于汽车来说,模型需要理解道路环境、周围交通参与者以及当前驾驶任务,并据此形成驾驶行为;对于机器人来说,模型同样需要理解周围空间、任务要求和目标物体,再决定移动、抓取或者操作。

因此,真正值得被共享的并不是一整套完整的汽车模型或者机器人模型,而是视觉理解、空间关系理解、任务推理,以及对环境变化进行预测的能力等更基础的能力。

这种跨载体共享已经开始出现在一些具体的研究中。

如ICLR 2026收录的Embodied Navigation Foundation Model(NavFoM)尝试使用统一架构处理四足机器人、无人机、轮式机器人和车辆等不同载体的导航任务,其中就包括自动驾驶场景。

02 能理解同一个世界 不代表能执行同一个动作

汽车和机器人虽然都需要感知、理解、行动,但它们的动作空间完全不同。

汽车的运动受到车辆尺寸、转向特性、动力学、道路结构以及交通规则等多重约束。

对于采用端到端或VLA架构的系统,模型可以直接生成未来一段时间的车辆轨迹,也可以先形成驾驶意图,再由后续模块完成轨迹生成和控制。

机器人则不同。

人形机器人可以控制身体、手臂和手部关节,机械臂需要处理末端执行器的空间位置,轮式机器人主要解决移动和导航问题。

即使面对同一个物体,不同机器人的动作方式也可能完全不同。

所以,对于统一模型的研究,不能简单理解为一个模型能不能同时处理汽车和机器人,而是需要研究模型究竟能够统一到哪一层。

如前方存在障碍物、目标位于左侧、当前路径受到阻挡等语义信息,在不同物理载体之间具有较强的共通性。

对汽车而言,它可能意味着减速、停车、变道或者绕行,并需要生成符合车辆运动约束的轨迹;

对轮式机器人而言,可能意味着重新规划移动路径;

对带机械臂的机器人而言,还可能意味着改变操作方式或者直接移动障碍物。



图片源自:网络

因此,大模型统一的是靠近世界理解和任务推理的部分,而越靠近具体载体的动作生成与控制层,就越需要根据自身的身体结构、动力学和动作空间进行适配。

在机器人领域,这种思路已经有了实际落地。

例如X-VLA通过Soft Prompt引入不同机器人硬件、传感器配置和数据域的信息,让同一个基础模型能够适应不同机器人,而不是要求所有机器人拥有完全相同的动作空间。

这也说明了一个重要问题,基础模型可以尽量统一,但不同的身体不能被忽略。

03 真正难的 是让模型理解自己能做什么

汽车和机器人共享基础模型最困难的地方不是环境理解,而是具身差异。

模型不仅要知道外部世界是什么样,还要知道自己的状态、运动能力和动作会受到什么限制。

如同样看到前方存在障碍物,汽车和机器人对这个信息的处理方式并不相同。

汽车行驶在道路上,需要结合道路边界、交通参与者、车辆自身尺寸、速度以及车辆动力学,判断减速、停车或者绕行是否可行。

它不能简单地把避开障碍物理解成向旁边移动,因为旁边可能存在其他车辆,也可能根本没有可行驶空间。

某些机器人则可能拥有更加丰富的行动选择。

它可以停下来、转身、改变路径,部分具备操作能力的机器人甚至可以利用机械臂处理障碍物。

但这些能力同样取决于机器人的具体结构、关节配置、负载能力和任务要求。



图片源自:网络

这也意味着,所谓物理智能不能只理解成对外部世界的理解。

它还需要回答我现在处于什么状态?我具备哪些能力?哪些动作是可执行的?执行这个动作之后,环境可能发生什么变化?等多个问题。

同样一句向前走,对于汽车、轮式机器人和人形机器人来说,并不是完全相同的动作。它们的身体结构不同,运动能力不同,传感器配置不同,与环境的交互方式也不同。

因此,如果未来真的出现一套同时服务自动驾驶和具身智能的基础模型,它需要处理的不只是一个统一的世界表示,还需要把不同物理载体的状态、能力和动作空间纳入模型体系。

这也是为什么当前Physical AI的研究和产业探索,会同时关注基础模型、VLA和世界模型。

模型需要逐渐从理解当前环境走向理解行动与环境变化之间的关系。

04 一套基础模型 最终会通吃吗?

如果把通吃理解成一套完全相同的模型,不做任何适配,就直接控制汽车、机器人甚至其他智能设备,这条路线短期内并不现实。

但如果把通吃理解成不同物理智能体共享一个基础模型的部分核心能力,那么这条路线已经出现了比较明确的研究和产业探索。

汽车仍然需要自己的车辆轨迹生成和控制能力,机器人也仍然需要适配自身的移动、操作和执行能力。

基础模型负责的可能是更上层的理解和推理,而不同的身体负责把这些能力转化为符合自身约束的具体动作。



图片源自:网络

换句话说,未来真正可能被统一的,不一定是怎么开车和怎么走路,而是它们背后更底层的智能能力。

这也是为什么越来越多自动驾驶企业进入具身智能领域的原因。

自动驾驶长期积累的感知、空间理解、预测、规划和实时决策能力,本身就是面向物理世界的一套技术积累;机器人面对的同样是真实环境中的感知、推理与行动问题。

一套基础模型通吃不是一个模型控制所有机器,而是汽车、机器人等不同物理智能体开始共享一个用于理解世界和进行推理的基础模型底座,同时保留各自与身体结构、动作空间和控制能力相关的适配层。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
波兰政变?总理派军警进驻宪法法院,总统出访紧急折返,这场斗争已持续11年

波兰政变?总理派军警进驻宪法法院,总统出访紧急折返,这场斗争已持续11年

不掉线电波
2026-10-31 10:33:06
9场不胜!曼联狂丢15球,利马红牌罚下时,卡里克看都没看他一眼

9场不胜!曼联狂丢15球,利马红牌罚下时,卡里克看都没看他一眼

汪星人哟
2026-10-31 22:44:16
“攻击-21”上四川舰,带来哪些关键优势?

“攻击-21”上四川舰,带来哪些关键优势?

新京报
2026-10-31 14:27:00
突然“值钱了”!家家户户都有,家里囤一堆千万别随手卖

突然“值钱了”!家家户户都有,家里囤一堆千万别随手卖

天气观察站
2026-10-31 10:06:05
2-3惜败!就在刚刚,WTT冠军赛爆大冷:世界第39老将被打哭!30岁梁靖崑绝处逢生让二追三,赛后日媒犀利锐评,难怪张本智和会输

2-3惜败!就在刚刚,WTT冠军赛爆大冷:世界第39老将被打哭!30岁梁靖崑绝处逢生让二追三,赛后日媒犀利锐评,难怪张本智和会输

篮球热嗖
2026-10-31 10:19:33
中国公民尽快撤离或转移!我使馆紧急提醒

中国公民尽快撤离或转移!我使馆紧急提醒

上观新闻
2026-10-31 15:31:15
温某(男,1992年生)从高空坠落,伤重死亡,官方公布调查报告

温某(男,1992年生)从高空坠落,伤重死亡,官方公布调查报告

南方都市报
2026-10-31 20:30:44
女子乘火车被上铺坠落手机砸伤眼部,满脸是血,最新进展:上铺乘客已给予一次性赔偿;铁路部门确认列车员车上应急处置,下车仍参与处理

女子乘火车被上铺坠落手机砸伤眼部,满脸是血,最新进展:上铺乘客已给予一次性赔偿;铁路部门确认列车员车上应急处置,下车仍参与处理

扬子晚报
2026-10-31 10:07:07
42岁女子有3个情夫,76岁情夫对她不满,2016年和她缠绵后将她杀害

42岁女子有3个情夫,76岁情夫对她不满,2016年和她缠绵后将她杀害

汉史趣闻
2026-10-30 10:04:14
人社部终于发声了!

人社部终于发声了!

逍遥论经
2026-10-31 10:32:43
浙江一男子陆续典当1980克金条,称是老婆嫁妆不可检验,两年来一直不赎回,老板起了疑心后拆开查验,当场傻眼:是一批“纯铜镀金”的假货

浙江一男子陆续典当1980克金条,称是老婆嫁妆不可检验,两年来一直不赎回,老板起了疑心后拆开查验,当场傻眼:是一批“纯铜镀金”的假货

大风新闻
2026-10-31 08:57:03
车主投诉人肉占车位“遭对方两连撞”,交警要求车主承认是交通事故才处理,事发20多天无结果

车主投诉人肉占车位“遭对方两连撞”,交警要求车主承认是交通事故才处理,事发20多天无结果

大风新闻
2026-10-31 20:28:04
2026世界顶尖科学家论坛开幕式暨顶科奖颁奖典礼举行,陈吉宁万钢朱忠明出席

2026世界顶尖科学家论坛开幕式暨顶科奖颁奖典礼举行,陈吉宁万钢朱忠明出席

上观新闻
2026-10-31 17:48:07
罗卫东教授突发疾病逝世,长年深耕冷门绝学

罗卫东教授突发疾病逝世,长年深耕冷门绝学

澎湃新闻
2026-10-31 11:03:06
卡里克一脸无奈!曼联3打2,B费一脚踢飞半单刀,张路:真不应该

卡里克一脸无奈!曼联3打2,B费一脚踢飞半单刀,张路:真不应该

风过乡
2026-10-31 21:05:39
0-3惨败!女单爆大冷!就在刚刚,WTT冠军赛:世界第9名掀翻世界第一!孙颖莎太憋屈3-2险胜韩乒一姐,8强出炉,国乒5人冲出突围

0-3惨败!女单爆大冷!就在刚刚,WTT冠军赛:世界第9名掀翻世界第一!孙颖莎太憋屈3-2险胜韩乒一姐,8强出炉,国乒5人冲出突围

体育闲话说
2026-10-31 10:21:10
全网最靠谱乌军伤亡数据出炉!实名可查,彻底终结舆论谣言

全网最靠谱乌军伤亡数据出炉!实名可查,彻底终结舆论谣言

老马拉车莫少装
2026-10-29 13:56:32
前国足主帅:中国人总以为自己是世界的主人 姆巴佩可请律师告他们

前国足主帅:中国人总以为自己是世界的主人 姆巴佩可请律师告他们

风过乡
2026-10-31 07:43:34
59岁著名汉语言文字专家罗卫东因突发疾病逝世,长年深耕冷门绝学

59岁著名汉语言文字专家罗卫东因突发疾病逝世,长年深耕冷门绝学

澎湃新闻
2026-10-31 09:36:33
“老仙女”横空出世!成都相亲角一纸征婚表走红:79年离异女士身负58万债务,希望寻有实力男士助其走出困境

“老仙女”横空出世!成都相亲角一纸征婚表走红:79年离异女士身负58万债务,希望寻有实力男士助其走出困境

火山詩话
2026-10-31 05:20:56
2026-10-31 22:56:49
智驾最前沿
智驾最前沿
自动驾驶领域专业的技术、资讯分享平台。我们的slogan是:聚焦智能驾驶 ,紧盯行业前沿。
629文章数 11关注度
往期回顾 全部

科技要闻

苦等两年!国行苹果AI下周开测,12月推出

头条要闻

江苏首富夫妇身家一年暴涨1120亿元 胡润直呼"最意外"

头条要闻

江苏首富夫妇身家一年暴涨1120亿元 胡润直呼"最意外"

体育要闻

决胜时刻三连击!勒布朗绝命补篮价值千金

娱乐要闻

41岁吾恩胃癌七年去世,伴侣也确诊癌

财经要闻

Meta、谷歌、英特尔增发认购者集体浮亏

汽车要闻

迪迪虾好帮手 腾势N8L绝不是简单的交通工具了

态度原创

房产
时尚
旅游
本地
健康

房产要闻

单月杀进全省前十!崖州卖最火的盘,产品真能打

I feel like Nicole的第一步是?

旅游要闻

县域康养旅居受热捧 入境游银发客源增多

本地新闻

秋假去哪玩,4 站打卡京郊限定秋色

查不出猝死风险?可能是项目没做对

无障碍浏览 进入关怀版