网易首页 > 网易号 > 正文 申请入驻

理想汽车VLA司机大模型 从动物进化到人类

0
分享至

  • AI分为信息工具、辅助工具和生产工具三个层级,VLA司机大模型成为交通领域专业的生产工具;
  • 规则算法是“昆虫动物智能”,端到端模型是“哺乳动物智能”,VLA司机大模型是“人类智能”;
  • VLA司机大模型通过预训练、后训练和强化训练,模拟人类学习驾驶的过程,确保模型带来舒适性、安全性的体验;
  • 用户通过自然语言与司机Agent沟通,跟人怎么说,就跟司机Agent怎么说;
  • 超级对齐规范司机Agent的职业性,世界模型解决模型的黑盒问题;
  • 构建能力的过程包括研究、研发、能力表达、能力变成业务的价值四个步骤,第一步的“研究”是理想汽车最重要的投入;
  • DeepSeek助力VLA司机大模型研发加速,理想汽车开源自研汽车操作系统回馈社会;
  • 成为更有能量的人,关键在于关注自我,接受自身的优点和不足,并用成长替代改变。

2025年5月7日,理想汽车推出“理想AI Talk第二季——理想VLA司机大模型,从动物进化到人类”,理想汽车董事长兼CEO李想重点分享了对于人工智能的最新思考,VLA司机大模型的作用、训练方法和挑战,以及对于创业和个人成长的见解。

李想将AI工具分为三个层级,分别是信息工具、辅助工具和生产工具。目前,大多数人将AI作为信息工具使用,但信息工具常伴随大量无效信息、无效结果和无效结论,仅具参考价值。成为辅助工具后,AI可以提升效率,例如现在的辅助驾驶,但仍需人类参与。未来,AI发展为生产工具后,将能独立完成专业任务,显著提升效率与质量。

李想表示:“判断Agent(智能体)是否真正智能,关键在于它是否成为生产工具。只有当人工智能变成生产工具,才是其真正爆发的时刻。就像人类会雇佣司机,人工智能技术最终也会承担类似职责,成为真正的生产工具。”



VLA的实现不是突变的过程,是进化的过程

目前的L2、L2+组合驾驶辅助仍属于辅助工具阶段,而VLA(Vision-Language-Action Model,视觉语言行动模型)能够让AI真正成为司机,成为交通领域的专业生产工具。对理想汽车而言, 未来的VLA就是一个像人类司机一样工作的司机大模型”。

VLA的实现不是一个突变的过程,是进化的过程,经历了三个阶段,对应理想汽车辅助驾驶的昨天、今天和明天。第一阶段,理想汽车自2021年起自研依赖规则算法和高精地图的辅助驾驶,类似“昆虫动物智能”。第二阶段,理想汽车自2023年起研究,并于2024年正式推送的端到端+VLM(Vision Language Model,视觉语言模型)辅助驾驶,接近“哺乳动物智能”。

端到端模型在处理复杂问题时存在局限,虽可借助VLM视觉语言模型辅助,但VLM使用开源模型,使其在交通领域的能力有限。同时端到端模型也难以与人类沟通。为了解决这些问题并提升用户的智能体验,理想汽车自2024年起开展VLA研究,并在多项顶级学术会议上发表论文,夯实了理论基础。

在端到端的基础上,到第三阶段,VLA将开启“人类智能”的阶段。它能通过3D和2D视觉的组合,完整地看到物理世界,而不像VLM仅能解析2D图像。同时,VLA拥有完整的脑系统,具备语言、CoT(Chain of Thought,思维链)推理能力,既能看,也能理解并真正执行行动,符合人类的运作方式。



VLA训练过程模拟人类学习,对齐人类价值观

VLA的训练分为预训练、后训练和强化训练三个环节,类似于人类学习驾驶技能的过程。预训练相当于人类学习物理世界和交通领域的常识,通过大量高清2D和3D Vision(视觉)数据、交通相关的Language(语言)语料,以及与物理世界相关的VL(Vision-Language,视觉和语言)联合数据,训练出云端的VL基座模型,并通过蒸馏转化为在车端高效运行的端侧模型。

后训练相当于人类去驾校学习开车的过程。随着Action(动作)数据的加入——即对周围环境和自车驾驶行为的编码,VL基座变为VLA司机大模型。得益于短链条的CoT,以及Diffusion扩散模型对于他车轨迹和环境的预测,VLA具备实时性的特点,实现了在复杂交通环境中的博弈能力。

强化训练类似于人类在社会中实际开车练习,目标是让VLA司机大模型更加安全、舒适,对齐人类价值观,甚至超越人类驾驶水平。强化训练包含两部分:一是通过RLHF(Reinforcement Learning from Human Feedback,基于人类反馈的强化学习)完成安全对齐,使模型遵守交通规则,贴合中国用户的驾驶习惯;二是将纯强化学习模型放入世界模型中训练,提升舒适性,避免碰撞事故,遵守交通规则。经过预训练、后训练和强化训练后,VLA司机大模型即可部署至车端运行。

VLA司机大模型以“司机Agent(智能体)”的产品形态呈现,用户可通过自然语言与司机Agent沟通,跟人类司机怎么说,就跟司机Agent怎么说。简单通用的短指令由端侧的VLA直接处理,复杂指令则先由云端的VL基座模型解析,再交由VLA处理。



超级对齐确保AI决策安全,世界模型破解AI黑盒难题

除了提升专业能力,VLA司机大模型还需解决安全性和模型黑盒的问题。

模型能力越强,越需要职业性约束,以确保能力下限。为了保障VLA司机大模型能够实现职业司机般的安全和舒适,避免学习加塞等违规行为,理想汽车在强化训练环节投入大量资源,并于2024年底组建超过100人的超级对齐团队,相当于为司机Agent注入职业素养。

为解决模型的黑盒问题,理想汽车结合重建和生成两种路径,打造了真实、符合物理世界规律的世界模型,覆盖所有交通参与者和要素。基于世界模型的仿真能力,VLA可以在世界模型中低成本、准确地验证现实问题,提升解决问题的效率,有效应对模型黑盒带来的挑战。

判断司机Agent是否是个好司机,有三个关键标准:专业能力、职业能力和构建信任的能力。VLA司机大模型提升了专业能力,超级对齐增强了职业能力,VLA通过理解自然语言、具备记忆能力提升了构建信任的能力。



人工智能时代,扎实的基本功比走捷径重要

理想汽车实现技术快速跃迁的背后,是从研究、研发到能力表达,再到将能力变成业务价值的基本功积累。研究是关键,研究突破后,研发的效率会大幅提升,且注重价值转化,最终实现业务落地。

理想汽车坚持自研,通过技术赋能用户价值。例如,在辅助驾驶方面,由于英伟达Orin-X芯片无法直接运行语言模型,端到端+VLM的辅助驾驶方案对部分企业来说仍具挑战。理想汽车依托自有编译团队,自研底层推理引擎,使芯片可通过INT4(4比特整型)量化的方式运行VLM。同时,凭借芯片、控制器设计和自研汽车操作系统等综合能力,理想汽车实现了让双Orin-X芯片和Thor-U芯片运行同等规模的VLA司机大模型。李想表示,大型企业的基本功和能力永远无法被逾越。

得益于DeepSeek的开源,理想汽车在VLA司机大模型的语言能力研发上提速显著,节省了近9个月的时间和数亿元成本。尽管如此,理想汽车仍选择加大投入,在基座模型上投入超预期3倍的训练卡,专注打造适配多场景的自研模型。李想表示:“我们可以站在巨人的肩膀上,但它只是其中的一部分。”在受益开源的同时,理想汽车也选择开源自研的汽车操作系统——理想星环OS,回馈社会。

成长带来能量,在痛苦中保持正能量

今年7月,理想汽车将迎来成立十周年。李想表示,创业路上苦多于甜,他选择保留那些有价值的美好片段,用来激励自己保持正能量。“创业确实不容易,但是没必要苦哈哈的。苦和甜是一个硬币的正反面,取决于看哪一面。”他将企业遭遇的打击视为必须面对的挑战,也正是这些挑战,赋予了理想汽车更多的能力。也正因这份积极乐观的创业心态,理想汽车才能快速成长为千亿营收规模、百万交付量的新势力企业。

谈及如何成为更有能量的人,李想认为,关键在于关注自我,接受自身的优点和不足,并用成长替代改变——成长意味着增强能力。除此之外,李想强调亲密关系同样重要,关注他人的成长也能带来能量,家人和同事能够和他形成互补,相互支撑。“我需要家人和同事甚至超过了他们需要我,首先是我需要他们,然后才是他们需要我,我们在一起能够形成非常强的脑力和心力。”李想表示。

回顾几次创业经历,李想表示,从高中创办个人网站至今,自己的思维方式没有什么变化:遇到问题解决问题,解决别人不愿解决的难题,解决用户的痛点,不断向他人学习。不同的是,如今面临的问题更复杂、服务的用户群体更多、公司规模和组织也更庞大。“几次创业一路走来,最难时有人相助,遇坑也能迅速爬出,一帮人齐心协力变得更好,这是种幸运,也没什么可后悔的。”

面对AI的发展,李想认为,在AI面前所有的人性都应被保留,无论好坏,因为一切人性都是文化、生命、性格、能力的特质,也是人类真正的生命力所在。

从使用增程电动和5C超充技术解决电池成本高、充电难、充电慢的问题,到自研汽车操作系统攻克传统汽车操作系统性能差、开发缓慢、芯片匹配周期长等挑战,理想汽车始终以技术创新解决行业无法解决的问题。自研VLA时,理想汽车更是踏入了人工智能的无人区。当前,辅助驾驶走到了新的十字路口上,理想汽车将不断挑战成长的极限,持续为行业和用户创造价值。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
降价9万仍无人问津,库存超250万辆,经销商应该怎么跳出死循环?

降价9万仍无人问津,库存超250万辆,经销商应该怎么跳出死循环?

沙雕小琳琳
2026-10-05 12:50:27
震惊!家长质疑强制填报家庭隐私遭老师怒怼,一句“随便编一个”,引发轩然大波

震惊!家长质疑强制填报家庭隐私遭老师怒怼,一句“随便编一个”,引发轩然大波

火山詩话
2026-10-04 12:08:47
周恩来晚年坦言:若非毛主席拦下绝密军令,3万红军或全军覆灭?

周恩来晚年坦言:若非毛主席拦下绝密军令,3万红军或全军覆灭?

纪史行者
2026-10-03 03:50:06
缅北四大家族之首白家--白应苍临刑前画面曝光 回顾白家最后时刻

缅北四大家族之首白家--白应苍临刑前画面曝光 回顾白家最后时刻

杭城村叔
2026-10-05 15:59:48
房价很大可能重走1998年老路!所有人一定要提前做好心理准备

房价很大可能重走1998年老路!所有人一定要提前做好心理准备

偷喝一口奶
2026-09-11 08:36:30
比拘留还严重!欧某某惨了,拉黑仅开胃菜,网友爆拒绝合作才要命

比拘留还严重!欧某某惨了,拉黑仅开胃菜,网友爆拒绝合作才要命

小鋭有话说
2026-10-05 23:32:07
官方:CCTV16转播国足vs塔吉克斯坦的友谊赛

官方:CCTV16转播国足vs塔吉克斯坦的友谊赛

懂球帝
2026-10-05 13:25:06
3岁男童从10楼坠下被水果店雨棚接住,店主:换雨棚980元,男孩父亲转来1000元,自己退回20元,“如果宽裕一点,不会让他赔”

3岁男童从10楼坠下被水果店雨棚接住,店主:换雨棚980元,男孩父亲转来1000元,自己退回20元,“如果宽裕一点,不会让他赔”

晋江电视台
2026-10-04 18:44:50
6亿融资烧光,深圳机器人明星公司停摆了

6亿融资烧光,深圳机器人明星公司停摆了

说故事的阿袭
2026-10-05 09:13:42
不查不知道,一查吓一跳!林诗栋妈妈开的农家餐馆,原来这么大

不查不知道,一查吓一跳!林诗栋妈妈开的农家餐馆,原来这么大

仙味少女心
2026-10-04 16:12:48
国安部披露:有境外组织以“旅游”“科考”为名,深入我国生态敏感区,或借“医疗检测”非法采集人血样,窃取我国基因资源与研究数据

国安部披露:有境外组织以“旅游”“科考”为名,深入我国生态敏感区,或借“医疗检测”非法采集人血样,窃取我国基因资源与研究数据

每日经济新闻
2026-10-04 17:10:59
超2000万美国老人将收到钱!最快10月8日直接到账,看看你是否符合资格!

超2000万美国老人将收到钱!最快10月8日直接到账,看看你是否符合资格!

华人生活网
2026-10-05 04:44:44
缅北电诈回流人员自述被割肾的亲身经历

缅北电诈回流人员自述被割肾的亲身经历

极目新闻
2026-10-05 10:24:02
华为与高通达成专利许可协议,高通将收购华为部分美国专利

华为与高通达成专利许可协议,高通将收购华为部分美国专利

新京报
2026-10-05 16:08:04
小沈阳自曝!患奇怪的病,一觉醒来,脸肿成蜜蜂小狗

小沈阳自曝!患奇怪的病,一觉醒来,脸肿成蜜蜂小狗

史海流年号
2026-10-03 20:38:51
热苏斯首次公开回应C罗离开葡萄牙国家队争议:尚未与他沟通,一切只是误会,并未排除继续征召C罗,他的未来由他自己决定

热苏斯首次公开回应C罗离开葡萄牙国家队争议:尚未与他沟通,一切只是误会,并未排除继续征召C罗,他的未来由他自己决定

大风新闻
2026-10-05 09:16:03
被执行死刑的巫鸿明、白应苍出镜

被执行死刑的巫鸿明、白应苍出镜

极目新闻
2026-10-05 09:08:22
前主持人赵普透露,刘欢食量和酒量惊人,一顿吃10只闸蟹,独饮3瓶红酒面不改色

前主持人赵普透露,刘欢食量和酒量惊人,一顿吃10只闸蟹,独饮3瓶红酒面不改色

小椰的奶奶
2026-09-28 16:53:10
林志玲新封面让人认不出,是婚姻压垮了她?还是她终于松了口气

林志玲新封面让人认不出,是婚姻压垮了她?还是她终于松了口气

情感大头说说
2026-10-06 00:45:51
鏖战近3小时!郑钦文仰天怒吼:提奖金77万元 世界排名升到第45位

鏖战近3小时!郑钦文仰天怒吼:提奖金77万元 世界排名升到第45位

风过乡
2026-10-05 17:29:48
2026-10-06 02:23:00
小烙学长说
小烙学长说
一手汽车热门消息定期分享,小烙学长带你观察好车,让你了解汽车不踩坑
48文章数 0关注度
往期回顾 全部

汽车要闻

方程豹9月热销破4万 首款皮卡鲨鱼将于四季度上市

头条要闻

孙颖莎整顿乒乓球观赛礼仪:有闪光灯、呐喊等干扰

头条要闻

孙颖莎整顿乒乓球观赛礼仪:有闪光灯、呐喊等干扰

体育要闻

30天30队·热:扬尼斯、阿德巴约与克雷

娱乐要闻

蔡康永回应漏洞百出,太平轮旧事被扒

财经要闻

零跑声明切割!蔡康永两面人身份被抵制

科技要闻

2026年诺奖:三名科学家因光遗传学获奖

态度原创

游戏
艺术
本地
时尚
军事航空

XBOX要翻盘了!社区粉头盛赞三妹:纯纯实干派

艺术要闻

绝了!一点“炫色”的视觉游戏,竟能美成这样?看完直接沦陷!

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

秋天外套不用买太多,这三件基础款一定要准备好,简约又不挑年纪

军事要闻

俄军连续4天轰炸基辅大桥

无障碍浏览 进入关怀版