网易首页 > 网易号 > 正文 申请入驻

从生成画面到生成交互,千里科技发布世界模型新成果

0
分享至

千里科技(AFARI)旗下AI研究团队 World Model Team 于2026年8月发布 BehaviorWorldGen 框架,首次系统解决了自动驾驶世界模拟器中“周围车辆不会真实反应”的结构性缺陷。该框架通过核心组件 BehaviorFlow 实现对周围车辆行为的可控生成,打通动作模型与世界模拟器的自改进闭环。该研究针对自动驾驶行业从“堆路测数据”转向“模拟器自训练闭环”的趋势,解决了闭环中的关键瓶颈。

自动驾驶动作模型(规划器、VLA模型)的训练依赖世界模拟器生成未来场景数据。但现有模拟器存在两个根本缺陷。第一,周围车辆不反应。模拟器只根据自车动作生成场景,周围车辆要么回放历史记录,要么作为生成副产物出现,不会对自车做出真实响应。一个现实中会引发碰撞的轨迹,在模拟器里可能看起来完全安全。第二,长尾场景覆盖不足。模拟器无差别地复现常规驾驶,难以生成加塞、让行、路口博弈等需要多车协调的关键交互场景,导致训练数据分布不均衡。论文指出,这有助于解释为什么稀有交互场景至今仍然难以学习。



BehaviorFlow 是整个框架的核心,是一种元动作条件的交通流模型。它为每个车辆注入可解释的帧级元动作(如保持车道、变道、转弯、掉头、旁路等),作为显式行为控制手柄。注入后,周围车辆能对自车及其他车辆做出真实响应,实现多车交互一致性。同时可按需编排稀有交互场景,将动作模型表现最差的失败案例转化为针对性训练数据。框架以结构化轨迹为模块间接口。上游兼容各类动作模型,包括端到端规划器和VLA模型;下游对接生成式世界模型和3D高斯溅射重建式模拟器。



在关键数据方面,因果模型相比双向模型推理速度提升近70倍(0.3s/帧 vs 20s/帧),同时生成质量反而更优(FID 4.36 vs 6.72)。在三种不同架构的动作模型上均实现一致提升:ChainFlow-VLA 在 NAVSIM 基准上达到 93.3 PDMS(较原始93.1提升0.2),为同类方法最高;ReCogDrive 从 86.5 提升至 87.3;DiffusionDrive 从 87.7 提升至 88.6。在最困难场景区间(PDMS<0.15),原模型接近崩溃(PDMS=0.0),加入 BehaviorWorldGen 生成数据后恢复至 34.8,属于质变式恢复,远超常规微调幅度。



除核心的 BehaviorFlow 外,论文还展示了两项辅助技术能力。一是场景编辑能力,包括稀有物体插入(动物跨帧一致、运动物理合理)、雾度连续控制、天气风格迁移(多云、夜间、雨天、雾天、雪天)、轨迹编辑(车道变换、超车、直行转转弯、转弯转直行)。二是3D高斯溅射场景外推,团队用 BehaviorFlow 预测未来交通演化,用生成式世界模型合成多视图观测和LiDAR点云,追加到原始日志中联合重建,突破了重建式模拟器只能在原始观测区域内高质量渲染的空间边界限制。论文指出,LiDAR监督对于维持外推区域的几何可靠性至关重要。



论文的三大贡献为:首次系统指出自动驾驶自改进循环中模拟器无法控制周围车辆行为的结构性缺陷;提出 BehaviorWorldGen 框架,核心 BehaviorFlow 提供元动作条件的代理行为控制,打通动作模型与世界模拟器的外层闭环;在多种动作模型和世界模拟器上验证有效,支持对稀有交互场景进行规模化优化。

数据说明:以上数据均来自论文 arXiv:2608.22187v2 的实验结果,引用时建议标注论文出处。NAVSIM 是大规模自动驾驶闭环仿真基准测试,PDMS(PDM Score)为其核心评估指标,满分100,综合衡量安全性、合规性、舒适度和行车效率。

声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
一旦爆发大型战争,中国只要保这4座城市,无人能够抗衡

一旦爆发大型战争,中国只要保这4座城市,无人能够抗衡

寻墨阁
2026-11-08 04:55:08
大连英博夺冠,国足主帅被当众打脸!网友:真瞎还是成都真拉胯?

大连英博夺冠,国足主帅被当众打脸!网友:真瞎还是成都真拉胯?

罗掌柜体育
2026-11-09 10:23:33
英国荒诞现状:工作不如躺平,失业者的收入是辛勤工作者的两倍

英国荒诞现状:工作不如躺平,失业者的收入是辛勤工作者的两倍

白日追梦人
2026-10-25 23:54:02
最高优先紧急救治!波兰9死枪击案,那名孤胆警察还在抢救中。

最高优先紧急救治!波兰9死枪击案,那名孤胆警察还在抢救中。

弹痕驿站
2026-11-08 19:29:49
“这拿筷子姿势,太恶心了”,一段母女吃饭视频火了,又一个贫民窟的小公主

“这拿筷子姿势,太恶心了”,一段母女吃饭视频火了,又一个贫民窟的小公主

蝴蝶花雨话教育
2026-10-06 11:47:56
超勇士升西部前四!森林狼双枪50分送爵士8连败 榜眼26分生涯新高

超勇士升西部前四!森林狼双枪50分送爵士8连败 榜眼26分生涯新高

醉卧浮生
2026-11-09 10:33:48
极目深度|命案震动陕南小城,凶手自杀后城乡秩序恢复:案发时其未离婚,藏匿点山下留守祖孙夜间门后放砍柴刀自卫,当地将帮扶涉事家庭

极目深度|命案震动陕南小城,凶手自杀后城乡秩序恢复:案发时其未离婚,藏匿点山下留守祖孙夜间门后放砍柴刀自卫,当地将帮扶涉事家庭

极目新闻
2026-11-08 20:20:30
1954年高岗事发后,他的大将郭峰被连降5级,却在晚年又当上了省委书记

1954年高岗事发后,他的大将郭峰被连降5级,却在晚年又当上了省委书记

帝哥说史
2026-11-08 15:21:46
成都球迷怒了!焚烧蓉城球衣和球星卡,开骂:XXX全部送进监狱

成都球迷怒了!焚烧蓉城球衣和球星卡,开骂:XXX全部送进监狱

许三岁
2026-11-09 15:43:52
金价下跌,广州周末门店迎大批顾客,有市民趁机囤黄金,“最近两个大单都是父母买婚嫁金,价格超10万元”;专家提醒

金价下跌,广州周末门店迎大批顾客,有市民趁机囤黄金,“最近两个大单都是父母买婚嫁金,价格超10万元”;专家提醒

南方都市报
2026-11-09 20:32:08
网友反映“九寨沟年龄大的免费游客居多,一些景点被大爷大妈们围住,建议景区限制免费门票”,学者:景区无权单方面提高老年人免票的门槛

网友反映“九寨沟年龄大的免费游客居多,一些景点被大爷大妈们围住,建议景区限制免费门票”,学者:景区无权单方面提高老年人免票的门槛

南方都市报
2026-11-09 20:10:10
大V韩路曝媳妇当车模内幕:有些老公让媳妇拍照尺度大到不敢想象

大V韩路曝媳妇当车模内幕:有些老公让媳妇拍照尺度大到不敢想象

柴狗夫斯基
2026-11-09 09:38:10
广东省纪委监委驻省农业农村厅纪检监察组原一级调研员温清华严重违纪违法被开除党籍

广东省纪委监委驻省农业农村厅纪检监察组原一级调研员温清华严重违纪违法被开除党籍

环球网资讯
2026-11-09 18:49:12
法国主教练齐达内:比起哈里・凯恩,某皇马球员更配得上金球奖

法国主教练齐达内:比起哈里・凯恩,某皇马球员更配得上金球奖

福酱的小时光
2026-11-09 07:45:12
一个人的第六感能准到啥程度?网友:你这才是真玄学,那是死亡航班啊

一个人的第六感能准到啥程度?网友:你这才是真玄学,那是死亡航班啊

带你感受人间冷暖
2026-11-09 00:05:59
奥尼尔55岁每月领100万美元,身家5亿美元,NBA官方退休金却只有5800美元,评论区吵翻

奥尼尔55岁每月领100万美元,身家5亿美元,NBA官方退休金却只有5800美元,评论区吵翻

迪迪的娱乐故事
2026-11-09 08:09:04
黄仁勋承认出轨,国内热传出轨对象照片,而国外是关注调查

黄仁勋承认出轨,国内热传出轨对象照片,而国外是关注调查

不与世俗同
2026-11-09 09:22:11
黄仁勋认下婚外情,最大输家浮出水面,不是中国,也不是英伟达

黄仁勋认下婚外情,最大输家浮出水面,不是中国,也不是英伟达

刘振起观点
2026-11-09 13:34:21
延迟退休实施一年多,一个尴尬的问题终于摆上了台面

延迟退休实施一年多,一个尴尬的问题终于摆上了台面

游文刀
2026-11-09 02:53:51
悲痛讣告!阿颜在手术中突发心脏骤停,经全力抢救无效,不幸离世

悲痛讣告!阿颜在手术中突发心脏骤停,经全力抢救无效,不幸离世

不写散文诗
2026-11-09 18:15:42
2026-11-09 22:11:00
易北辰
易北辰
科技行业分析师
1042文章数 18285关注度
往期回顾 全部

科技要闻

AI机房被卡,美股重挫!英伟达大跌9%

头条要闻

丈夫凌晨4点和陌生女子通话 妻子赌气与异性开房3天

头条要闻

丈夫凌晨4点和陌生女子通话 妻子赌气与异性开房3天

体育要闻

40岁,正是绝杀的年纪!

娱乐要闻

黄仁勋与黄乐合照曝光,吃饭氛围暧昧

财经要闻

市场能接受AI繁荣退潮吗?

汽车要闻

限时权益价8.88万 吉利星愿STAR限定系列发布

态度原创

房产
家居
教育
本地
军事航空

房产要闻

突发!海口新政:小户型回来了!

家居要闻

2026建博会(广州) 公装联探展交流活动

教育要闻

72哈哈哈哈哈哈哈哈哈

本地新闻

乌兰察布:以前种土豆,现在种Token

军事要闻

特朗普称伊朗战事何时结束将由其决定

无障碍浏览 进入关怀版