网易首页 > 网易号 > 正文 申请入驻

从生成画面到生成交互,千里科技发布世界模型新成果

0
分享至

千里科技(AFARI)旗下AI研究团队 World Model Team 于2026年8月发布 BehaviorWorldGen 框架,首次系统解决了自动驾驶世界模拟器中“周围车辆不会真实反应”的结构性缺陷。该框架通过核心组件 BehaviorFlow 实现对周围车辆行为的可控生成,打通动作模型与世界模拟器的自改进闭环。该研究针对自动驾驶行业从“堆路测数据”转向“模拟器自训练闭环”的趋势,解决了闭环中的关键瓶颈。

自动驾驶动作模型(规划器、VLA模型)的训练依赖世界模拟器生成未来场景数据。但现有模拟器存在两个根本缺陷。第一,周围车辆不反应。模拟器只根据自车动作生成场景,周围车辆要么回放历史记录,要么作为生成副产物出现,不会对自车做出真实响应。一个现实中会引发碰撞的轨迹,在模拟器里可能看起来完全安全。第二,长尾场景覆盖不足。模拟器无差别地复现常规驾驶,难以生成加塞、让行、路口博弈等需要多车协调的关键交互场景,导致训练数据分布不均衡。论文指出,这有助于解释为什么稀有交互场景至今仍然难以学习。



BehaviorFlow 是整个框架的核心,是一种元动作条件的交通流模型。它为每个车辆注入可解释的帧级元动作(如保持车道、变道、转弯、掉头、旁路等),作为显式行为控制手柄。注入后,周围车辆能对自车及其他车辆做出真实响应,实现多车交互一致性。同时可按需编排稀有交互场景,将动作模型表现最差的失败案例转化为针对性训练数据。框架以结构化轨迹为模块间接口。上游兼容各类动作模型,包括端到端规划器和VLA模型;下游对接生成式世界模型和3D高斯溅射重建式模拟器。



在关键数据方面,因果模型相比双向模型推理速度提升近70倍(0.3s/帧 vs 20s/帧),同时生成质量反而更优(FID 4.36 vs 6.72)。在三种不同架构的动作模型上均实现一致提升:ChainFlow-VLA 在 NAVSIM 基准上达到 93.3 PDMS(较原始93.1提升0.2),为同类方法最高;ReCogDrive 从 86.5 提升至 87.3;DiffusionDrive 从 87.7 提升至 88.6。在最困难场景区间(PDMS<0.15),原模型接近崩溃(PDMS=0.0),加入 BehaviorWorldGen 生成数据后恢复至 34.8,属于质变式恢复,远超常规微调幅度。



除核心的 BehaviorFlow 外,论文还展示了两项辅助技术能力。一是场景编辑能力,包括稀有物体插入(动物跨帧一致、运动物理合理)、雾度连续控制、天气风格迁移(多云、夜间、雨天、雾天、雪天)、轨迹编辑(车道变换、超车、直行转转弯、转弯转直行)。二是3D高斯溅射场景外推,团队用 BehaviorFlow 预测未来交通演化,用生成式世界模型合成多视图观测和LiDAR点云,追加到原始日志中联合重建,突破了重建式模拟器只能在原始观测区域内高质量渲染的空间边界限制。论文指出,LiDAR监督对于维持外推区域的几何可靠性至关重要。



论文的三大贡献为:首次系统指出自动驾驶自改进循环中模拟器无法控制周围车辆行为的结构性缺陷;提出 BehaviorWorldGen 框架,核心 BehaviorFlow 提供元动作条件的代理行为控制,打通动作模型与世界模拟器的外层闭环;在多种动作模型和世界模拟器上验证有效,支持对稀有交互场景进行规模化优化。

数据说明:以上数据均来自论文 arXiv:2608.22187v2 的实验结果,引用时建议标注论文出处。NAVSIM 是大规模自动驾驶闭环仿真基准测试,PDMS(PDM Score)为其核心评估指标,满分100,综合衡量安全性、合规性、舒适度和行车效率。

声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
66.8万!吉利新车正式上市!

66.8万!吉利新车正式上市!

科技堡垒
2026-09-24 09:36:29
8年前,那个3岁识千字、6岁夺央视冠军山东神童王恒屹,如今怎样

8年前,那个3岁识千字、6岁夺央视冠军山东神童王恒屹,如今怎样

诺诺谈史
2026-09-25 02:59:36
这很科学:89%的人幻想过同时和多人发生性行为,算精神出轨吗?

这很科学:89%的人幻想过同时和多人发生性行为,算精神出轨吗?

宇宙时空
2026-05-26 18:20:10
陪睡陪玩只是开胃菜,舔手指塞拳头、集体嫖娼、背后的事藏不住了

陪睡陪玩只是开胃菜,舔手指塞拳头、集体嫖娼、背后的事藏不住了

北海史记
2026-08-12 19:57:54
人到中年才明白:家里让人累的,往往不是穷,而是有人天天制造情绪垃圾

人到中年才明白:家里让人累的,往往不是穷,而是有人天天制造情绪垃圾

自由心向往之
2026-09-24 11:30:04
“没显过人家,开始嫉妒了!”宝妈暗中较劲被嘲:品位差距太大!

“没显过人家,开始嫉妒了!”宝妈暗中较劲被嘲:品位差距太大!

林林先生
2026-09-23 11:17:49
彭博社再爆料:运往香港的F35零部件,除了座舱盖,还有弹仓构件

彭博社再爆料:运往香港的F35零部件,除了座舱盖,还有弹仓构件

军武吐槽君
2026-09-24 18:28:09
2015年,方静客死他乡,11年后,那个诬陷她是间谍的主持人已荣休

2015年,方静客死他乡,11年后,那个诬陷她是间谍的主持人已荣休

小先生笔记
2026-09-21 17:37:33
一辈子租房住,可不可能?

一辈子租房住,可不可能?

记忆承载
2026-09-24 07:44:01
27岁女演员紧急道歉:我授权了AI换脸,毁了大家心中的角色,希望轻一点喷……

27岁女演员紧急道歉:我授权了AI换脸,毁了大家心中的角色,希望轻一点喷……

都市快报橙柿互动
2026-09-24 18:59:23
美国发现一个离谱真相:中国根本不是对手,而是打不动的底层系统

美国发现一个离谱真相:中国根本不是对手,而是打不动的底层系统

面里历史
2026-09-24 21:49:24
余承东公开透露,是赛力斯先提出的!以后精力放在四界!网友:最好的华为在奕境,余总背后有没有凉意?

余承东公开透露,是赛力斯先提出的!以后精力放在四界!网友:最好的华为在奕境,余总背后有没有凉意?

大白聊IT
2026-09-25 01:45:27
孙子非亲生案发酵升级!有大佬提出“陆家老人以自己孩子非亲生为由,申请寻找孩子生父”维权建议,评论区炸锅

孙子非亲生案发酵升级!有大佬提出“陆家老人以自己孩子非亲生为由,申请寻找孩子生父”维权建议,评论区炸锅

火山詩话
2026-09-24 05:12:43
多亏了这个外国人,留下乾隆的真实相貌,和电视上看到的不一样

多亏了这个外国人,留下乾隆的真实相貌,和电视上看到的不一样

云居历史
2026-09-21 16:31:26
信号不寻常!日本最新动作,非常阴险

信号不寻常!日本最新动作,非常阴险

斐君观点
2026-09-24 15:19:40
他是央视知名主持人,31岁因一句话离央视赴美国,如今51岁怎样了

他是央视知名主持人,31岁因一句话离央视赴美国,如今51岁怎样了

星娱叨叨社
2026-09-24 15:41:33
邓亚萍谈国乒男团不敌日本:排阵对王楚钦容错空间极小,张本智和对王楚钦的技战术研究比较充分,今天的确发挥得很好

邓亚萍谈国乒男团不敌日本:排阵对王楚钦容错空间极小,张本智和对王楚钦的技战术研究比较充分,今天的确发挥得很好

台州交通广播
2026-09-25 01:30:48
2999元 !苹果新品突然上架,9月24日 ,正式开售

2999元 !苹果新品突然上架,9月24日 ,正式开售

科技堡垒
2026-09-24 09:35:56
第5金!张展硕打破亚运纪录夺男子800米自由泳金牌 再次逆转夺冠

第5金!张展硕打破亚运纪录夺男子800米自由泳金牌 再次逆转夺冠

醉卧浮生
2026-09-24 17:03:51
A股全天低开低走,都怪2个坏消息!

A股全天低开低走,都怪2个坏消息!

星图金融研究院
2026-09-24 16:01:46
2026-09-25 08:39:00
易北辰
易北辰
科技行业分析师
1033文章数 18285关注度
往期回顾 全部

科技要闻

DeepSeek涨价后客户没少 年化收入10亿美元

头条要闻

王皓回应国乒男团决赛的失利:年轻队员需要成长空间

头条要闻

王皓回应国乒男团决赛的失利:年轻队员需要成长空间

体育要闻

巴图姆,以父之名

娱乐要闻

93岁游本昌去世 最后一句话惹人泪目

财经要闻

月饼卖不动了...

汽车要闻

全新第四代博越L 上市限时价9.29万元起

态度原创

家居
艺术
房产
健康
公开课

家居要闻

2026建博会(广州) 公装联探展交流活动

艺术要闻

阿齐兹·苏莱曼诺夫 2026年油画新作

房产要闻

中秋、国庆小长假来了,但我劝你别离开海口

鼻子三角区的痘,千万别乱挤!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版