网易首页 > 网易号 > 正文 申请入驻

从生成画面到生成交互,千里科技发布世界模型新成果

0
分享至

千里科技(AFARI)旗下AI研究团队 World Model Team 于2026年8月发布 BehaviorWorldGen 框架,首次系统解决了自动驾驶世界模拟器中“周围车辆不会真实反应”的结构性缺陷。该框架通过核心组件 BehaviorFlow 实现对周围车辆行为的可控生成,打通动作模型与世界模拟器的自改进闭环。该研究针对自动驾驶行业从“堆路测数据”转向“模拟器自训练闭环”的趋势,解决了闭环中的关键瓶颈。

自动驾驶动作模型(规划器、VLA模型)的训练依赖世界模拟器生成未来场景数据。但现有模拟器存在两个根本缺陷。第一,周围车辆不反应。模拟器只根据自车动作生成场景,周围车辆要么回放历史记录,要么作为生成副产物出现,不会对自车做出真实响应。一个现实中会引发碰撞的轨迹,在模拟器里可能看起来完全安全。第二,长尾场景覆盖不足。模拟器无差别地复现常规驾驶,难以生成加塞、让行、路口博弈等需要多车协调的关键交互场景,导致训练数据分布不均衡。论文指出,这有助于解释为什么稀有交互场景至今仍然难以学习。



BehaviorFlow 是整个框架的核心,是一种元动作条件的交通流模型。它为每个车辆注入可解释的帧级元动作(如保持车道、变道、转弯、掉头、旁路等),作为显式行为控制手柄。注入后,周围车辆能对自车及其他车辆做出真实响应,实现多车交互一致性。同时可按需编排稀有交互场景,将动作模型表现最差的失败案例转化为针对性训练数据。框架以结构化轨迹为模块间接口。上游兼容各类动作模型,包括端到端规划器和VLA模型;下游对接生成式世界模型和3D高斯溅射重建式模拟器。



在关键数据方面,因果模型相比双向模型推理速度提升近70倍(0.3s/帧 vs 20s/帧),同时生成质量反而更优(FID 4.36 vs 6.72)。在三种不同架构的动作模型上均实现一致提升:ChainFlow-VLA 在 NAVSIM 基准上达到 93.3 PDMS(较原始93.1提升0.2),为同类方法最高;ReCogDrive 从 86.5 提升至 87.3;DiffusionDrive 从 87.7 提升至 88.6。在最困难场景区间(PDMS<0.15),原模型接近崩溃(PDMS=0.0),加入 BehaviorWorldGen 生成数据后恢复至 34.8,属于质变式恢复,远超常规微调幅度。



除核心的 BehaviorFlow 外,论文还展示了两项辅助技术能力。一是场景编辑能力,包括稀有物体插入(动物跨帧一致、运动物理合理)、雾度连续控制、天气风格迁移(多云、夜间、雨天、雾天、雪天)、轨迹编辑(车道变换、超车、直行转转弯、转弯转直行)。二是3D高斯溅射场景外推,团队用 BehaviorFlow 预测未来交通演化,用生成式世界模型合成多视图观测和LiDAR点云,追加到原始日志中联合重建,突破了重建式模拟器只能在原始观测区域内高质量渲染的空间边界限制。论文指出,LiDAR监督对于维持外推区域的几何可靠性至关重要。



论文的三大贡献为:首次系统指出自动驾驶自改进循环中模拟器无法控制周围车辆行为的结构性缺陷;提出 BehaviorWorldGen 框架,核心 BehaviorFlow 提供元动作条件的代理行为控制,打通动作模型与世界模拟器的外层闭环;在多种动作模型和世界模拟器上验证有效,支持对稀有交互场景进行规模化优化。

数据说明:以上数据均来自论文 arXiv:2608.22187v2 的实验结果,引用时建议标注论文出处。NAVSIM 是大规模自动驾驶闭环仿真基准测试,PDMS(PDM Score)为其核心评估指标,满分100,综合衡量安全性、合规性、舒适度和行车效率。

声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
美国防长或将访华,美方代表嗅到危险信号,他在中国发出了警告

美国防长或将访华,美方代表嗅到危险信号,他在中国发出了警告

铁锤侃侃而谈
2026-11-09 08:52:45
“就凭我这长相,28万彩礼还嫌多?”小伙转身就走:踏实过日子,从来不是漂亮的对立面

“就凭我这长相,28万彩礼还嫌多?”小伙转身就走:踏实过日子,从来不是漂亮的对立面

蝴蝶花雨话教育
2026-11-05 00:05:12
“典型的买得起,修不起!”湖州,男子花15万买了一辆大众新能源汽车,今年8月份出了事故,车被水泡了,维修费19万多

“典型的买得起,修不起!”湖州,男子花15万买了一辆大众新能源汽车,今年8月份出了事故,车被水泡了,维修费19万多

扶苏聊历史
2026-11-07 16:21:28
女子掰自家绿植涂脸想护肤美容,第二天满脸长密集水泡,又红又肿,医生:该植物汁液含刺激性毒素,不能直接“上脸”

女子掰自家绿植涂脸想护肤美容,第二天满脸长密集水泡,又红又肿,医生:该植物汁液含刺激性毒素,不能直接“上脸”

洪观新闻
2026-11-09 17:39:07
突然加速制造!004型航母吨位基本锁定,有望达到11万吨以上,排名世界第一,西方没想到速度这么快

突然加速制造!004型航母吨位基本锁定,有望达到11万吨以上,排名世界第一,西方没想到速度这么快

绝对军评
2026-11-09 10:32:27
杨幂12岁女儿已去英国留学,住寄宿学校,杨幂负责大部分开支!

杨幂12岁女儿已去英国留学,住寄宿学校,杨幂负责大部分开支!

玖宇维
2026-11-08 16:33:50
八年憋出一部神作,豆瓣8.7,终于等到了!

八年憋出一部神作,豆瓣8.7,终于等到了!

独立鱼
2026-11-08 21:08:34
一妈妈穿太辣和青春期儿子合影遭网友怒批:儿大避母都不懂吗?

一妈妈穿太辣和青春期儿子合影遭网友怒批:儿大避母都不懂吗?

观世记
2026-10-16 16:45:45
票房破7亿了,陈思诚重夺冠军,大满贯影后都不是对手

票房破7亿了,陈思诚重夺冠军,大满贯影后都不是对手

影视高原说
2026-11-09 15:33:29
北京八宝山,数万坟位期满却无人再缴,并非儿孙不孝,实在是家里兜不住了

北京八宝山,数万坟位期满却无人再缴,并非儿孙不孝,实在是家里兜不住了

扶苏聊历史
2026-11-04 18:20:53
黄仁勋婚外情对象黄乐,真实身份被前员工连扒六篇

黄仁勋婚外情对象黄乐,真实身份被前员工连扒六篇

六子吃凉粉
2026-11-09 15:42:12
香港名媛碎尸案又出新料!蔡天凤左下肢7处重伤,双腿分离,头上两组致命伤

香港名媛碎尸案又出新料!蔡天凤左下肢7处重伤,双腿分离,头上两组致命伤

磊子讲史
2026-11-09 14:12:59
叶剑英晚年评价让人吃惊:粟裕、刘伯承用兵天下无双,而能让林彪、张国焘、彭德怀三位信服的人,翻遍整个历史,只有他一个

叶剑英晚年评价让人吃惊:粟裕、刘伯承用兵天下无双,而能让林彪、张国焘、彭德怀三位信服的人,翻遍整个历史,只有他一个

磊子讲史
2026-11-09 12:05:17
柿子竟是血脂杀手?医生紧急提醒:不想血管堵塞,这6样东西少吃

柿子竟是血脂杀手?医生紧急提醒:不想血管堵塞,这6样东西少吃

白宸侃片
2026-11-09 14:21:08
黄仁勋出轨当事人黄乐:她掌管一家游走在灰色地带的算力公司

黄仁勋出轨当事人黄乐:她掌管一家游走在灰色地带的算力公司

几何小姐姐
2026-11-09 18:34:54
百亿基金集体崩盘,别再等回本了:你亏的钱,是在为'百亿'交税

百亿基金集体崩盘,别再等回本了:你亏的钱,是在为'百亿'交税

最美的巧合
2026-11-09 17:25:59
中国男篮拒绝爆冷!全力击败沙特队,周琦回归首秀,央视直播

中国男篮拒绝爆冷!全力击败沙特队,周琦回归首秀,央视直播

体坛瞎白话
2026-11-09 12:33:40
男子被小奶狗抓伤后开始“怕风怕水”,确诊狂犬病,病情加重转入ICU

男子被小奶狗抓伤后开始“怕风怕水”,确诊狂犬病,病情加重转入ICU

91.6陕西交通广播
2026-11-08 07:14:41
杨瀚森风评反转,上赛季被骂“树懒”,现在多队球迷希望拥有杨瀚森

杨瀚森风评反转,上赛季被骂“树懒”,现在多队球迷希望拥有杨瀚森

爱体育
2026-11-08 22:30:08
今年退休养老金开始补差,有人补904、有人仅154,差距源于这4点

今年退休养老金开始补差,有人补904、有人仅154,差距源于这4点

明天后天大后天
2026-11-09 12:13:13
2026-11-09 21:59:00
易北辰
易北辰
科技行业分析师
1042文章数 18285关注度
往期回顾 全部

科技要闻

AI机房被卡,美股重挫!英伟达大跌9%

头条要闻

丈夫凌晨4点和陌生女子通话 妻子赌气与异性开房3天

头条要闻

丈夫凌晨4点和陌生女子通话 妻子赌气与异性开房3天

体育要闻

40岁,正是绝杀的年纪!

娱乐要闻

黄仁勋与黄乐合照曝光,吃饭氛围暧昧

财经要闻

市场能接受AI繁荣退潮吗?

汽车要闻

限时权益价8.88万 吉利星愿STAR限定系列发布

态度原创

家居
本地
数码
公开课
军事航空

家居要闻

2026建博会(广州) 公装联探展交流活动

本地新闻

乌兰察布:以前种土豆,现在种Token

数码要闻

STEPX Neo体验:当手机开始理解意图,AI交互有了新玩法

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

特朗普称伊朗战事何时结束将由其决定

无障碍浏览 进入关怀版