网易首页 > 网易号 > 正文 申请入驻

从生成画面到生成交互,千里科技发布世界模型新成果

0
分享至

千里科技(AFARI)旗下AI研究团队 World Model Team 于2026年8月发布 BehaviorWorldGen 框架,首次系统解决了自动驾驶世界模拟器中“周围车辆不会真实反应”的结构性缺陷。该框架通过核心组件 BehaviorFlow 实现对周围车辆行为的可控生成,打通动作模型与世界模拟器的自改进闭环。该研究针对自动驾驶行业从“堆路测数据”转向“模拟器自训练闭环”的趋势,解决了闭环中的关键瓶颈。

自动驾驶动作模型(规划器、VLA模型)的训练依赖世界模拟器生成未来场景数据。但现有模拟器存在两个根本缺陷。第一,周围车辆不反应。模拟器只根据自车动作生成场景,周围车辆要么回放历史记录,要么作为生成副产物出现,不会对自车做出真实响应。一个现实中会引发碰撞的轨迹,在模拟器里可能看起来完全安全。第二,长尾场景覆盖不足。模拟器无差别地复现常规驾驶,难以生成加塞、让行、路口博弈等需要多车协调的关键交互场景,导致训练数据分布不均衡。论文指出,这有助于解释为什么稀有交互场景至今仍然难以学习。



BehaviorFlow 是整个框架的核心,是一种元动作条件的交通流模型。它为每个车辆注入可解释的帧级元动作(如保持车道、变道、转弯、掉头、旁路等),作为显式行为控制手柄。注入后,周围车辆能对自车及其他车辆做出真实响应,实现多车交互一致性。同时可按需编排稀有交互场景,将动作模型表现最差的失败案例转化为针对性训练数据。框架以结构化轨迹为模块间接口。上游兼容各类动作模型,包括端到端规划器和VLA模型;下游对接生成式世界模型和3D高斯溅射重建式模拟器。



在关键数据方面,因果模型相比双向模型推理速度提升近70倍(0.3s/帧 vs 20s/帧),同时生成质量反而更优(FID 4.36 vs 6.72)。在三种不同架构的动作模型上均实现一致提升:ChainFlow-VLA 在 NAVSIM 基准上达到 93.3 PDMS(较原始93.1提升0.2),为同类方法最高;ReCogDrive 从 86.5 提升至 87.3;DiffusionDrive 从 87.7 提升至 88.6。在最困难场景区间(PDMS<0.15),原模型接近崩溃(PDMS=0.0),加入 BehaviorWorldGen 生成数据后恢复至 34.8,属于质变式恢复,远超常规微调幅度。



除核心的 BehaviorFlow 外,论文还展示了两项辅助技术能力。一是场景编辑能力,包括稀有物体插入(动物跨帧一致、运动物理合理)、雾度连续控制、天气风格迁移(多云、夜间、雨天、雾天、雪天)、轨迹编辑(车道变换、超车、直行转转弯、转弯转直行)。二是3D高斯溅射场景外推,团队用 BehaviorFlow 预测未来交通演化,用生成式世界模型合成多视图观测和LiDAR点云,追加到原始日志中联合重建,突破了重建式模拟器只能在原始观测区域内高质量渲染的空间边界限制。论文指出,LiDAR监督对于维持外推区域的几何可靠性至关重要。



论文的三大贡献为:首次系统指出自动驾驶自改进循环中模拟器无法控制周围车辆行为的结构性缺陷;提出 BehaviorWorldGen 框架,核心 BehaviorFlow 提供元动作条件的代理行为控制,打通动作模型与世界模拟器的外层闭环;在多种动作模型和世界模拟器上验证有效,支持对稀有交互场景进行规模化优化。

数据说明:以上数据均来自论文 arXiv:2608.22187v2 的实验结果,引用时建议标注论文出处。NAVSIM 是大规模自动驾驶闭环仿真基准测试,PDMS(PDM Score)为其核心评估指标,满分100,综合衡量安全性、合规性、舒适度和行车效率。

声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
一声“先生”,看尽梁锦松的人品

一声“先生”,看尽梁锦松的人品

生活新鲜市
2026-09-25 03:21:50
故事:天涯神帖被还原,据说这是马航出事最接近的真相

故事:天涯神帖被还原,据说这是马航出事最接近的真相

飞云如水
2024-11-03 22:02:02
红色不明飞行物吓坏居民!悬停25分钟无声音,UFO研究者直呼诡异

红色不明飞行物吓坏居民!悬停25分钟无声音,UFO研究者直呼诡异

孤酒老巷QA
2026-09-25 09:43:28
亚运会|王楚钦谈男团失利:心情非常沉重,能力上还有差距

亚运会|王楚钦谈男团失利:心情非常沉重,能力上还有差距

北青网-北京青年报
2026-09-24 21:31:04
“过分了”,刘少奇忙得焦头烂额,毛主席却悠闲地在批示上做算术题!

“过分了”,刘少奇忙得焦头烂额,毛主席却悠闲地在批示上做算术题!

史辨人生
2026-09-25 08:10:24
《火焰纹章》新作号召力太强!玩家:买NS2只为它

《火焰纹章》新作号召力太强!玩家:买NS2只为它

游民星空
2026-09-25 11:22:22
《兰香如故》直到新帝赐婚又赐宅,才知,他对林锦岐的算计有多狠

《兰香如故》直到新帝赐婚又赐宅,才知,他对林锦岐的算计有多狠

楼兰娱姐
2026-09-25 12:35:11
两岸统一真的不远了!从部分迹象看,我国极可能早已经做好了准备

两岸统一真的不远了!从部分迹象看,我国极可能早已经做好了准备

小轲搞笑解说
2026-09-21 17:30:30
本·拉登藏了9年都没被发现!5米高墙加铁丝网严防死守,没想到最后因晾衣绳上13件长袍和4条尿布暴露

本·拉登藏了9年都没被发现!5米高墙加铁丝网严防死守,没想到最后因晾衣绳上13件长袍和4条尿布暴露

磊子讲史
2026-09-14 17:39:07
柳宗元《捕蛇者说》:永州产异蛇,究竟是什么蛇?触草木尽死,真这么厉害?

柳宗元《捕蛇者说》:永州产异蛇,究竟是什么蛇?触草木尽死,真这么厉害?

农夫也疯狂
2026-09-23 10:33:42
亚运会乒乓球:林诗栋第3局轰10-1!麦天恩救3局点无用,0-3落后!

亚运会乒乓球:林诗栋第3局轰10-1!麦天恩救3局点无用,0-3落后!

刘姚尧的文字城堡
2026-09-25 14:24:43
苏群:国乒因为饭圈影响了高水平!中国男篮是因为水平低才有了饭圈

苏群:国乒因为饭圈影响了高水平!中国男篮是因为水平低才有了饭圈

念洲
2026-09-25 07:00:13
梅西阿根廷告别战太火爆!8.5万门票90分钟售罄,中国球迷熬夜观赛

梅西阿根廷告别战太火爆!8.5万门票90分钟售罄,中国球迷熬夜观赛

球场没跑道
2026-09-25 11:02:20
菲律宾“不稀罕”援助?中国:那就成全你!

菲律宾“不稀罕”援助?中国:那就成全你!

李云飞Afey
2026-06-04 00:29:08
央行预告,中秋节后有大动作

央行预告,中秋节后有大动作

金融界
2026-09-24 14:55:02
大跌眼镜!前华人新闻主播机场被ICE逮捕,逾期滞留6年,竟官至州议员幕僚

大跌眼镜!前华人新闻主播机场被ICE逮捕,逾期滞留6年,竟官至州议员幕僚

大洛杉矶LA
2026-09-24 05:10:18
红果漫剧 TOP10 杀疯了:第一名 1.91 亿断层登顶

红果漫剧 TOP10 杀疯了:第一名 1.91 亿断层登顶

坠入二次元的海洋
2026-09-22 20:46:51
蒋介石晚年反复痛悔:一生中最错误的决定,就是抗战结束后没有及时把主力部队撤出东北

蒋介石晚年反复痛悔:一生中最错误的决定,就是抗战结束后没有及时把主力部队撤出东北

磊子讲史
2026-07-20 15:48:31
俄军给战舰画上假窗户和假砖块,伪装成灯塔,是为了骗过谁的眼睛?

俄军给战舰画上假窗户和假砖块,伪装成灯塔,是为了骗过谁的眼睛?

军武次位面
2026-09-22 19:00:04
解放军点名清算日本,不到24小时,高市政府收到通知,向中国谢罪

解放军点名清算日本,不到24小时,高市政府收到通知,向中国谢罪

史之韵
2026-08-17 04:32:09
2026-09-25 15:24:49
易北辰
易北辰
科技行业分析师
1033文章数 18285关注度
往期回顾 全部

科技要闻

华为赛力斯,一次声势浩大的权、利再分配

头条要闻

美方报告呼吁撤出派驻台湾的军事训练人员 国防部回应

头条要闻

美方报告呼吁撤出派驻台湾的军事训练人员 国防部回应

体育要闻

这场青春风暴,中国足球等了太久

娱乐要闻

肖战因拍《十日终焉》连续做半个月梦

财经要闻

月饼卖不动了...

汽车要闻

全新第四代博越L 上市限时价9.29万元起

态度原创

健康
艺术
亲子
房产
公开课

鼻子三角区的痘,千万别乱挤!

艺术要闻

419米!温州第一大民企出手,“浙江第一高楼”施工新进展!

亲子要闻

由60名孩子参与共创!《食力派:打败白坏坏》儿童营养健康教育游戏发布

房产要闻

全年霸榜TOP1!南海・叁號院周年官宣:新作即将登场

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版