网易首页 > 网易号 > 正文 申请入驻

NeurIPS 2026 Spotlight|机器人探索未知世界,为什么不能只认一条路?天大团队提出FAME

0
分享至



该论文第一作者为李阳,天津大学人工智能学院2026级博士生,师从韩亚洪教授,主要研究方向为具身智能,相关研究成果发表于 CVPR、NeurIPS、TPAMI 等国际顶级会议及期刊。本研究由天津大学与合肥工业大学团队合作完成。实验室主页:https://tjumm.github.io/

想象一下,一台机器人正在探索一栋从未进入过的建筑。

它已经走过一段走廊,眼前出现几个不同方向的通道。但由于视野有限,机器人并不知道哪条路通向更大的空间,哪条路可能是死胡同,也不知道尚未探索的区域究竟是什么结构。

这时,它该往哪里走?

目前,许多学习型主动三维建图方法,往往只预测一个长期探索目标,再据此规划路径。

问题在于:当机器人对未知环境了解得还不够多时,为什么一定要提前押注一个方向?

针对这一问题,天津大学与合肥工业大学研究团队提出了FAME(Flow-driven Anchor-based Multimodal Exploration)。与传统方法只预测一个目标不同,FAME 利用 Conditional Flow Matching 同时生成多个可能的探索目标,再结合路径规划、探索模式聚类和分层选择,帮助机器人在未知环境中找到更合适的探索路线。

目前,该研究成果已被NeurIPS 2026 接收,并进一步入选 Spotlight(亮点论文)。本届会议共录用 7,900 篇论文,其中292 篇入选 Spotlight,约占录用论文的3.7%



  • 论文标题: All Roads Lead to Rome: Flow-driven Multi-Anchor Exploration for Open-Environment Active 3D Mapping
  • 项目主页:https://vollichor.github.io/FAME/
  • 论文链接: https://arxiv.org/abs/2609.36889

从「只选一条路」,到保留多种探索可能

主动三维建图(Active 3D Mapping)不仅要求机器人根据观测恢复环境的三维结构,还需要主动决定下一步去哪里采集信息,争取用更少的运动和观测代价,重建尽可能完整的场景。

然而,机器人能够观察到的始终只是环境的一部分。即使两个场景的局部结构看起来相似,尚未探索的区域也可能完全不同。如果模型只根据过去学到的经验预测一个长期目标,遇到陌生环境时就容易选错方向,遗漏其他有价值的区域。

研究团队指出,在部分可观测条件下,长期探索目标往往具有多模态特征。也就是说,对于同一个当前状态,可能同时存在多个合理的未来探索方向。

从理论上看,当多个合理的探索目标分布在不同方向时,采用平方误差训练的单目标预测模型,容易给出这些目标的平均位置。但这个位置未必是合适的探索目标,甚至可能落在障碍物区域。

因此,与其让模型只预测一个目标,不如让它同时考虑多个可能的探索方向。



图1:单目标预测与多模态探索的动机对比图

用 Flow Matching 生成多种探索假设

为了让机器人同时生成多个可能的探索目标,研究团队引入了Conditional Flow Matching(CFM)

具体来说,模型根据机器人当前已经构建的地图,从随机噪声出发,逐步生成多个不同位置和朝向的探索目标,也就是Anchor(锚点)。每个 Anchor 都代表一个可能的长期探索方向。

例如,有的锚点可能引导机器人进入左侧房间,有的可能对应继续深入走廊,还有的可能指向尚未覆盖的局部区域。

与直接生成完整的探索路线不同,FAME只需要预测目标的位置和方向。简单来说,模型负责提出几个可能去的地方,路径规划器再根据障碍物地图,计算每个目标应该怎么走。

这样既能保留多个探索方向,也不用让模型直接生成整条路线。



图2:Conditional Flow Matching 多模态目标生成示意图

不只是多生成几条路线,还要学会怎样选择

前面提到,CFM 可以帮助机器人生成多个探索目标。但有了这些目标还不够,机器人还需要判断哪些路线走得通,以及最终应该选择哪一条

为此,FAME 使用基于 A* 的路径规划器,根据当前的障碍物地图,为每个 Anchor 生成一条候选路径。

随后,系统根据路径终点、几何形状、前段执行行为以及绕障拓扑等信息,对相似路径进行聚类。

这样,即便多个 Anchor 最终对应相近的路线,它们也可以被组织到同一个探索模式中,减少重复候选对后续决策的干扰。

最后是分层选择。

FAME 并不直接对所有路径进行一次性排序,而是先在探索模式层面作出选择,再在选中的模式内部筛选具体路线

第一层重点考虑潜在探索收益、风险、不确定性、代价和多样性;第二层进一步比较具体路径的收益、执行风险、成本以及与既有规划的连续性。

这种先选探索策略、再选执行路线的设计,使机器人不必在大量相似候选之间反复切换。



图3:FAME 整体架构图

定量结果:未知环境中的泛化表现如何?

为检验方法有效性,研究团队在 AiMDoom 与 Matterport3D(MP3D)两个基准上进行了系统实验,并重点考察跨场景分布的泛化能力。

在 AiMDoom 数据集上,FAME 在 Simple、Normal、Hard 和 Insane 四个难度级别中,最终覆盖率和 AUC 均优于其他对比方法。其中,在最困难的 Insane 设置下,最终覆盖率从 NBP 的 47.2% 提升至53.4%,提高了 6.2 个百分点。



表1:AiMDoom 数据集评估结果,四个难度级别下 FAME 的最终覆盖率与 AUC 均领先于对比方法

在基于真实室内扫描数据构建的 Matterport3D 基准上,FAME 的重建完成率达到82.67%,同样优于其他对比方法。更值得关注的是跨数据集泛化能力。研究团队将模型在 AiMDoom 上训练后,直接迁移到 MP3D 测试,不进行任何微调。在这一更具挑战性的设置下,FAME 的重建完成率仍达到68.45%,相比 NBP 的 61.81% 提高了 6.64 个百分点。



表2、表3:MP3D 重建完成率与重建误差对比(左);AiMDoom→MP3D 跨数据集迁移结果(右),FAME 均取得最优

定性展示:机器人如何在未知环境里「多留几条路」

下面的动图展示了 NBP(左)和 FAME(右)在相同场景、相同起点下的探索过程。

可以看到,NBP 更容易沿着一个方向持续探索,而忽略其他尚未探索的区域。即使旁边还有房间或通道,机器人也可能继续沿着当前路线前进,导致部分区域没有得到充分重建。

相比之下,FAME 不会只考虑一个探索目标,而是同时生成多个可能的探索方向,再从中选择更合适的路线。这样,机器人就有机会探索到更多原本容易被忽略的区域,让最终重建的地图更加完整。



图4:NBP(左)与 FAME(右)在同一场景的探索覆盖对比

未来展望

FAME 的研究不仅是让机器人找到更合适的探索路线,更重要的是,让机器人能够基于有限的观测,对未来的多种可能性进行建模和想象,并以此指导当前的决策。这一思路也与世界模型所强调的「理解环境、想象未来、指导行动」相契合。

未来,研究团队将沿着这一方向继续深入探索,从对未来探索方向的预测,逐步拓展到对未知场景和行动结果的想象与推理,让机器人不仅能够感知眼前的世界,还能对尚未看到的世界作出合理预测,进一步提升其自主探索与决策能力。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
16TB外置硬盘跌到399.99美元,比会员日还便宜50美元

16TB外置硬盘跌到399.99美元,比会员日还便宜50美元

硅屿手记
2026-10-28 21:14:07
温瑞博0-3出局,侯英超一针见血指出最大问题,梁靖崑说的很实在

温瑞博0-3出局,侯英超一针见血指出最大问题,梁靖崑说的很实在

南海浪花
2026-10-29 20:33:54
协和医生:过度运动最该警惕的信号,不是酸痛,是静息心率

协和医生:过度运动最该警惕的信号,不是酸痛,是静息心率

刘哥谈体育
2026-10-28 18:18:31
著名音乐人顾嘉辉去世,写下《上海滩》等经典歌曲,堪称港乐教父

著名音乐人顾嘉辉去世,写下《上海滩》等经典歌曲,堪称港乐教父

腹黑狗子说
2026-10-29 15:28:16
张馨予晒海边写真!配文扎心:一万多张照片,可以发到下辈子

张馨予晒海边写真!配文扎心:一万多张照片,可以发到下辈子

悠悠说世界
2026-10-29 19:39:40
最惨降级队?海牛半套阵容被哄抢!泰山欲“走马换马”?国安蹲边路小妖

最惨降级队?海牛半套阵容被哄抢!泰山欲“走马换马”?国安蹲边路小妖

刀锋体育
2026-10-29 10:56:37
为什么你会有一个儿子?看完瞬间释然了

为什么你会有一个儿子?看完瞬间释然了

青苹果sht
2026-10-23 06:10:13
电视剧《伟大的长征》挖出一个细思极恐的细节

电视剧《伟大的长征》挖出一个细思极恐的细节

爱下厨的阿酾
2026-10-29 18:18:41
从8-3到3-1!U15国足5胜1平2负,排名最低52位,世界杯踢成亚洲杯

从8-3到3-1!U15国足5胜1平2负,排名最低52位,世界杯踢成亚洲杯

汪星人哟
2026-10-29 20:20:03
继手伸进裤子后,48岁刘涛被当众摸胸,全程赔笑不敢怒,多人遭殃

继手伸进裤子后,48岁刘涛被当众摸胸,全程赔笑不敢怒,多人遭殃

阿紵美食
2026-10-28 18:26:01
这是距今31.5万年最古老的人类!科学家依据头骨复原了真实样貌

这是距今31.5万年最古老的人类!科学家依据头骨复原了真实样貌

窥探宇宙1
2026-10-28 21:49:33
78名学生共用一个针头!沈阳通报"属实",但细思极恐的还在后头

78名学生共用一个针头!沈阳通报"属实",但细思极恐的还在后头

子非鱼人
2026-10-29 23:04:19
CCTV5直播!U17国少冲击世界杯首胜,1名国脚+4名留洋球员,取胜概率高达90%

CCTV5直播!U17国少冲击世界杯首胜,1名国脚+4名留洋球员,取胜概率高达90%

后仰跳投绝杀
2026-10-28 18:51:49
复出了?传李明鼎力助申花签国安边路飞翼,足协禁令成一纸空文?

复出了?传李明鼎力助申花签国安边路飞翼,足协禁令成一纸空文?

体坛鉴春秋
2026-10-29 16:58:29
三集不够看!东方卫视今晚开播,这部民国悬疑剧凭什么封神?

三集不够看!东方卫视今晚开播,这部民国悬疑剧凭什么封神?

草莓解说体育
2026-10-29 19:51:22
23岁抗癌博主“奇迹夏夏”去世:5年历经截肢、25次化疗;确诊后遭父母放弃,独自攒钱治病,选好讣告照片,临终前父母出现送她最后一程

23岁抗癌博主“奇迹夏夏”去世:5年历经截肢、25次化疗;确诊后遭父母放弃,独自攒钱治病,选好讣告照片,临终前父母出现送她最后一程

台州交通广播
2026-10-29 02:41:51
张纪中妻子杜星霖在直播中说:“这年头能找到像我老公这样的人很难了”

张纪中妻子杜星霖在直播中说:“这年头能找到像我老公这样的人很难了”

韩小娱
2026-10-28 08:44:49
赚疯!净利润 3740 亿、收入 9726 亿

赚疯!净利润 3740 亿、收入 9726 亿

云头条
2026-10-29 16:05:51
以色列大选投票结束,内塔尼亚胡连任的可能性,已经远低于下台

以色列大选投票结束,内塔尼亚胡连任的可能性,已经远低于下台

青青衫书生
2026-10-29 13:25:02
150元破解6.4万元FSD 80名特斯拉车主被移送检方

150元破解6.4万元FSD 80名特斯拉车主被移送检方

TechWeb
2026-10-28 09:30:10
2026-10-30 00:11:00
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
14337文章数 142753关注度
往期回顾 全部

科技要闻

MacBook终于能触屏了:22999元起

头条要闻

媒体:守住不该守住的底盘 77岁的内塔尼亚胡逃出生天

头条要闻

媒体:守住不该守住的底盘 77岁的内塔尼亚胡逃出生天

体育要闻

超级黑马!球队不败 29岁的他得分榜前三

娱乐要闻

白百何被曝和二婚丈夫离婚 和男生逛街

财经要闻

两大娱乐巨头,谈崩了

汽车要闻

标配宁德时代电池 智己LS8 NEO纯电预售24.98万起

态度原创

亲子
游戏
家居
手机
公开课

亲子要闻

这水是一点不浪费

《GTA6》剧情目标披露:双主角都想退出犯罪共同生活

家居要闻

2026建博会(广州) 公装联探展交流活动

手机要闻

iPhone Air 2爆料:补上续航与超广角,价格仍是关键!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版