网易首页 > 网易号 > 正文 申请入驻

ApexNav:让机器人“聪明”找东西的新方法,零样本导航SOTA!

0
分享至

来源:市场资讯

(来源:AGV网)

ApexNav

An Adaptive Exploration Strategy for Zero-Shot Object

Navigation with Target-centric Semantic Fusion


在智能家居、仓储物流、甚至未来家庭助手中,有一个看似简单却极具挑战的任务:“去帮我拿一下沙发上的遥控器。”

对人类来说,这轻而易举;但对机器人而言,这意味着它必须在从未见过的环境中,理解“遥控器”是什么,并自主探索、定位、最终抵达目标——这就是零样本物体目标导航(Zero-Shot Object Navigation, ZSON)。

然而,现有方法常陷入两个困境:

  • 效率低:在空走廊或白墙前“发呆”,反复推理却不敢前进;

  • 容易被骗:把一个长得像微波炉的烤箱当成目标,直接“认错人”。

项目主页:https://robotics-star.com/ApexNav/

使用产品:松灵LIMO多模态开发平台

针对上述问题,《ApexNav: An Adaptive Exploration Strategy for Zero-Shot Object Navigation with Target-centric Semantic Fusion》提出了一套兼具高效性与鲁棒性的导航框架,在多个主流仿真基准上实现SOTA性能,并成功部署于真实移动机器人平台。

01

灵感来自人类:会“切换模式”的智能导航

  • 研究团队观察到:人在找东西时,会动态调整策略。

  • 当看到疑似目标(比如厨房里有个白色方块),我们会走近、绕一圈、多角度确认——这是谨慎验证;

  • 当身处陌生走廊,眼前全是门和墙,我们会先快速走完一圈摸清布局——这是高效探索。

  • ApexNav 正是将这种“人类智慧”编码进了算法。

01.自适应探索策略


•模式判别准则:对当前前沿区域(frontiers)计算语义得分分布的统计特征(最大值/均值比 r 与标准差 σ)。若 r>τr 且 σ>τσ,判定为语义富集区,启用语义模式;否则进入几何探索模式。

•语义模式优化:将高语义得分的前沿点建模为旅行商问题(TSP),通过求解近似最优路径,实现全局有序的语义区域遍历,避免贪心策略导致的振荡行为。

•几何模式设计:采用最近前沿优先策略,最大化地图覆盖率,加速环境结构构建。

该策略有效平衡了目标导向搜索与环境探索之间的张力,显著提升路径效率。

02.目标中心语义融合


为提升目标识别的鲁棒性,ApexNav构建了一个上下文感知的多帧融合机制:

  • 混淆集预推理:利用大语言模型(LLM)生成与目标类别在视觉或功能上易混淆的物体集合(如“微波炉” → {烤箱, 打印机, 小冰箱}),并对所有候选对象进行长期跟踪。

  • 加权置信度融合:融合多帧观测时,不仅考虑检测置信度,还引入点云体积作为可靠性权重(体积越大,观测越完整,权重越高)。

  • 消失惩罚机制:若某物体在连续帧中未被观测到,其累积置信度按指数衰减,有效抑制偶发高置信度误检。

  • 自适应判定阈值:基于目标物体的典型尺度,由LLM动态设定识别阈值,实现细粒度决策控制。

该融合机制显著增强了系统在杂乱、遮挡及相似物干扰场景下的判别能力。

02

从仿真到现实:真机实测成功!

研究团队将 ApexNav 部署在 AgileX LIMO 移动机器人上,在真实宿舍与实验室环境中完成了多项任务。


仿真评估

  • 数据集:HM3Dv1、HM3Dv2、MP3D

  • 指标:成功率(Success Rate, SR)、路径长度加权成功率(SPL)

结果:

  1. 在 HM3Dv2 上,SR 达 68.5%,SPL 为 54.2%,分别超越前SOTA方法 19.8% 和 16.9%;

  2. 消融实验表明,移除自适应探索或语义融合模块均导致性能显著下降,验证了各组件的有效性。


真实世界部署

  • 平台:AgileX LIMO 移动机器人(搭载RGB-D相机与SLAM系统)

  • 任务:在未建图的宿舍与实验室环境中执行“找马桶”“去沙发处”等指令


  • 表现:系统在无任何场景先验条件下,稳定完成导航任务,验证了算法的可迁移性与实用性。

03

✨ 启示与展望

ApexNav 的核心贡献在于将认知启发式策略转化为可计算的工程框架:

  • 其自适应探索机制为开放世界导航中的探索-利用权衡提供了新范式;

  • 标中心融合策略展示了如何结合LLM常识推理与多模态感知,构建鲁棒的高层语义理解模块;

  • 整体架构不依赖端到端训练,具备良好的模块化与可解释性,便于在实际系统中集成与调试。

该工作不仅推动了ZSON任务的性能边界,也为具身智能在开放、动态、未知环境中的可靠部署提供了重要技术路径。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
各地都在取消期末统考,我在想:当教育变成“开盲盒”,我们该如何突围?

各地都在取消期末统考,我在想:当教育变成“开盲盒”,我们该如何突围?

萌芽研究所BUD
2026-01-07 22:48:46
我国5600余个姓氏中只有8个姓氏从未衰落,看一下有你的姓氏吗?

我国5600余个姓氏中只有8个姓氏从未衰落,看一下有你的姓氏吗?

铭记历史呀
2026-01-07 02:22:59
外媒曝料,内鬼就是委副总统,推翻马杜罗的计划由她主动提出!

外媒曝料,内鬼就是委副总统,推翻马杜罗的计划由她主动提出!

阿龙聊军事
2026-01-06 19:52:30
副市长夫妇被17岁保姆残忍用斧头砍死,案件告破后,真相不可描述

副市长夫妇被17岁保姆残忍用斧头砍死,案件告破后,真相不可描述

毓麟讲故事
2024-02-03 10:17:04
儿子说结婚像签终身合同父亲摔了茶杯怕的不是他不婚是怕他不信爱

儿子说结婚像签终身合同父亲摔了茶杯怕的不是他不婚是怕他不信爱

大熊欢乐坊
2026-01-08 01:22:50
哈兰德已在本赛季联赛打进20球,为五大联赛第一人

哈兰德已在本赛季联赛打进20球,为五大联赛第一人

懂球帝
2026-01-08 04:53:21
刘国梁好友!王楠老公称赞樊振东:很伟大 一己之力延续国乒辉煌

刘国梁好友!王楠老公称赞樊振东:很伟大 一己之力延续国乒辉煌

念洲
2026-01-07 07:58:41
中纪委应该严查这个事情!大爷将传家宝捐给国博,7年后竟以1265万被拍卖掉了

中纪委应该严查这个事情!大爷将传家宝捐给国博,7年后竟以1265万被拍卖掉了

爆角追踪
2026-01-06 16:39:32
人好不如命好!家有这5个农历生日尾数的,但凡占一个,福运长久

人好不如命好!家有这5个农历生日尾数的,但凡占一个,福运长久

心话看史记
2025-12-05 04:15:04
吃完了酒席,李在明启程离京,临走前终于对华改口,一个时代告终

吃完了酒席,李在明启程离京,临走前终于对华改口,一个时代告终

生活魔术专家
2026-01-07 12:09:53
2026寒假教育大变局!补课按下暂停键,孩子的假期终于回归本质!

2026寒假教育大变局!补课按下暂停键,孩子的假期终于回归本质!

复转这些年
2026-01-07 23:51:15
美国在约半小时内宣称扣押两艘油轮

美国在约半小时内宣称扣押两艘油轮

界面新闻
2026-01-07 22:50:03
不要让别人知道你状态的三大重要原因

不要让别人知道你状态的三大重要原因

洞读君
2025-11-19 13:01:19
2026年门诊按人头付费全面铺开!普通人看病得改这些习惯

2026年门诊按人头付费全面铺开!普通人看病得改这些习惯

古装影视解说阿凶
2026-01-08 03:01:15
闫学晶亡羊补牢!删掉大量争议视频,背景换成五星红旗,她怕了

闫学晶亡羊补牢!删掉大量争议视频,背景换成五星红旗,她怕了

非常先生看娱乐
2026-01-05 17:56:52
炒股真正发大财的一种人:炒股不割肉!这是我对大多数股民的建议

炒股真正发大财的一种人:炒股不割肉!这是我对大多数股民的建议

股经纵横谈
2026-01-06 11:05:00
身家过亿的协和医科博士冯唐,再次语出惊人

身家过亿的协和医科博士冯唐,再次语出惊人

忠于法纪
2026-01-05 21:32:07
全球瞭望丨国际法专家:美国违反国际法 澳大利亚应警惕

全球瞭望丨国际法专家:美国违反国际法 澳大利亚应警惕

北青网-北京青年报
2026-01-07 17:30:02
广东110-105深圳4利好!陈家政焦泊乔证明价值,萨林杰统治关键球

广东110-105深圳4利好!陈家政焦泊乔证明价值,萨林杰统治关键球

篮球资讯达人
2026-01-07 21:41:26
大批油轮冲出委内瑞拉港,美国根本拦不住!中国已发话,大戏开始

大批油轮冲出委内瑞拉港,美国根本拦不住!中国已发话,大戏开始

玉涵简书
2026-01-06 15:43:29
2026-01-08 05:43:00
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
1949974文章数 5189关注度
往期回顾 全部

科技要闻

精华!黄仁勋CES记者会:揭秘新款大杀器

头条要闻

美军扣押俄潜艇护航的油轮 俄罗斯外交部回应

头条要闻

美军扣押俄潜艇护航的油轮 俄罗斯外交部回应

体育要闻

卖水果、搬砖的小伙,与哈兰德争英超金靴

娱乐要闻

《马背摇篮》首播,革命的乐观主义故事

财经要闻

农大教授科普:无需过度担忧蔬菜农残

汽车要闻

燃油驾趣+智能电感双Buff 试驾全新奥迪Q5L

态度原创

游戏
教育
手机
公开课
军事航空

《GTA6》地图规模再引热议:这次真要"大到离谱"了?

教育要闻

QS排名前百学校里,为什么中国留学生更酷爱申这三个?

手机要闻

曝Galaxy S26系列2月25日发布,不会涨价!

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

特朗普政府正在讨论获取格陵兰岛的方案 包括军事选项

无障碍浏览 进入关怀版