网易首页 > 网易号 > 正文 申请入驻

波士顿动力新作!首创「坐标系转移接口」,提升机器人泛化分层智能

0
分享至

新智元报道

编辑:LRST

【新智元导读】美国东北大学和波士顿动力RAI团队提出HEP框架,首创「坐标系转移接口」,将高层策略的泛化能力与低层策略的灵活性无缝耦合,实现「少数据」下的高效学习与强泛化。该框架通过分层结构、空间对称性自然泛化和创新型体素编码器,显著提升机器人在复杂任务中的表现。

在机器人智能操作领域,数据稀缺和泛化难题长期困扰着AI的落地应用。

大多数方法或依赖大量数据,或在环境稍有变化时表现失灵。

如何让AI像人一样,仅凭少量演示,就能稳健适应复杂多变的真实场景?

美国东北大学和波士顿动力RAI团队的研究人员提出HEP(Hierarchical Equivariant Policy via Frame Transfer)框架,首创「坐标系转移接口」,将高层策略的泛化能力与低层策略的灵活性无缝耦合,实现「少数据」下的高效学习与强泛化。

论文地址:https://openreview.net/pdf?id=nAv5ketrHq

项目代码:https://codemasterzhao.github.io/HierEquiPo.github.io/

坐标系转移接口实现了高层泛化能力与低层灵活性的无缝融合,为机器人少样本、高鲁棒、多场景泛化部署开辟了全新路径。

主要贡献

1. 极简高效的分层结构——高层模块负责全局子目标(keypose)预测,低层模块基于局部坐标自主优化轨迹;

2. 空间对称性自然泛化——在T(3)(平移)与SO(2)(平面旋转)群下均保持等变性,显著降低对示例数量的依赖;

3. 创新型体素编码器——采用堆叠体素(Stacked Voxel)+SO(2)等变网络,高效编码三维视觉信息,兼顾细节与计算速度。

方法概述

HEP框架由三部分组成:

1. 高层策略:它首先读取机器人感知到的三维点云信息,然后预测出一个粗略的目标位置,也就是「关键姿态」。

2. 坐标系转移接口:接着,它会把全局点云和上述关键姿态一起,转换到一个以关键姿态为中心的局部坐标系里,让后续处理都基于这个「局部视角」进行。

3. 低层策略:最后,低层策略在这个局部坐标系中,通过对体素化后的三维视觉特征进行等变扩散运算,生成连续、精细的机器人动作轨迹

开放/闭环兼容:同一接口支持一次性输出(Open‑loop)与逐步反馈(Closed‑loop)两种控制模式;

轻量高效:高层仅需预测平移向量,降低计算与学习难度,增强泛化性;低层专注细节,通过坐标系转移接口从高层强化泛化性。

核心创新点

坐标系转移接口(Frame Transfer)

设计思路:高层策略给出任务的「参考坐标」,低层策略在此基础上自主优化执行细节。

这样的设计不仅释放了低层的灵活性,也将高层的泛化能力、抗干扰性自洽地传递到底层,实现了「泛化性与鲁棒性」的一体式提升。

优势包括:

灵活性,低层可在局部坐标系内自主调整执行细节;

泛化性,高层对全局变换的适应能力,通过坐标系转移接口无损传递到低层;

简化高层,只需预测平移,避免在高维SE(3)空间中做精确规划。

T(3)与SO(2)等变性的实现

T(3)等变示意图

SO(2)等变示意图

当旋转和沿xyz轴的平移发生时,模型预测的轨迹也能确保发生相应的平移和旋转

高层:使用SO(2)‑等变3D U-Net对离散化平移概率图进行预测,因此拥有SO(2)‑等变性和T(3)等变性

低层:基于堆叠体素编码器提取局部特征,结合SO(2)‑等变扩散策略,因此拥有SO(2)等变性

系统:在论文附录中给出完整的等变性证明(Proposition 4.2&4.3)通过坐标系转换,SO(2)等变性被保存,T(3)等变性可以从高层传递到低层,使得整个系统拥有SO(2)XT(3)的等变性

创新型体素编码器(Stacked Voxel Representation)级

原理:将点云按体素网格分组,以等变PointNet聚合每个体素内点的特征,组成c×D×H×W的等变体素图。

优势包括:

细节保留,相比传统下采样,更好保留局部几何信息;

计算友好,点云‑卷积混合结构,平衡速度与精度;

等变性,理论保证在T(3)×SO(2)变换下保持一致性。

仿真实验

数据集:30个RLBench任务,每个任务用100条演示训练。

对比基线:3D Diffuser Actor、Chained Diffuser、Equivariant Diffusion Policy。

开环结果:HEP在30任务中有28项胜出,平均提升+10%。

闭环结果:在10个长程任务上,HEP平均提升+23%,显著优于单级方法。

消融分析

去除等变结构:性能降24%;

去除坐标系转移:性能降16%;

去除堆叠体素:性能降10%;

充分验证各模块贡献。

真实机器人实验

分层策略在复杂长程任务上优势显著

在真实机器人上,HEP分层框架仅用30条演示数据,就学会了包括移锅盖、加清洁剂、擦洗等多步协作的鲁棒「洗锅」任务,明显优于非分层方法。

坐标系转移接口:泛化性与鲁棒性的传递桥梁

理论保障:证明了坐标系转移接口能将高层对空间变化的适应能力无损传递至低层,策略整体更易扩展至新场景。

在Pick&Place任务上,HEP仅凭一次演示,低层扩散模型即可实现1-shot泛化学习,显著提升了数据效率。

在环境变化和引入无关物体的扰动测试下,HEP成功率较传统方法提升高达60%。

接口设计带来未来扩展可能

坐标系转移接口对低层策略仅施加软约束,这不仅保证了灵活性,也为未来引入VLM或Cross-embodiment等多模态、跨平台高层策略作为决策规划器提供了天然接口。

参考资料:

https://openreview.net/pdf?id=nAv5ketrHq

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
第一次世界大战是德国发动的,德国失败了。第二次世界大战是德国、日本、意大利发动的,结果失败了。

第一次世界大战是德国发动的,德国失败了。第二次世界大战是德国、日本、意大利发动的,结果失败了。

回京历史梦
2026-11-17 02:25:04
波司登高端线首发遇冷:LV设计师请到了,队伍去了山姆抢加拿大鹅

波司登高端线首发遇冷:LV设计师请到了,队伍去了山姆抢加拿大鹅

木禾商业财经
2026-11-17 09:24:56
假哭别演正剧!《伟大的长征》结局李乃文用鼻涕横流的哭戏,把张国焘哭成了历史的笑柄

假哭别演正剧!《伟大的长征》结局李乃文用鼻涕横流的哭戏,把张国焘哭成了历史的笑柄

娱乐故事
2026-11-16 21:08:06
0-5让荷兰震惊!哈维暴怒质问全队 门神直言羞愧 队长痛批队友:垃圾

0-5让荷兰震惊!哈维暴怒质问全队 门神直言羞愧 队长痛批队友:垃圾

我爱英超
2026-11-17 07:45:15
首节崩!勇士一度落后31分吞三连败 无库战力全无伦德博格刷28+8

首节崩!勇士一度落后31分吞三连败 无库战力全无伦德博格刷28+8

颜小白的篮球梦
2026-11-17 11:31:24
大家期盼已久的2026年退休人员养老金,究竟涨还是不涨?

大家期盼已久的2026年退休人员养老金,究竟涨还是不涨?

江启
2026-11-17 01:20:29
开拓者98-106输球,杨瀚森正负值却+11!出场7分钟,追平NBA两纪录

开拓者98-106输球,杨瀚森正负值却+11!出场7分钟,追平NBA两纪录

球场没跑道
2026-11-17 12:06:03
还有谁?央视最高规格致敬C罗,一整期节目全是他,催泪告白:有一种英雄主义叫C罗

还有谁?央视最高规格致敬C罗,一整期节目全是他,催泪告白:有一种英雄主义叫C罗

球盲百小易
2026-11-17 00:59:04
财政不再兜底、大公交退市、老年卡取消,四部委文件真这么说了?

财政不再兜底、大公交退市、老年卡取消,四部委文件真这么说了?

楠楠自语
2026-11-17 00:02:50
本次菲律宾担任东盟轮值主席国期间,未谈妥南海行为准则

本次菲律宾担任东盟轮值主席国期间,未谈妥南海行为准则

新民周刊
2026-11-16 13:39:18
骑士126-115击败公牛!米切尔末节20分,二轮秀立大功,哈登的正负值亮了

骑士126-115击败公牛!米切尔末节20分,二轮秀立大功,哈登的正负值亮了

篮球大视野
2026-11-17 10:51:24
考不上北大就穿在身上,北大399元羽绒服火出圈,卖断货“一衣难求”

考不上北大就穿在身上,北大399元羽绒服火出圈,卖断货“一衣难求”

小鱼儿会飞了
2026-11-17 07:27:16
张怡宁参加婚礼哭了,64岁丈夫一直咳嗽,看着很老,还是袁立前任

张怡宁参加婚礼哭了,64岁丈夫一直咳嗽,看着很老,还是袁立前任

一娱三分地
2025-06-11 20:53:37
东京发生持刀伤人事件致1人死亡 嫌疑人被捕

东京发生持刀伤人事件致1人死亡 嫌疑人被捕

新华社
2026-11-16 21:22:48
79岁路都走不稳还开演唱会捞金,全网恶评如潮,她却扬言回馈粉丝

79岁路都走不稳还开演唱会捞金,全网恶评如潮,她却扬言回馈粉丝

背包旅行
2026-11-17 12:11:31
特朗普宣布即将访华:将与中俄元首会晤,也可能与金正恩委员长会面

特朗普宣布即将访华:将与中俄元首会晤,也可能与金正恩委员长会面

澎湃新闻
2026-11-17 08:20:33
3岁女童被生父女友捂死案将于18日宣判

3岁女童被生父女友捂死案将于18日宣判

黄河新闻网吕梁
2026-11-17 08:48:18
为什么APEC峰会不去北京,非要选在深圳,难道因为楼高?

为什么APEC峰会不去北京,非要选在深圳,难道因为楼高?

坠入二次元的海洋
2026-11-17 12:06:40
22岁模特外拍被奸杀,闺蜜被骂成蛇蝎,真凶宣判竟当庭发笑

22岁模特外拍被奸杀,闺蜜被骂成蛇蝎,真凶宣判竟当庭发笑

悬疑故事屋
2026-11-17 13:54:11
终于明白为啥年轻人说最近的就业环境有点可怕了!评论区一针见血

终于明白为啥年轻人说最近的就业环境有点可怕了!评论区一针见血

另子维爱读史
2026-11-16 21:52:15
2026-11-17 15:04:49
新智元 incentive-icons
新智元
AI产业主平台领航智能+时代
16703文章数 67238关注度
往期回顾 全部

科技要闻

硅谷大佬组局,帮黄仁勋杀回来!

头条要闻

中国女子在希腊失踪半年 保险箱发现10万欧元现金

头条要闻

中国女子在希腊失踪半年 保险箱发现10万欧元现金

体育要闻

伪强队?拥4亿豪阵欧国联6连败+世界杯出局

娱乐要闻

陈晓楠对话厉娜和许飞引全网热议

财经要闻

10万人逼宫英伟达,黄仁勋要复职了?

汽车要闻

更豪华更好开 问界新M8细节升级见真章

态度原创

家居
旅游
教育
本地
健康

家居要闻

2026建博会(广州) 公装联探展交流活动

旅游要闻

秋假遛娃剑门关,全程17000步,6个小时,喜提废腿体验!

教育要闻

济南市历下区燕山小学教育集团将出席2026第四届课博会,解码“做中学”视域下小学科学教育生态构建

本地新闻

乌兰察布:以前种土豆,现在种Token

情绪真能让健康人"伤心至死"?

无障碍浏览 进入关怀版