网易首页 > 网易号 > 正文 申请入驻

李飞飞团队具身智能新作:500美元,一切家务机器人帮你干

0
分享至

现如今机器人又是跑步又是后空翻,但到底什么时候能做上家务给人类养养老?

现在,为了挑战这个难题,李飞飞团队带来了具身智能研究最新成果——(),一个解决机器人在家庭任务中全身操作问题的综合框架。

并且,其核心组件的实现成本还不到500美元。

机器人学习领域中的一个“圣杯”级挑战是执行通用的日常家庭移动操作任务。借助一款新型双臂移动机器人,我们的最新成果——BRS正在尝试攻克这一极为困难且尚未解决的难题!

拧开门把手,早上出去丢个垃圾:

等大人上班后,再帮忙整理下杂货架:

顺带收拾下客厅,将脏碗放到洗碗机里:

然后任劳任怨,再里里外外刷干净马桶:

吭哧吭哧一顿收拾下来,一个机器人就把所有家务活包圆了。

而且研究团队还发现,即使干活时出了岔子,机器人也能自我纠正。

(一开始手臂范围无法够着马桶盖,然后有一个向前倾斜身体的动作)

网友们纷纷表示,离实现可通用的家庭机器人又更进一步了。

那么,李飞飞团队究竟是如何做到的?

核心瞄准三项全身控制能力

根据论文介绍,通过细致分析BEHAVIOR-1K(包含1000项日常家庭活动的机器人测试基准),团队首先确定了机器人成功完成各种家务活动所必需的三项全身控制能力:

  • 两只机械手臂之间的协同配合能力;
  • 稳定精确的导航;
  • 机械手臂末端执行器拥有广泛的可操作范围和触及能力;

尤其是最后一项,大多数人可能忽视了末端执行器控制这一关键能力。

因为在家庭环境中,日常物品通常位于不同高度和位置,因此机器人也必须相应地调整其伸展范围。

基于上述考虑,团队认为给家务机器人配备双臂、移动底座和灵活躯干,是实现全身操作的关键。

具体而言,他们选择了Galaxea R1机器人(国内星海图出品)作为硬件,其具备两个6自由度手臂(每个手臂都配备了一个平行钳口夹持器)、4自由度躯干和全向移动底座,能满足家庭任务所需的关键能力。

不过,这类复杂设计给策略学习方法带来了重大挑战,尤其是在数据规模化采集和全身协作方面。

对此,BRS通过两项关键创新来解决软硬件协同问题:

  • 推出JoyLo,一种通用的低成本全身遥操作接口;
  • 提出新的学习算法WB-VIMA;

展开来说,JoyLo(Joy-Con on Low-Cost Kinematic-Twin Arms)通过基于操纵木偶的方法,利用运动学孪生臂和任天堂Joy-Con控制器,实现高效的全身控制。

同时提供丰富的用户反馈,优化了策略学习数据质量。

在总成本不超过500美元的情况下,团队在R1机器人上实现了JoyLo的设计目标:

  • 高效的全身协调控制系统,实现复杂动作的流畅衔接;
  • 丰富的用户反馈机制,带来直观的远程操作体验;
  • 确保高质量的示范动作,提升策略学习效果;
  • 低成本实现方案,大幅提高系统可及性;
  • 实时、便捷的控制器设计,确保操作无缝顺畅。

而另一项WB-VIMA(Whole-Body VisuoMotor Attention)学习算法,核心目标是利用机器人的固有运动学层次结构来建模全身动作。

基于Transformer,通过自回归全身动作去噪和多模态观察注意力机制,WB-VIMA能帮助机器人有效学习协调的全身动作。

同时在训练和部署时,使用特定的优化器和噪声调度器,并在工作站上进行推理以实现低延迟控制。

值得一提的是,WB-VIMA还解决了一个关键问题:

尤其在人形机器人中,在移动基座或躯干动作中出现的微小错误会在末端执行器处显著放大。

对此,WB-VIMA在预测下游组件动作时,不是孤立地进行,而是先分析上游组件当前的动作状态、位置等信息,将这些信息作为条件和依据,去推算下游组件应该做出怎样的动作,从而实现整体的协调运动。

BRS适用于各种家庭任务

研究团队在五个具有代表性的家庭任务上评估BRS,包括清洁房屋、清洁厕所、倒垃圾、放置物品到架子上和晾晒衣服。

结果表明,BRS能完成多种家庭任务。

同时,实验环节还进一步验证了两个创新方法的有效性。

整体而言,JoyLo在数据收集效率、策略学习适用性和用户体验方面表现出色,WB-VIMA在性能上优于基线方法。

对于JoyLo,团队对10名参与者进行了全面的用户研究,以评估JoyLo的效果及其收集数据对策略学习的适用性。

下图为JoyLo与VR控制器和Apple Vision Pro进行比较的示意:

从结果来看,JoyLo在所有接口中表现出色,任务成功率最高、完成时间最短,其完成任务平均成功率是VR控制器的5倍,而使用Apple Vision Pro无人能完成全部任务。

且在用户研究中,所有参与者都认为JoyLo是最友好的界面。

另外,WB-VIMA在所有任务中全面超越基准方法。

其端到端任务成功率比DP3高13倍,比RGB-DP高21倍;平均子任务表现分别优于DP3(1.6 倍)和RGB-DP(3.4 倍)。

而且WB-VIMA在任务中出错的几率更小。它与环境物体的碰撞极少,且几乎不会因施加过度力量而导致电机失去动力。

最后,关于BRS框架的所有工作已全部开源,感兴趣可以进一步了解。

项目主页:
https://behavior-robot-suite.github.io/论文:https://arxiv.org/abs/2503.05652算法代码:https://github.com/behavior-robot-suite/brs-algo机器人代码:https://github.com/behavior-robot-suite/brs-ctrl训练数据:https://huggingface.co/datasets/behavior-robot-suite/data

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
手搓12年,人类数学家证明黎曼猜想却被AI截胡!陶哲轩邓煜回应

手搓12年,人类数学家证明黎曼猜想却被AI截胡!陶哲轩邓煜回应

新智元
2026-11-21 13:40:03
百亿豪门夫妇正式开撕,发声明互相指责,两人疑未离婚就有新欢

百亿豪门夫妇正式开撕,发声明互相指责,两人疑未离婚就有新欢

开开森森
2026-11-21 09:48:22
Anthropic数学家宣称:在AI帮助下已解决数学界最著名难题

Anthropic数学家宣称:在AI帮助下已解决数学界最著名难题

澎湃新闻
2026-11-21 10:36:43
钱正在加快贬值,买啥才最保值?内行人:这3样10年不贬值

钱正在加快贬值,买啥才最保值?内行人:这3样10年不贬值

史之铭
2026-11-22 00:45:48
1995年韶关,击毙阿部规秀的炮手李二喜仅存儿子遭雨衣枪手三枪射杀,儿媳周小玉落网后交代:3万订金买凶

1995年韶关,击毙阿部规秀的炮手李二喜仅存儿子遭雨衣枪手三枪射杀,儿媳周小玉落网后交代:3万订金买凶

唠叨说历史
2026-11-13 10:48:27
长津湖战役中,美军发现一整连志愿军官兵冻死在阵地上。电影里表现是美军敬礼,但据当年一名16岁幸存者回忆,美军并没敬礼,而是挨个补枪

长津湖战役中,美军发现一整连志愿军官兵冻死在阵地上。电影里表现是美军敬礼,但据当年一名16岁幸存者回忆,美军并没敬礼,而是挨个补枪

人生录
2026-11-21 00:05:14
英达小儿子否认英达收回巴图姓氏,称“他没有意愿,也没有这个权利收回姓氏”

英达小儿子否认英达收回巴图姓氏,称“他没有意愿,也没有这个权利收回姓氏”

韩小娱
2026-11-22 10:09:52
宁愿把80%石油绕远送欧洲,也不愿就近多给中国,到底图什么?

宁愿把80%石油绕远送欧洲,也不愿就近多给中国,到底图什么?

慕名而来只为你
2026-11-19 21:45:20
塞尔塔主帅:上半场我们踢得非常好,但皇马的替补击垮了我们

塞尔塔主帅:上半场我们踢得非常好,但皇马的替补击垮了我们

云隐南山
2026-11-22 09:00:02
这么快,导弹砸向波兰,俄罗斯的报复来了!

这么快,导弹砸向波兰,俄罗斯的报复来了!

冲哥瞰天下
2026-11-21 14:25:23
养老金若不再大幅上调,真正承压的,可能不是已经退休的老人

养老金若不再大幅上调,真正承压的,可能不是已经退休的老人

你在偷看谁
2026-10-31 19:07:37
“91大神”夯先生被捕,拍数百条视频,还认为只是道德问题

“91大神”夯先生被捕,拍数百条视频,还认为只是道德问题

第四思维
2025-07-01 13:05:39
仅播4集,就轻松拿下热榜第一,终于又有黑马剧可以追了!

仅播4集,就轻松拿下热榜第一,终于又有黑马剧可以追了!

仙味少女心
2026-11-21 19:48:33
1.1亿!温州这里要建殡仪馆

1.1亿!温州这里要建殡仪馆

瓯越声音
2026-11-22 01:27:53
反转!黄仁勋正考虑创办新公司,英伟达要慌了

反转!黄仁勋正考虑创办新公司,英伟达要慌了

芝麻科技讯官方号
2026-11-21 14:10:51
评论吵翻了!赵本山唱《慌啥子嘛》,不少网友吐槽:坐 2 亿私人飞机,很难共情普通人的焦虑

评论吵翻了!赵本山唱《慌啥子嘛》,不少网友吐槽:坐 2 亿私人飞机,很难共情普通人的焦虑

秋风妃
2026-11-21 22:37:53
迈阿密国际雪上加霜!门将送点,卢扬飞铲染红,主帅怒摔水瓶

迈阿密国际雪上加霜!门将送点,卢扬飞铲染红,主帅怒摔水瓶

奥拜尔
2026-11-22 07:56:04
广东气温暴跌10℃!广东人脚上拖鞋焊死,全国网友笑疯了

广东气温暴跌10℃!广东人脚上拖鞋焊死,全国网友笑疯了

另子维爱读史
2026-11-21 22:06:33
塔图姆:很多人被高估!联盟只有这三人有资格称为超级巨星!

塔图姆:很多人被高估!联盟只有这三人有资格称为超级巨星!

林子说事
2026-11-21 03:52:15
一只失去8条腿的螃蟹,意外开启了幸福蟹生

一只失去8条腿的螃蟹,意外开启了幸福蟹生

英国那些事儿
2026-11-21 23:26:21
2026-11-22 10:52:49
量子位 incentive-icons
量子位
追踪人工智能动态
13707文章数 176601关注度
往期回顾 全部

科技要闻

Anthropic收涨17.1%,市值一度破2万亿美元

头条要闻

"敢不敢玩刺激的" 女博士当主播6个月至今有心理阴影

头条要闻

"敢不敢玩刺激的" 女博士当主播6个月至今有心理阴影

体育要闻

约基奇vs申京:最强的策应巨人?

娱乐要闻

港姐季军吴文忻去世,生前已办追思会

财经要闻

金价跌破3550美元,分析称短期下行未逆转

汽车要闻

35万级MPV的满配答案 享界V8正式上市售31.98万起

态度原创

本地
时尚
艺术
教育
公开课

本地新闻

43年起落记忆倒计时,去厦门高崎领绝版登机牌!

我们总说爱动物,但我们真的懂得如何善待它们吗?

艺术要闻

16位欧洲画家的19幅作品欣赏

教育要闻

2026中小学课程建设与发展大会暨第四届特色课程博览会主论坛在广东佛山举行

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版