网易首页 > 网易号 > 正文 申请入驻

机器人的健忘症有救了!阿里达摩院一口气开源7个具身模型

0
分享至

机器人前瞻2月10日报道,今天,阿里巴巴达摩院发布具身智能大脑基础模型RynnBrain。全系列共计7个模型,其中包括 RynnBrain-30B-A3B。

RynnBrain是业内首个拥有时空记忆的具身大脑基础模型,引入了时空记忆和物理世界推理,让机器人具有理解“时”与“空”的能力。

简单来说,就是机器人可以记得过去的轨迹,看懂现在的画面,还能预判未来的动作,具有了全局时空回溯能力,减少了幻觉问题。

比如,在杂乱的桌子面前,机器人正忙着给桌上的食物分类。

突然,它收到了“请帮我拿一个面包”的指令,选择先停下手里的动作,把面包递给人类。


然后,它再继续转头处理刚刚的未完成的分类整理工作。

在16项具身开源评测榜单上,RynnBrain刷新了纪录(SOTA),超越谷歌Gemini Robotics ER 1.5等行业顶尖模型。

GitHub:https://github.com/alibaba-damo-academy/RynnBrain

项目主页:https://alibaba-damo-academy.github.io/RynnBrain.github.io/

hugging face:https://huggingface.co/collections/Alibaba-DAMO-Academy/rynnbrain

一、训练速度提升两倍,让机器人拥有全局时空回溯能力

RynnBrain在Qwen3-VL的基础上训练,还使用了自研的RynnScale架构对Dense模型和MOE模型进行训练优化,能够在同等资源下,训练速度提升两倍。同时,训练数据超过2000万对。

▲RynnBrain模型架构

RynnBrain能够让机器人实现堪比人类的全局时空回溯能力,关键在于做到了涵盖空间、位置、事件、轨迹等多维度信息的统一表征。其所构建的统一框架,能够把机器人所接触到的各种各样的信息统一映射到模型的输出空间里,将时间维度、空间坐标与语义理解融为一体。

RynnBrain具有物理空间推理的能力,采用了一种全新的“文本与空间定位交错”的推理策略,使得模型在推理时,不仅生成语言判断,还会同步给出对应的空间指向信息。

RynnBrain还拥有良好的可拓展性,能够快速后训练出导航、规划、动作等多种具身模型。以具身规划模型为例,其需要强大预测能力和场景解析能力,但基于RynnBrain为基础,只需几百条数据微调,效果就能超越Gemini 3 Pro,轻松实现SOTA。

▲RynnBrain具有认知、定位、推理、规划等多重能力

达摩院这次不仅开源了RynnBrain模型,而且配套开放了完整的推理训练代码。

另外,达摩院还开源了全新评测基准RynnBrain-Bench。这是一个用于评估具身理解能力的高维基准测试,从物体认知、空间认知、语义定位和指向交互四个核心维度全面评估模型性能,重点关注模型在连续视频序列中对细粒度信息的理解能力与时空定位精度。

二、实现了16个SOTA,超越谷歌、英伟达的具身顶尖模型

结果显示,RynnBrain,在16项具身开源评测榜单上刷新纪录(SOTA),包括环境感知与对象推理、第一人称视觉问答、空间推理、轨迹预测等,超越了谷歌Gemini Robotics ER 1.5、英伟达 Cosmos Reason 2等具身顶尖模型。

来看看模型在宇树G1上的部署情况:

在执行“把盘子放回原位”的任务时候,G1能够准确识别盘子,并在盘子不停移动的情况下保持对其空间位置的记忆,具有物体记忆与空间记忆能力。

面临三个面包分两个盘子的难题时,机器人的空间规划与长程规划能力使它能找到合适的分配方法,把多出的一个面包叠在中间。


物体记忆能力与复杂视频理解能力,使机器人能够认出之前被喝过的矿泉水,并在复杂的变换中始终保持对物体的记忆。


常识理解与中文OCR能力,让机器人能够根据用户“寻找低卡低糖的饮料”的需求,观察瓶身的文字标签,选择出合适的饮料。

结语:具身模型智能水平,已成为业内亟需解决的关键瓶颈

目前,具身模型的智能水平成了行业发展的关键瓶颈,泛化能力亟待提升。业内主要探索两条技术路线:一条是动作模型,以VLA模型为代表,能直接操控物理世界,但因数据稀缺,泛化能力不足;另一条是大脑模型,比如VLM模型,本身有一定泛化能力,却缺少记忆、动态认知有限,还会出现物理认知偏差,无法支撑人形机器人完成复杂的移动与操作任务。

RynnBrain的出现,在一定程度上解决了具身模型在时空记忆与物理空间推理的短板。达摩院不仅开源了RynnBrain模型,还配套开放了完整的推理训练代码、全新评测基准RynnBrain-Bench,为产业带来了统一的基础设施和评估标准,推动降低了具身智能领域的研发门槛。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
谭方骏没料到,遭前夫一家谋害的富婆蔡天凤,竟给他留下一手好牌

谭方骏没料到,遭前夫一家谋害的富婆蔡天凤,竟给他留下一手好牌

奇怪的鲨鱼们
2026-10-10 19:12:33
表面正人君子,实则流氓头子、家暴恶魔,这3位男星令人作呕

表面正人君子,实则流氓头子、家暴恶魔,这3位男星令人作呕

萧栝记录风土人情
2026-10-08 16:30:38
祖传花瓶被鉴宝主播称“只有皇帝可用”,估价3000万至4000万,男子交8000元鉴定费后被拉黑;假鉴宝大师“丰总”骗取9人5万余元,获刑3年

祖传花瓶被鉴宝主播称“只有皇帝可用”,估价3000万至4000万,男子交8000元鉴定费后被拉黑;假鉴宝大师“丰总”骗取9人5万余元,获刑3年

三湘都市报
2026-10-10 14:14:37
篮下无解!摩西·布朗出战24分钟轰23+20抢爆广东男篮禁区

篮下无解!摩西·布朗出战24分钟轰23+20抢爆广东男篮禁区

狼叔评论
2026-10-10 22:00:03
再战日本!周启豪谈备战松岛辉空,将全力以赴,力争拼进四强!

再战日本!周启豪谈备战松岛辉空,将全力以赴,力争拼进四强!

体坛侃侃球
2026-10-10 00:05:20
郭京飞被主持人问“是怎么瘦下来的这么帅”,直接回应“戒酒”

郭京飞被主持人问“是怎么瘦下来的这么帅”,直接回应“戒酒”

韩小娱
2026-10-10 07:19:24
宁可关门也不妥协!英国巨头硬刚欧盟:不准卖给中企,那就全毁了

宁可关门也不妥协!英国巨头硬刚欧盟:不准卖给中企,那就全毁了

乌克兰小静
2026-10-10 07:56:21
Shams:波杰姆斯基5年1.1亿美元提前续约勇士

Shams:波杰姆斯基5年1.1亿美元提前续约勇士

懂球帝
2026-10-10 23:54:05
又曝出轨大瓜,男子自曝妻子出轨班长5个月,班长只给他妻子买过情趣内衣,还曝光俩人大尺度聊天内容

又曝出轨大瓜,男子自曝妻子出轨班长5个月,班长只给他妻子买过情趣内衣,还曝光俩人大尺度聊天内容

汉史趣闻
2026-09-10 18:28:47
河南三支一扶再起波澜,之前因考试作弊14万考生被要求再考,已经上岗的考生被告知不能转编

河南三支一扶再起波澜,之前因考试作弊14万考生被要求再考,已经上岗的考生被告知不能转编

Mr王的饭后茶
2026-10-09 14:53:24
“这跟内衣有啥区别?”中学女儿的外出穿搭,让母亲绷不住了

“这跟内衣有啥区别?”中学女儿的外出穿搭,让母亲绷不住了

世界圈
2026-09-22 15:46:08
中国出现了一个很可怕的现象,就是父母在集体撤退,孩子在进攻

中国出现了一个很可怕的现象,就是父母在集体撤退,孩子在进攻

侃故事的阿庆
2026-10-06 00:17:09
最高院:提供 “口交” “肛交”等进入式性服务,是否属卖淫行为?

最高院:提供 “口交” “肛交”等进入式性服务,是否属卖淫行为?

周军律师聊案子
2026-04-21 09:50:16
一场2-0,郑钦文创造中国网球历史!首次杀进中网决赛,奖金410万

一场2-0,郑钦文创造中国网球历史!首次杀进中网决赛,奖金410万

侃球熊弟
2026-10-10 20:06:07
陈梦现身中国大满贯,打扮太美!亲自指导15岁师妹,与王艺迪交谈

陈梦现身中国大满贯,打扮太美!亲自指导15岁师妹,与王艺迪交谈

十点街球体育
2026-10-10 00:30:04
你捞过公司最大的油水是什么?网友:你们的胆子真的是肥嘟嘟的!

你捞过公司最大的油水是什么?网友:你们的胆子真的是肥嘟嘟的!

另子维爱读史
2026-10-10 20:41:15
国内景区的审美已经完蛋了

国内景区的审美已经完蛋了

枫冷慕诗
2026-10-10 12:10:15
林志斌谈雅阁刹车踏板:3000N压不裂,是压出来的不是算出来的

林志斌谈雅阁刹车踏板:3000N压不裂,是压出来的不是算出来的

固件更新中
2026-10-09 15:13:14
山东省青岛市中级人民法院悬赏通告

山东省青岛市中级人民法院悬赏通告

先锋新闻
2026-10-10 21:35:57
感谢湖人!76人火速敲定中锋人选,老詹不用硬顶5号位了……

感谢湖人!76人火速敲定中锋人选,老詹不用硬顶5号位了……

体育新角度
2026-10-10 20:07:40
2026-10-11 00:12:49
机器人前瞻
机器人前瞻
智东西AI媒体矩阵品牌。机器人前瞻,机器人产业新媒体,专注报道全球机器人创新。
967文章数 19关注度
往期回顾 全部

科技要闻

上世纪成熟的踏板,为何今天还会断裂?

头条要闻

港媒:梅艳芳骨灰被盗三个月无线索 歌迷会公开求助

头条要闻

港媒:梅艳芳骨灰被盗三个月无线索 歌迷会公开求助

体育要闻

十年回首:湖人三榜眼的夏天,与NBA无关

娱乐要闻

宋佳一串三大满贯 争议随之而来

财经要闻

双汇因抗生素超标共被罚1.29亿元

汽车要闻

千匹马力+三把锁/顶配能浮水 银河战舰700限时焕新价16.98万起

态度原创

教育
亲子
时尚
手机
房产

教育要闻

“考一半,突然通知全国考试取消”

亲子要闻

生孩子的收益被国家、企业拿走了

真爱返场|| 陪了我10年的好物,一年就等这么一回捡大漏

手机要闻

iPhone Duo专属仪式感!苹果门店将支持定制开机Hello界面文字

房产要闻

海棠湾销冠再出牌:海南顶豪「终局答案」,突然砸出!

无障碍浏览 进入关怀版