网易首页 > 网易号 > 正文 申请入驻

机器人的健忘症有救了!阿里达摩院一口气开源7个具身模型

0
分享至


机器人前瞻(公众号:robot_pro)
作者 许丽思
编辑 漠影

机器人前瞻2月10日报道,今天,阿里巴巴达摩院发布具身智能大脑基础模型RynnBrain。全系列共计7个模型,其中包括 RynnBrain-30B-A3B。

RynnBrain全系列共计7个模型,包含2B、8B、30B三种参数规模的RynnBrain基础模型,以及针对特定场景的后训练专有模型RynnBrain-Nav(导航)与RynnBrain-Plan-30B(规划)等共计7个。 其中,RynnBrain-30B-A3B是业界首个MoE具身基础模型,其只需要3B的推理激活参数就全面超越了当前规模最大的具身基础模型Palican-VL-72B,让机器人动作更快、更丝滑。

RynnBrain是业内首个拥有时空记忆的具身大脑基础模型,引入了时空记忆物理世界推理,让机器人具有理解“时”与“空”的能力。

简单来说,就是机器人可以记得过去的轨迹,看懂现在的画面,还能预判未来的动作,具有了全局时空回溯能力,减少了幻觉问题。

比如,在杂乱的桌子面前,机器人正忙着给桌上的食物分类。

突然,它收到了“请帮我拿一个面包”的指令,选择先停下手里的动作,把面包递给人类。


然后,它再继续转头处理刚刚的未完成的分类整理工作。

在16项具身开源评测榜单上,RynnBrain刷新了纪录(SOTA),超越谷歌Gemini Robotics ER 1.5等行业顶尖模型。

GitHub:https://github.com/alibaba-damo-academy/RynnBrain

项目主页:https://alibaba-damo-academy.github.io/RynnBrain.github.io/

hugging face:https://huggingface.co/collections/Alibaba-DAMO-Academy/rynnbrain

一、训练速度提升两倍,让机器人拥有全局时空回溯能力

RynnBrain在Qwen3-VL的基础上训练,还使用了自研的RynnScale架构对Dense模型和MOE模型进行训练优化,能够在同等资源下,训练速度提升两倍。同时,训练数据超过2000万对。


▲RynnBrain模型架构

RynnBrain能够让机器人实现堪比人类的全局时空回溯能力,关键在于做到了涵盖空间、位置、事件、轨迹等多维度信息的统一表征。其所构建的统一框架,能够把机器人所接触到的各种各样的信息统一映射到模型的输出空间里,将时间维度、空间坐标与语义理解融为一体。

RynnBrain具有物理空间推理的能力,采用了一种全新的“文本与空间定位交错”的推理策略,使得模型在推理时,不仅生成语言判断,还会同步给出对应的空间指向信息。

RynnBrain还拥有良好的可拓展性,能够快速后训练出导航、规划、动作等多种具身模型。以具身规划模型为例,其需要强大预测能力和场景解析能力,但基于RynnBrain为基础,只需几百条数据微调,效果就能超越Gemini 3 Pro,轻松实现SOTA。


▲RynnBrain具有认知、定位、推理、规划等多重能力

达摩院这次不仅开源了RynnBrain模型,而且配套开放了完整的推理训练代码。

另外,达摩院还开源了全新评测基准RynnBrain-Bench。这是一个用于评估具身理解能力的高维基准测试,从物体认知、空间认知、语义定位和指向交互四个核心维度全面评估模型性能,重点关注模型在连续视频序列中对细粒度信息的理解能力与时空定位精度。

二、实现了16个SOTA,超越谷歌、英伟达的具身顶尖模型

结果显示,RynnBrain,在16项具身开源评测榜单上刷新纪录(SOTA),包括环境感知与对象推理、第一人称视觉问答、空间推理、轨迹预测等,超越了谷歌Gemini Robotics ER 1.5、英伟达 Cosmos Reason 2等具身顶尖模型。

来看看模型在宇树G1上的部署情况:

在执行“把盘子放回原位”的任务时候,G1能够准确识别盘子,并在盘子不停移动的情况下保持对其空间位置的记忆,具有物体记忆与空间记忆能力。

面临三个面包分两个盘子的难题时,机器人的空间规划与长程规划能力使它能找到合适的分配方法,把多出的一个面包叠在中间。


物体记忆能力与复杂视频理解能力,使机器人能够认出之前被喝过的矿泉水,并在复杂的变换中始终保持对物体的记忆。



常识理解与中文OCR能力,让机器人能够根据用户“寻找低卡低糖的饮料”的需求,观察瓶身的文字标签,选择出合适的饮料。


结语:具身模型智能水平,已成为业内亟需解决的关键瓶颈

目前,具身模型的智能水平成了行业发展的关键瓶颈,泛化能力亟待提升。业内主要探索两条技术路线:一条是动作模型,以VLA模型为代表,能直接操控物理世界,但因数据稀缺,泛化能力不足;另一条是大脑模型,比如VLM模型,本身有一定泛化能力,却缺少记忆、动态认知有限,还会出现物理认知偏差,无法支撑人形机器人完成复杂的移动与操作任务。

RynnBrain的出现,在一定程度上解决了具身模型在时空记忆与物理空间推理的短板。达摩院不仅开源了RynnBrain模型,还配套开放了完整的推理训练代码、全新评测基准RynnBrain-Bench,为产业带来了统一的基础设施和评估标准,推动降低了具身智能领域的研发门槛。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
北京地铁15号线与17号线开通换乘!跨区通勤能有多快?

北京地铁15号线与17号线开通换乘!跨区通勤能有多快?

北青网-北京青年报
2026-02-10 10:48:04
中方划下红线,不许对台军售,美方下达通牒,蓝白阵营已经选边站

中方划下红线,不许对台军售,美方下达通牒,蓝白阵营已经选边站

少女百褶脸
2026-02-11 05:04:07
2026年2月人气女优TOP20 人气老将首击败濑户环奈夺冠

2026年2月人气女优TOP20 人气老将首击败濑户环奈夺冠

孤独的独角兽影视
2026-02-10 09:40:13
张劲林履新,任北京广播电视台台长

张劲林履新,任北京广播电视台台长

创作者_QMVS
2026-02-09 21:00:32
特朗普给乌克兰列出投降时间表,欧洲炸锅了

特朗普给乌克兰列出投降时间表,欧洲炸锅了

史政先锋
2026-02-08 13:21:09
钱再多有什么用?52岁刘强东上千亿身家,儿子却是他一生的遗憾

钱再多有什么用?52岁刘强东上千亿身家,儿子却是他一生的遗憾

墨印斋
2026-01-31 16:37:48
《生命树》多杰死后17年,李永强的老板出现,不是林培生是黄局长

《生命树》多杰死后17年,李永强的老板出现,不是林培生是黄局长

宇林网络
2026-02-11 00:17:13
中国式父子为何像仇人?网友:有人喜欢耗费毕生精力用于制造仇恨

中国式父子为何像仇人?网友:有人喜欢耗费毕生精力用于制造仇恨

夜深爱杂谈
2026-02-06 17:57:35
在“云端”修风车的00后丨新春走基层

在“云端”修风车的00后丨新春走基层

大象新闻
2026-02-10 09:06:04
红军三大主力会师,几十万大军谁来指挥?周恩来深夜问了贺龙一句话,贺老总的回答太绝了

红军三大主力会师,几十万大军谁来指挥?周恩来深夜问了贺龙一句话,贺老总的回答太绝了

历史回忆室
2026-02-10 23:16:05
山姆刺破年份酒泡沫

山姆刺破年份酒泡沫

中国能源网
2026-02-10 08:38:07
4S店事故接待经理直言:车被撞后,对方全责时你一定要做这3件事

4S店事故接待经理直言:车被撞后,对方全责时你一定要做这3件事

蓝色海边
2026-02-11 06:20:39
英国亿万富翁阿尔菲·贝斯特二世皈依伊斯兰教

英国亿万富翁阿尔菲·贝斯特二世皈依伊斯兰教

达文西看世界
2026-02-10 14:55:04
小米粥再次被热议!医生发现:糖尿病患者喝小米粥时,多重视6点

小米粥再次被热议!医生发现:糖尿病患者喝小米粥时,多重视6点

展望云霄
2026-02-10 21:27:08
俄情报部门没让普京失望,突击审讯之下,刺杀案细节瞬间浮出水面

俄情报部门没让普京失望,突击审讯之下,刺杀案细节瞬间浮出水面

科普100克克
2026-02-10 11:52:14
中国500强,小米首次超过华为!

中国500强,小米首次超过华为!

新浪财经
2026-02-10 11:34:40
38岁老板娘沦为陪睡工具:揭秘黑茶骗局,入局者十有九个离婚

38岁老板娘沦为陪睡工具:揭秘黑茶骗局,入局者十有九个离婚

趣味萌宠的日常
2026-02-10 17:09:11
“新疆棉”事件5年后,那个丑态百出的“反华妖女”,如今怎样了

“新疆棉”事件5年后,那个丑态百出的“反华妖女”,如今怎样了

博览历史
2025-09-10 20:25:07
2年300万美元!汤姆林正式转正填满阵容 辅佐哈登米切尔冲冠

2年300万美元!汤姆林正式转正填满阵容 辅佐哈登米切尔冲冠

追球者
2026-02-11 05:04:07
今晚19:30,U17国足再战亚洲杯二档强队,剑指双杀,直播平台如下

今晚19:30,U17国足再战亚洲杯二档强队,剑指双杀,直播平台如下

侃球熊弟
2026-02-11 06:30:03
2026-02-11 07:36:49
机器人前瞻
机器人前瞻
专注于机器人报道的媒体
345文章数 7关注度
往期回顾 全部

科技要闻

李斌喊出500万辆年销!定下三大核心任务

头条要闻

28岁小伙年会醉酒 被同事送回宿舍后心脏骤停死亡

头条要闻

28岁小伙年会醉酒 被同事送回宿舍后心脏骤停死亡

体育要闻

NBA上演全武行,超大冲突4人驱逐!

娱乐要闻

章子怡和马丽争影后 金像奖提名太精彩

财经要闻

雀巢中国近千经销商的“追债记”

汽车要闻

应用于190KW四驱Ultra版 方程豹钛7搭载天神之眼5.0

态度原创

手机
时尚
健康
艺术
公开课

手机要闻

苹果即将移除iTunes愿望清单功能,提醒用户迁移内容

伊姐周日热推:电视剧《重返青春》;电视剧《女神蒙上眼》......

转头就晕的耳石症,能开车上班吗?

艺术要闻

投资百亿,南京416米超高层建筑落成!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版