网易首页 > 网易号 > 正文 申请入驻

机器人的健忘症有救了!阿里达摩院一口气开源7个具身模型

0
分享至


机器人前瞻(公众号:robot_pro)
作者 许丽思
编辑 漠影

机器人前瞻2月10日报道,今天,阿里巴巴达摩院发布具身智能大脑基础模型RynnBrain。全系列共计7个模型,其中包括 RynnBrain-30B-A3B。

RynnBrain全系列共计7个模型,包含2B、8B、30B三种参数规模的RynnBrain基础模型,以及针对特定场景的后训练专有模型RynnBrain-Nav(导航)与RynnBrain-Plan-30B(规划)等共计7个。 其中,RynnBrain-30B-A3B是业界首个MoE具身基础模型,其只需要3B的推理激活参数就全面超越了当前规模最大的具身基础模型Palican-VL-72B,让机器人动作更快、更丝滑。

RynnBrain是业内首个拥有时空记忆的具身大脑基础模型,引入了时空记忆物理世界推理,让机器人具有理解“时”与“空”的能力。

简单来说,就是机器人可以记得过去的轨迹,看懂现在的画面,还能预判未来的动作,具有了全局时空回溯能力,减少了幻觉问题。

比如,在杂乱的桌子面前,机器人正忙着给桌上的食物分类。

突然,它收到了“请帮我拿一个面包”的指令,选择先停下手里的动作,把面包递给人类。


然后,它再继续转头处理刚刚的未完成的分类整理工作。

在16项具身开源评测榜单上,RynnBrain刷新了纪录(SOTA),超越谷歌Gemini Robotics ER 1.5等行业顶尖模型。

GitHub:https://github.com/alibaba-damo-academy/RynnBrain

项目主页:https://alibaba-damo-academy.github.io/RynnBrain.github.io/

hugging face:https://huggingface.co/collections/Alibaba-DAMO-Academy/rynnbrain

一、训练速度提升两倍,让机器人拥有全局时空回溯能力

RynnBrain在Qwen3-VL的基础上训练,还使用了自研的RynnScale架构对Dense模型和MOE模型进行训练优化,能够在同等资源下,训练速度提升两倍。同时,训练数据超过2000万对。


▲RynnBrain模型架构

RynnBrain能够让机器人实现堪比人类的全局时空回溯能力,关键在于做到了涵盖空间、位置、事件、轨迹等多维度信息的统一表征。其所构建的统一框架,能够把机器人所接触到的各种各样的信息统一映射到模型的输出空间里,将时间维度、空间坐标与语义理解融为一体。

RynnBrain具有物理空间推理的能力,采用了一种全新的“文本与空间定位交错”的推理策略,使得模型在推理时,不仅生成语言判断,还会同步给出对应的空间指向信息。

RynnBrain还拥有良好的可拓展性,能够快速后训练出导航、规划、动作等多种具身模型。以具身规划模型为例,其需要强大预测能力和场景解析能力,但基于RynnBrain为基础,只需几百条数据微调,效果就能超越Gemini 3 Pro,轻松实现SOTA。


▲RynnBrain具有认知、定位、推理、规划等多重能力

达摩院这次不仅开源了RynnBrain模型,而且配套开放了完整的推理训练代码。

另外,达摩院还开源了全新评测基准RynnBrain-Bench。这是一个用于评估具身理解能力的高维基准测试,从物体认知、空间认知、语义定位和指向交互四个核心维度全面评估模型性能,重点关注模型在连续视频序列中对细粒度信息的理解能力与时空定位精度。

二、实现了16个SOTA,超越谷歌、英伟达的具身顶尖模型

结果显示,RynnBrain,在16项具身开源评测榜单上刷新纪录(SOTA),包括环境感知与对象推理、第一人称视觉问答、空间推理、轨迹预测等,超越了谷歌Gemini Robotics ER 1.5、英伟达 Cosmos Reason 2等具身顶尖模型。

来看看模型在宇树G1上的部署情况:

在执行“把盘子放回原位”的任务时候,G1能够准确识别盘子,并在盘子不停移动的情况下保持对其空间位置的记忆,具有物体记忆与空间记忆能力。

面临三个面包分两个盘子的难题时,机器人的空间规划与长程规划能力使它能找到合适的分配方法,把多出的一个面包叠在中间。


物体记忆能力与复杂视频理解能力,使机器人能够认出之前被喝过的矿泉水,并在复杂的变换中始终保持对物体的记忆。



常识理解与中文OCR能力,让机器人能够根据用户“寻找低卡低糖的饮料”的需求,观察瓶身的文字标签,选择出合适的饮料。


结语:具身模型智能水平,已成为业内亟需解决的关键瓶颈

目前,具身模型的智能水平成了行业发展的关键瓶颈,泛化能力亟待提升。业内主要探索两条技术路线:一条是动作模型,以VLA模型为代表,能直接操控物理世界,但因数据稀缺,泛化能力不足;另一条是大脑模型,比如VLM模型,本身有一定泛化能力,却缺少记忆、动态认知有限,还会出现物理认知偏差,无法支撑人形机器人完成复杂的移动与操作任务。

RynnBrain的出现,在一定程度上解决了具身模型在时空记忆与物理空间推理的短板。达摩院不仅开源了RynnBrain模型,还配套开放了完整的推理训练代码、全新评测基准RynnBrain-Bench,为产业带来了统一的基础设施和评估标准,推动降低了具身智能领域的研发门槛。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
张本美和夺冠,三十多年前何智丽的回旋镖打回中国乒乓球队

张本美和夺冠,三十多年前何智丽的回旋镖打回中国乒乓球队

罗纳尔说个球
2026-03-17 21:33:29
如果不是法媒的披露:我都不敢相信,我国不需再向世界证明什么了

如果不是法媒的披露:我都不敢相信,我国不需再向世界证明什么了

三农雷哥
2026-04-04 16:28:53
健身后欲望很大是怎么回事?

健身后欲望很大是怎么回事?

性学研究僧
2026-04-02 20:11:16
明星也失业了?多位明星无戏可拍,沦落到景区“卖艺”,令人心酸

明星也失业了?多位明星无戏可拍,沦落到景区“卖艺”,令人心酸

观察者海风
2026-04-06 04:19:37
流量大戏落幕!陈光标兑现承诺,送张雪千万劳斯莱斯已变现捐嫣然

流量大戏落幕!陈光标兑现承诺,送张雪千万劳斯莱斯已变现捐嫣然

雷科技
2026-04-05 20:54:10
王楚钦:希望尽全力去捍卫国乒男队的荣耀,是使命感坚持走到最后

王楚钦:希望尽全力去捍卫国乒男队的荣耀,是使命感坚持走到最后

兰亭墨未干
2026-04-06 00:00:03
78岁连路都走不稳还开演唱会,全网骂声一片,她却扬言回馈粉丝

78岁连路都走不稳还开演唱会,全网骂声一片,她却扬言回馈粉丝

洲洲影视娱评
2026-01-28 12:23:18
离谱!“姬”、“姫” 看似一样,只错一笔,意思却完全不同!

离谱!“姬”、“姫” 看似一样,只错一笔,意思却完全不同!

新浪财经
2026-04-05 17:42:54
化整为零,北京把自己拆成39个“中等城市”?

化整为零,北京把自己拆成39个“中等城市”?

王二哥老搞笑
2026-04-04 19:14:51
西甲大结局 巴萨绝杀+笑纳皇马输球大礼 剩8轮领先7分+主场踢德比

西甲大结局 巴萨绝杀+笑纳皇马输球大礼 剩8轮领先7分+主场踢德比

我爱英超
2026-04-05 06:35:49
乒乓世界杯颁奖-2人不高兴,1人乐1人创历史,4人全程表情严肃

乒乓世界杯颁奖-2人不高兴,1人乐1人创历史,4人全程表情严肃

鸟语花香的季节
2026-04-05 23:57:53
1955 年饶漱石遭开除党籍,历多年关押服刑,晚年于农场度余生

1955 年饶漱石遭开除党籍,历多年关押服刑,晚年于农场度余生

唠叨说历史
2026-03-24 11:17:11
剑南春|国米5-2罗马,劳塔罗双响,恰20世界波,图拉姆造3球

剑南春|国米5-2罗马,劳塔罗双响,恰20世界波,图拉姆造3球

懂球帝
2026-04-06 05:00:15
斯诺克战报:赵心童10-3胜世界第一,创六项纪录新高

斯诺克战报:赵心童10-3胜世界第一,创六项纪录新高

阿错田间生活
2026-04-06 04:12:05
继德国之后,英国也开始贴出“中文标语”?中国游客:不能够接受

继德国之后,英国也开始贴出“中文标语”?中国游客:不能够接受

潮鹿逐梦
2026-04-02 12:31:48
1994年,西安空难160人惨死,警方查明后,发现其内幕令人咋舌!

1994年,西安空难160人惨死,警方查明后,发现其内幕令人咋舌!

猫眼观史
2024-10-22 15:49:38
“馆长”质问民进党:不是中国人?那过啥清明节?

“馆长”质问民进党:不是中国人?那过啥清明节?

看看新闻Knews
2026-04-05 18:23:12
一级致癌物已经公布,世卫组织呼吁停止食用,看完转告父母

一级致癌物已经公布,世卫组织呼吁停止食用,看完转告父母

刘哥谈体育
2026-04-05 00:07:28
银行理财密集遭遇发行失败 固收类封闭式产品是“重灾区”

银行理财密集遭遇发行失败 固收类封闭式产品是“重灾区”

经济观察报
2026-04-05 10:52:25
考古:大明湖挖出文物证实,济南是中国唯一5000年连续建城的城市

考古:大明湖挖出文物证实,济南是中国唯一5000年连续建城的城市

文史达观
2026-03-27 16:15:00
2026-04-06 05:27:00
机器人前瞻
机器人前瞻
专注于机器人报道的媒体
454文章数 10关注度
往期回顾 全部

科技要闻

花200薅5千算力,Claude冷血断供“龙虾”

头条要闻

伊朗官员提开放霍尔木兹海峡条件

头条要闻

伊朗官员提开放霍尔木兹海峡条件

体育要闻

CBA最老球员,身价7500万美元

娱乐要闻

王灿兮否认婆媳不和 晒与杜淳妈合影

财经要闻

谁造出了优思益这头“怪物”?

汽车要闻

家用SUV没驾驶乐趣?极氪8X第一个不同意

态度原创

时尚
数码
手机
教育
公开课

伊姐清明热推:电视剧《暴锋雨》;电影《我,许可》......

数码要闻

大胆复古美学,海盗船推出原子紫配色K65 PLUS WIRELESS机械键盘

手机要闻

OPPO Find X9s Pro银色哈苏专业增距镜亮相:观赛神器 颜值拉满

教育要闻

高考地理中的束水攻沙

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版