网易首页 > 网易号 > 正文 申请入驻

达摩院开源具身智能“三大件” 机器人上下文协议首次开源

0
分享至

8月11日消息,在世界机器人大会上,阿里达摩院宣布开源自研的 VLA 模型RynnVLA-001-7B、世界理解模型RynnEC、以及机器人上下文协议RynnRCP,推动数据、模型和机器人的兼容适配,打通具身智能开发全流程。

具身智能领域飞速发展,但仍面临开发流程碎片化,数据、模型与机器人本体适配难等重大挑战。达摩院将MCP(Model Context Protocol)理念引入具身智能,首次提出并开源了RCP(Robotics Context Protocol)协议以推动不同的数据、模型与本体之间的对接适配。达摩院打造了名为RynnRCP的一套完整的机器人服务协议和框架,能够打通从传感器数据采集、模型推理到机器人动作执行的完整工作流,帮助用户根据自身场景轻松适配。RynnRCP现已经支持Pi0、GR00T N1.5等多款热门模型以及SO-100、SO-101等多种机械臂,正持续拓展。

具体而言,RynnRCP包括RCP框架和RobotMotion两个主要模块。RCP框架旨在建立机器人本体与传感器的连接,提供标准化能力接口,并实现不同的传输层和模型服务之间的兼容。RobotMotion则是具身大模型与机器人本体控制之间的桥梁,能将离散的低频推理命令实时转换为高频的连续控制信号,实现平滑、符合物理约束的机器人运动。同时,RobotMotion还提供了一体化仿真-真机控制工具,帮助开发者快速上手,支持任务规控、仿真同步、数据采集与回放、轨迹可视化等功能,降低策略迁移难度。

大会上,达摩院还宣布开源两款具身智能大模型。RynnVLA-001是达摩院自主研发的基于视频生成和人体轨迹预训练的视觉-语言-动作模型,其特点是能够从第一人称视角的视频中学习人类的操作技能,隐式迁移到机器人手臂的操控上,从而让机械臂操控更加连贯、平滑,更接近于人类动作。

世界理解模型RynnEC将多模态大语言模型引入具身世界,赋予了大模型理解物理世界的能力。该模型能够从位置、功能、数量等11个维度全面解析场景中的物体,并在复杂的室内环境中精准定位和分割目标物体。无需3D模型,该模型仅靠视频序列就能建立连续的空间感知,还支持灵活交互。

此外,达摩院还在上月开源了WorldVLA模型,首次将世界模型与动作模型融合,提升了图像与动作的理解与生成能力。相比传统模型,该模型抓取成功率提高4%,视频生成质量显著改善,展现了较好的协同性和准确性。

开源链接:

·机器人上下文协议RynnRCP

https://github.com/alibaba-damo-academy/RynnRCP

·视觉-语言-动作模型 RynnVLA-001

https://github.com/alibaba-damo-academy/RynnVLA-001

·世界理解模型 RynnEC

https://github.com/alibaba-damo-academy/RynnEC

·WorldVLA模型

https://github.com/alibaba-damo-academy/WorldVLA

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
躲过运费暴涨,却栽在一滴水上!海运防潮的硬核法则,外贸人必看

躲过运费暴涨,却栽在一滴水上!海运防潮的硬核法则,外贸人必看

除湿Master
2026-03-04 17:26:55
迪丽热巴滞留迪拜4天!知情人曝更多内幕,被困中东只是冰山一角

迪丽热巴滞留迪拜4天!知情人曝更多内幕,被困中东只是冰山一角

观察鉴娱
2026-03-05 09:55:28
迈巴赫妈妈的“土味穿搭”火了,普通人被刺痛,连炫富都看不懂

迈巴赫妈妈的“土味穿搭”火了,普通人被刺痛,连炫富都看不懂

蝴蝶花雨话教育
2026-03-05 09:39:16
还能撑8天,之后台湾去哪搞天然气?

还能撑8天,之后台湾去哪搞天然气?

枢密院十号
2026-03-04 19:30:15
北约首次击落伊朗导弹,土耳其卷入冲突 英国变脸:不排除攻击伊朗导弹装置

北约首次击落伊朗导弹,土耳其卷入冲突 英国变脸:不排除攻击伊朗导弹装置

红星新闻
2026-03-05 11:38:30
曝伊朗已悄悄联系美国,希望进行谈判以结束战争,特朗普:太晚了

曝伊朗已悄悄联系美国,希望进行谈判以结束战争,特朗普:太晚了

爆角追踪
2026-03-04 21:23:12
伊朗国防部警告:我们还没动用最先进的武器,不会在最初几天全部部署

伊朗国防部警告:我们还没动用最先进的武器,不会在最初几天全部部署

西游日记
2026-03-05 13:55:48
新的战场出现!美司令首次承认:中国卫星已经强到让美国必须反击

新的战场出现!美司令首次承认:中国卫星已经强到让美国必须反击

丁丁鲤史纪
2026-03-05 12:04:56
英超大结局?阿森纳夺冠概率超9成!遭对手炮轰:拖时间+投机取巧

英超大结局?阿森纳夺冠概率超9成!遭对手炮轰:拖时间+投机取巧

我爱英超
2026-03-05 07:55:40
全国人大代表庞永辉:建议三孩家庭每月补贴5000元至孩子3岁,对多孩家庭实施所得税、社保减免

全国人大代表庞永辉:建议三孩家庭每月补贴5000元至孩子3岁,对多孩家庭实施所得税、社保减免

极目新闻
2026-03-05 10:51:57
女子举报重庆官员母亲名下有几亿房产开700万宾利被判在网上道歉

女子举报重庆官员母亲名下有几亿房产开700万宾利被判在网上道歉

追月数星
2026-03-04 21:45:48
委员建议,取消在居民身份证上印刷“住址”信息

委员建议,取消在居民身份证上印刷“住址”信息

中国新闻周刊
2026-03-04 14:03:06
北汽新能源90天三级跳背后,藏着国企“慢稳快”的新造车逻辑

北汽新能源90天三级跳背后,藏着国企“慢稳快”的新造车逻辑

AutoBusiness
2025-11-11 16:23:04
美国已经消耗掉武器库存?美防长:我们拥有几乎无限的库存

美国已经消耗掉武器库存?美防长:我们拥有几乎无限的库存

互联网大观
2026-03-05 10:24:43
遭鞭打,被迫在尿骚味地道取暖?迪丽热巴猛料升级,滞留只是一角

遭鞭打,被迫在尿骚味地道取暖?迪丽热巴猛料升级,滞留只是一角

阿纂看事
2026-03-04 18:21:39
庞中华现状:和歌唱家妻子很恩爱,81岁精神矍铄,女儿是他的骄傲

庞中华现状:和歌唱家妻子很恩爱,81岁精神矍铄,女儿是他的骄傲

洲洲影视娱评
2026-03-04 13:54:30
日本政府紧张研判:派自卫队去霍尔木兹海峡

日本政府紧张研判:派自卫队去霍尔木兹海峡

都市快报橙柿互动
2026-03-05 13:57:55
母亲去世后与亲舅舅再婚?信息量大到烧脑,当地已介入调查

母亲去世后与亲舅舅再婚?信息量大到烧脑,当地已介入调查

离离言几许
2026-03-04 14:30:04
政府工作报告提出,城乡居民基础养老金月最低标准再提高20元

政府工作报告提出,城乡居民基础养老金月最低标准再提高20元

上观新闻
2026-03-05 10:25:05
超四百名伊朗大学教授签署声明,宣布伊斯兰共和国宪法不具合法性

超四百名伊朗大学教授签署声明,宣布伊斯兰共和国宪法不具合法性

雪中风车
2026-03-05 08:53:22
2026-03-05 15:04:49
爱集微 incentive-icons
爱集微
集微网官方账号
109110文章数 98338关注度
往期回顾 全部

科技要闻

阿里内部邮件回应:批准林俊旸辞职

头条要闻

日本政府紧张研判:派自卫队去霍尔木兹海峡

头条要闻

日本政府紧张研判:派自卫队去霍尔木兹海峡

体育要闻

不开玩笑,没人想在季后赛碰上黄蜂

娱乐要闻

谢娜下场撕薛之谦,张杰前女友爆猛料

财经要闻

“十五五”开局之年,这么干!

汽车要闻

"四个亿" 莲花For Me在操控面前守住了金线

态度原创

房产
艺术
亲子
数码
健康

房产要闻

185个字!2026年中国房地产,定调了!

艺术要闻

2026年“浩瀚草原 亮丽北疆”美展

亲子要闻

学前一年免费教育惠及1400万儿童,育儿补贴惠及3000多万婴幼儿

数码要闻

荣耀Robot Phone机器人手机旋转运镜功能实拍演示

转头就晕的耳石症,能开车上班吗?

无障碍浏览 进入关怀版