网易首页 > 网易号 > 正文 申请入驻

达摩院开源具身智能“三大件” 机器人上下文协议首次开源

0
分享至

8月11日消息,在世界机器人大会上,阿里达摩院宣布开源自研的 VLA 模型RynnVLA-001-7B、世界理解模型RynnEC、以及机器人上下文协议RynnRCP,推动数据、模型和机器人的兼容适配,打通具身智能开发全流程。

具身智能领域飞速发展,但仍面临开发流程碎片化,数据、模型与机器人本体适配难等重大挑战。达摩院将MCP(Model Context Protocol)理念引入具身智能,首次提出并开源了RCP(Robotics Context Protocol)协议以推动不同的数据、模型与本体之间的对接适配。达摩院打造了名为RynnRCP的一套完整的机器人服务协议和框架,能够打通从传感器数据采集、模型推理到机器人动作执行的完整工作流,帮助用户根据自身场景轻松适配。RynnRCP现已经支持Pi0、GR00T N1.5等多款热门模型以及SO-100、SO-101等多种机械臂,正持续拓展。



具体而言,RynnRCP包括RCP框架和RobotMotion两个主要模块。RCP框架旨在建立机器人本体与传感器的连接,提供标准化能力接口,并实现不同的传输层和模型服务之间的兼容。RobotMotion则是具身大模型与机器人本体控制之间的桥梁,能将离散的低频推理命令实时转换为高频的连续控制信号,实现平滑、符合物理约束的机器人运动。同时,RobotMotion还提供了一体化仿真-真机控制工具,帮助开发者快速上手,支持任务规控、仿真同步、数据采集与回放、轨迹可视化等功能,降低策略迁移难度。

大会上,达摩院还宣布开源两款具身智能大模型。RynnVLA-001是达摩院自主研发的基于视频生成和人体轨迹预训练的视觉-语言-动作模型,其特点是能够从第一人称视角的视频中学习人类的操作技能,隐式迁移到机器人手臂的操控上,从而让机械臂操控更加连贯、平滑,更接近于人类动作。

世界理解模型RynnEC将多模态大语言模型引入具身世界,赋予了大模型理解物理世界的能力。该模型能够从位置、功能、数量等11个维度全面解析场景中的物体,并在复杂的室内环境中精准定位和分割目标物体。无需3D模型,该模型仅靠视频序列就能建立连续的空间感知,还支持灵活交互。

此外,达摩院还在上月开源了WorldVLA模型,首次将世界模型与动作模型融合,提升了图像与动作的理解与生成能力。相比传统模型,该模型抓取成功率提高4%,视频生成质量显著改善,展现了较好的协同性和准确性。

开源链接:

·机器人上下文协议RynnRCP

https://github.com/alibaba-damo-academy/RynnRCP

·视觉-语言-动作模型 RynnVLA-001

https://github.com/alibaba-damo-academy/RynnVLA-001

·世界理解模型 RynnEC

https://github.com/alibaba-damo-academy/RynnEC

·WorldVLA模型

https://github.com/alibaba-damo-academy/WorldVLA

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
事教人一教就会!中方两记重拳让欧盟惊醒:报复中国已成为幻梦

事教人一教就会!中方两记重拳让欧盟惊醒:报复中国已成为幻梦

军机Talk
2025-11-04 11:35:55
一位姓袁的历史老师,为何能3次准确预言俄乌战争走向?

一位姓袁的历史老师,为何能3次准确预言俄乌战争走向?

猫智深
2025-11-04 20:10:12
价格大跳水!广东富豪最爱的“雷车”不香了?网友:老广买不动了

价格大跳水!广东富豪最爱的“雷车”不香了?网友:老广买不动了

品牌观察官
2025-11-04 21:42:02
史晓燕谈和李春平相识,曝其每年只能拿1500万美金,痴呆原因曝光

史晓燕谈和李春平相识,曝其每年只能拿1500万美金,痴呆原因曝光

古希腊掌管松饼的神
2025-11-04 16:44:04
欧冠精彩一夜:10人拜仁2-1大巴黎,利物浦1-0送皇马首败

欧冠精彩一夜:10人拜仁2-1大巴黎,利物浦1-0送皇马首败

全景体育V
2025-11-05 06:34:55
抄底!潘石屹夫妇用356亿给美国上了一课

抄底!潘石屹夫妇用356亿给美国上了一课

大猫财经Pro
2025-11-04 17:32:48
63岁演员吴镇宇刷老年卡坐公交,被疑“冒用他人证件”险被赶下车,当场掏身份证自证清白

63岁演员吴镇宇刷老年卡坐公交,被疑“冒用他人证件”险被赶下车,当场掏身份证自证清白

极目新闻
2025-11-04 21:57:03
欧冠狂欢夜:拜仁2-1赢巴黎登顶 利物浦送皇马首败 阿森纳10连胜

欧冠狂欢夜:拜仁2-1赢巴黎登顶 利物浦送皇马首败 阿森纳10连胜

侃球熊弟
2025-11-05 05:09:46
罗云庆被查

罗云庆被查

新京报
2025-11-04 19:46:08
特朗普称赞中国,荷兰成了小丑,想得到中方谅解,只有一条路可走

特朗普称赞中国,荷兰成了小丑,想得到中方谅解,只有一条路可走

空天力量
2025-11-03 19:12:07
恭喜!全红婵新搭档夺第二金:22岁破茧成蝶,击败陈芋汐新搭档

恭喜!全红婵新搭档夺第二金:22岁破茧成蝶,击败陈芋汐新搭档

李喜林篮球绝杀
2025-11-04 23:03:26
“95后”女商人林晓晴连任成都路桥董事长,去年薪酬92万元

“95后”女商人林晓晴连任成都路桥董事长,去年薪酬92万元

每日经济新闻
2025-11-04 20:25:13
上海炒股大赛冠军坦言:盈利多年只入两种股票,献给在沉浮的股民

上海炒股大赛冠军坦言:盈利多年只入两种股票,献给在沉浮的股民

股经纵横谈
2025-11-03 21:17:48
有网友说出了我们制造业的根本问题,并看出它怎么形成的

有网友说出了我们制造业的根本问题,并看出它怎么形成的

清晖有墨
2025-11-04 15:42:27
哈马斯:以色列向地道灌混凝土困我们的战士,严重违反协议

哈马斯:以色列向地道灌混凝土困我们的战士,严重违反协议

桂系007
2025-11-04 22:41:12
14岁女孩发视频质问爸爸,四次不敲门盯着看洗澡,后续妇联已介入

14岁女孩发视频质问爸爸,四次不敲门盯着看洗澡,后续妇联已介入

派大星纪录片
2025-11-04 16:36:23
台湾举行大阅兵,场景太凄凉了

台湾举行大阅兵,场景太凄凉了

远方青木
2025-11-05 00:12:54
随着蓉城0-0,海港0-2,亚冠最新积分榜:中超2强沦为倒数前二名

随着蓉城0-0,海港0-2,亚冠最新积分榜:中超2强沦为倒数前二名

侃球熊弟
2025-11-04 20:02:59
判处死刑!缅北白应苍昔日炫富张狂犹在眼前,今血债血偿报应临头

判处死刑!缅北白应苍昔日炫富张狂犹在眼前,今血债血偿报应临头

可达鸭面面观
2025-11-04 13:26:12
特朗普重磅宣布:鉴于其他国家行为,美国将立即重启核试验计划!

特朗普重磅宣布:鉴于其他国家行为,美国将立即重启核试验计划!

boss外传
2025-11-04 04:00:03
2025-11-05 06:44:49
爱集微 incentive-icons
爱集微
集微网官方账号
108411文章数 98322关注度
往期回顾 全部

科技要闻

硅谷甄嬛传:奥特曼优雅挑衅马斯克狠狠回击

头条要闻

普京:俄罗斯对任何国家都不构成威胁

头条要闻

普京:俄罗斯对任何国家都不构成威胁

体育要闻

27岁热刺门将,夺冠后退役当导演

娱乐要闻

爸爸去哪儿6孩子现状,个个不同

财经要闻

马斯克"万亿薪酬"计划,突爆重大利空

汽车要闻

把海岸诗意织进日常 法拉利Amalfi重塑超跑生活方式

态度原创

数码
健康
艺术
教育
军事航空

数码要闻

华为 WATCH FIT 3 手表获 HarmonyOS 5.0.0.28 升级

超声探头会加重受伤情况吗?

艺术要闻

Amber Lia-Kloppel:当代美国具象画家

教育要闻

TTS新传论文带读:重塑全球数智传播秩序的“南方想象”(语料酷酷来了啊!!!)

军事要闻

俄最新核潜艇下水 可搭载“末日鱼雷”

无障碍浏览 进入关怀版