网易首页 > 网易号 > 正文 申请入驻

达摩院开源具身智能“三大件” 机器人上下文协议首次开源

0
分享至

8月11日消息,在世界机器人大会上,阿里达摩院宣布开源自研的 VLA 模型RynnVLA-001-7B、世界理解模型RynnEC、以及机器人上下文协议RynnRCP,推动数据、模型和机器人的兼容适配,打通具身智能开发全流程。

具身智能领域飞速发展,但仍面临开发流程碎片化,数据、模型与机器人本体适配难等重大挑战。达摩院将MCP(Model Context Protocol)理念引入具身智能,首次提出并开源了RCP(Robotics Context Protocol)协议以推动不同的数据、模型与本体之间的对接适配。达摩院打造了名为RynnRCP的一套完整的机器人服务协议和框架,能够打通从传感器数据采集、模型推理到机器人动作执行的完整工作流,帮助用户根据自身场景轻松适配。RynnRCP现已经支持Pi0、GR00T N1.5等多款热门模型以及SO-100、SO-101等多种机械臂,正持续拓展。



具体而言,RynnRCP包括RCP框架和RobotMotion两个主要模块。RCP框架旨在建立机器人本体与传感器的连接,提供标准化能力接口,并实现不同的传输层和模型服务之间的兼容。RobotMotion则是具身大模型与机器人本体控制之间的桥梁,能将离散的低频推理命令实时转换为高频的连续控制信号,实现平滑、符合物理约束的机器人运动。同时,RobotMotion还提供了一体化仿真-真机控制工具,帮助开发者快速上手,支持任务规控、仿真同步、数据采集与回放、轨迹可视化等功能,降低策略迁移难度。

大会上,达摩院还宣布开源两款具身智能大模型。RynnVLA-001是达摩院自主研发的基于视频生成和人体轨迹预训练的视觉-语言-动作模型,其特点是能够从第一人称视角的视频中学习人类的操作技能,隐式迁移到机器人手臂的操控上,从而让机械臂操控更加连贯、平滑,更接近于人类动作。

世界理解模型RynnEC将多模态大语言模型引入具身世界,赋予了大模型理解物理世界的能力。该模型能够从位置、功能、数量等11个维度全面解析场景中的物体,并在复杂的室内环境中精准定位和分割目标物体。无需3D模型,该模型仅靠视频序列就能建立连续的空间感知,还支持灵活交互。

此外,达摩院还在上月开源了WorldVLA模型,首次将世界模型与动作模型融合,提升了图像与动作的理解与生成能力。相比传统模型,该模型抓取成功率提高4%,视频生成质量显著改善,展现了较好的协同性和准确性。

开源链接:

·机器人上下文协议RynnRCP

https://github.com/alibaba-damo-academy/RynnRCP

·视觉-语言-动作模型 RynnVLA-001

https://github.com/alibaba-damo-academy/RynnVLA-001

·世界理解模型 RynnEC

https://github.com/alibaba-damo-academy/RynnEC

·WorldVLA模型

https://github.com/alibaba-damo-academy/WorldVLA

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
拆了又合?退役军人事务局7年后再归民政,是试点还是全国信号?

拆了又合?退役军人事务局7年后再归民政,是试点还是全国信号?

达文西看世界
2026-01-03 14:33:02
全都造反了!又一巨头搬离大陆,外媒:连台企也选择奔赴印度

全都造反了!又一巨头搬离大陆,外媒:连台企也选择奔赴印度

触摸史迹
2026-01-04 19:20:42
黑龙江同江:用一份废止文件,征收百万亩土地13年“地租”

黑龙江同江:用一份废止文件,征收百万亩土地13年“地租”

大象新闻
2026-01-04 17:49:07
这就是为什么体制内很少发朋友圈的原因

这就是为什么体制内很少发朋友圈的原因

夜深爱杂谈
2026-01-03 21:58:39
悲催!西安某设计院员工哭诉,加整年班,年终奖是共渡难关4个字

悲催!西安某设计院员工哭诉,加整年班,年终奖是共渡难关4个字

火山詩话
2026-01-04 17:36:16
34岁少妇卖淫养家,8年内买房又买车,接客28岁小伙却把命丢了

34岁少妇卖淫养家,8年内买房又买车,接客28岁小伙却把命丢了

胖胖侃咖
2025-12-11 08:00:17
12胜0负!湖人16分逆转,詹姆斯创2大神迹,裁判抢戏,东契奇36+9

12胜0负!湖人16分逆转,詹姆斯创2大神迹,裁判抢戏,东契奇36+9

老侃侃球
2026-01-05 13:24:41
西甲最新积分战报:皇马狂轰5球,马竞翻车,塞维利亚惨败

西甲最新积分战报:皇马狂轰5球,马竞翻车,塞维利亚惨败

足球狗说
2026-01-05 06:19:22
8记三分创生涯之夜!古德温26分爆发,太阳击退西部第一雷霆

8记三分创生涯之夜!古德温26分爆发,太阳击退西部第一雷霆

大眼瞄世界
2026-01-05 12:39:31
中国高校40强出炉!西安交大位列第10,南开仅排24,苏州大学上榜

中国高校40强出炉!西安交大位列第10,南开仅排24,苏州大学上榜

教育导向分享
2026-01-04 20:49:40
《人民日报》2天2次称赞永州队!点评美女老板:期待最终兑现承诺

《人民日报》2天2次称赞永州队!点评美女老板:期待最终兑现承诺

念洲
2026-01-05 10:42:12
国运由谁决定?从乌克兰的悲剧,回看教员那几次“孤独的坚持”

国运由谁决定?从乌克兰的悲剧,回看教员那几次“孤独的坚持”

远方风林
2025-12-26 00:05:55
搞大了!阿迪达斯今年将赞助江苏城市足球联赛!

搞大了!阿迪达斯今年将赞助江苏城市足球联赛!

走进事件的中心
2026-01-05 01:10:16
孟加拉国新发现,凡是靠在中国旁边的国家,人口大部分都是上亿的

孟加拉国新发现,凡是靠在中国旁边的国家,人口大部分都是上亿的

扶苏聊历史
2026-01-04 18:33:26
樊振东夺冠首度回应去留问题,一席话感动教练+队友,球迷听懂了

樊振东夺冠首度回应去留问题,一席话感动教练+队友,球迷听懂了

二哥聊球
2026-01-05 11:56:28
马杜罗被抓后,不到48小时,中俄联手行动,美国或又跳进一个泥潭

马杜罗被抓后,不到48小时,中俄联手行动,美国或又跳进一个泥潭

科普100克克
2026-01-04 18:20:43
蓝天白云不能牺牲老百姓冬天采暖!央视就华北部分农村取暖难发声

蓝天白云不能牺牲老百姓冬天采暖!央视就华北部分农村取暖难发声

阿纂看事
2026-01-05 09:37:55
定了,山东一副市长兼任教体局党组书记

定了,山东一副市长兼任教体局党组书记

山东教育
2026-01-05 11:52:22
美军如何抓的马杜罗?12架飞机41人,美军给委内瑞拉上了一课

美军如何抓的马杜罗?12架飞机41人,美军给委内瑞拉上了一课

大国知识局
2026-01-04 10:34:17
湿冷“魔法攻击”回归!雨什么时候停?

湿冷“魔法攻击”回归!雨什么时候停?

上观新闻
2026-01-05 11:10:10
2026-01-05 14:11:00
爱集微 incentive-icons
爱集微
集微网官方账号
108816文章数 98329关注度
往期回顾 全部

科技要闻

雷军新年首播:确认汽车业务降速

头条要闻

媒体:美军掳走马杜罗却放过罗德里格斯 背后或有隐情

头条要闻

媒体:美军掳走马杜罗却放过罗德里格斯 背后或有隐情

体育要闻

女子世界第一,9年前在咖啡店洗碗

娱乐要闻

黄宗泽夺双料视帝,泪洒颁奖台忆往昔

财经要闻

李迅雷:扩内需要把重心从"投"转向"消"

汽车要闻

不是9S是8X!极氪全新高性能旗舰SUV命名官宣

态度原创

亲子
房产
教育
家居
旅游

亲子要闻

2026年度育儿补贴今起开放申领,流程新增一键续领功能

房产要闻

再次登顶海南楼市!超越阿那亚的,只有阿那亚!

教育要闻

收藏:山东2026高中综评操作教程(教师端)

家居要闻

白色大理石 奢华现代

旅游要闻

冰雪狂欢、古镇漫游……外国游客解锁中国游新玩法 新年入境游迎“开门红”

无障碍浏览 进入关怀版