网易首页 > 网易号 > 正文 申请入驻

达摩院开源具身智能“三大件” 机器人上下文协议首次开源

0
分享至

8月11日消息,在世界机器人大会上,阿里达摩院宣布开源自研的 VLA 模型RynnVLA-001-7B、世界理解模型RynnEC、以及机器人上下文协议RynnRCP,推动数据、模型和机器人的兼容适配,打通具身智能开发全流程。

具身智能领域飞速发展,但仍面临开发流程碎片化,数据、模型与机器人本体适配难等重大挑战。达摩院将MCP(Model Context Protocol)理念引入具身智能,首次提出并开源了RCP(Robotics Context Protocol)协议以推动不同的数据、模型与本体之间的对接适配。达摩院打造了名为RynnRCP的一套完整的机器人服务协议和框架,能够打通从传感器数据采集、模型推理到机器人动作执行的完整工作流,帮助用户根据自身场景轻松适配。RynnRCP现已经支持Pi0、GR00T N1.5等多款热门模型以及SO-100、SO-101等多种机械臂,正持续拓展。



具体而言,RynnRCP包括RCP框架和RobotMotion两个主要模块。RCP框架旨在建立机器人本体与传感器的连接,提供标准化能力接口,并实现不同的传输层和模型服务之间的兼容。RobotMotion则是具身大模型与机器人本体控制之间的桥梁,能将离散的低频推理命令实时转换为高频的连续控制信号,实现平滑、符合物理约束的机器人运动。同时,RobotMotion还提供了一体化仿真-真机控制工具,帮助开发者快速上手,支持任务规控、仿真同步、数据采集与回放、轨迹可视化等功能,降低策略迁移难度。

大会上,达摩院还宣布开源两款具身智能大模型。RynnVLA-001是达摩院自主研发的基于视频生成和人体轨迹预训练的视觉-语言-动作模型,其特点是能够从第一人称视角的视频中学习人类的操作技能,隐式迁移到机器人手臂的操控上,从而让机械臂操控更加连贯、平滑,更接近于人类动作。

世界理解模型RynnEC将多模态大语言模型引入具身世界,赋予了大模型理解物理世界的能力。该模型能够从位置、功能、数量等11个维度全面解析场景中的物体,并在复杂的室内环境中精准定位和分割目标物体。无需3D模型,该模型仅靠视频序列就能建立连续的空间感知,还支持灵活交互。

此外,达摩院还在上月开源了WorldVLA模型,首次将世界模型与动作模型融合,提升了图像与动作的理解与生成能力。相比传统模型,该模型抓取成功率提高4%,视频生成质量显著改善,展现了较好的协同性和准确性。

开源链接:

·机器人上下文协议RynnRCP

https://github.com/alibaba-damo-academy/RynnRCP

·视觉-语言-动作模型 RynnVLA-001

https://github.com/alibaba-damo-academy/RynnVLA-001

·世界理解模型 RynnEC

https://github.com/alibaba-damo-academy/RynnEC

·WorldVLA模型

https://github.com/alibaba-damo-academy/WorldVLA

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
新加坡炮王吃药伺候女友!沙滩影后X需求很大!

新加坡炮王吃药伺候女友!沙滩影后X需求很大!

八卦疯叔
2026-01-03 12:45:47
广东怎么办?浙江2026年1月最低工资涨到2660元,网友们炸开锅了

广东怎么办?浙江2026年1月最低工资涨到2660元,网友们炸开锅了

火山詩话
2026-01-03 08:51:28
朝鲜正面临一个重大危机!

朝鲜正面临一个重大危机!

福建平子
2026-01-01 14:41:11
给婴儿喂安眠药后续:月嫂单位被扒,黑幕曝光,孩子状态让人担忧

给婴儿喂安眠药后续:月嫂单位被扒,黑幕曝光,孩子状态让人担忧

奇思妙想草叶君
2026-01-03 19:47:31
怪不得美军这么有底气,上来就直奔马杜罗总统府!原来有内鬼带路

怪不得美军这么有底气,上来就直奔马杜罗总统府!原来有内鬼带路

阿龙聊军事
2026-01-03 19:00:14
日本专家:不要再被忽悠了,中国歼-36根本没有实战的能力

日本专家:不要再被忽悠了,中国歼-36根本没有实战的能力

吕醿极限手工
2025-12-19 09:39:35
公司发文共度时艰:全面暂停发放绩效!

公司发文共度时艰:全面暂停发放绩效!

黯泉
2026-01-03 22:51:44
事实证明,撬侯耀文之妻、养侯耀文之子的戴志诚,并非是十恶不赦

事实证明,撬侯耀文之妻、养侯耀文之子的戴志诚,并非是十恶不赦

巧手晓厨娘
2026-01-03 12:36:32
从巴沙尔被推翻到马杜罗被活捉,国内军事专家支持谁,谁就翻车!

从巴沙尔被推翻到马杜罗被活捉,国内军事专家支持谁,谁就翻车!

眼光很亮
2026-01-03 22:19:19
点球罚丢!尤文爆冷翻车,4连胜被终结,揪出头号罪人

点球罚丢!尤文爆冷翻车,4连胜被终结,揪出头号罪人

足球狗说
2026-01-04 02:56:19
中俄刚说打通图们江,就建限高桥?第一个跳出来反对的,让人意外

中俄刚说打通图们江,就建限高桥?第一个跳出来反对的,让人意外

爱吃醋的猫咪
2026-01-03 20:25:04
这两条新闻放一起看,讽刺至极

这两条新闻放一起看,讽刺至极

清书先生
2025-09-28 17:07:07
特朗普为何突然动手?有分析称,与此人的游说密切相关

特朗普为何突然动手?有分析称,与此人的游说密切相关

极目新闻
2026-01-03 21:02:38
新加坡知道自己上当了,悔不当初却为时晚矣,20年真心错付美国

新加坡知道自己上当了,悔不当初却为时晚矣,20年真心错付美国

终于在眼泪中明白
2026-01-04 03:46:43
要交购置税了,但是产能过剩严重,燃油车倒逼,今年车价或更便宜

要交购置税了,但是产能过剩严重,燃油车倒逼,今年车价或更便宜

柏铭锐谈
2026-01-02 12:25:34
崔康熙自荐5家中超俱乐部,知名大V:给泰山要2年续约合同

崔康熙自荐5家中超俱乐部,知名大V:给泰山要2年续约合同

建哥说体育
2026-01-03 21:15:48
大陆军演刚结束,台湾最新民调出炉,结果惊人,赖清德被将军

大陆军演刚结束,台湾最新民调出炉,结果惊人,赖清德被将军

乐天闲聊
2026-01-03 14:30:39
温铁军:中国被美国扒掉了两层皮,竟还有人妄想让中国做美的助手

温铁军:中国被美国扒掉了两层皮,竟还有人妄想让中国做美的助手

长星寄明月
2026-01-01 06:06:56
悲催!日本东京不少市民最近没饭吃了,多个生活救济点前排起长队

悲催!日本东京不少市民最近没饭吃了,多个生活救济点前排起长队

火山詩话
2026-01-02 18:41:47
男子在小区遛大型犬不拴绳,年年咬伤人:是养狗陋习还是纵狗伤人

男子在小区遛大型犬不拴绳,年年咬伤人:是养狗陋习还是纵狗伤人

胡言炫语
2026-01-04 03:22:09
2026-01-04 05:12:49
爱集微 incentive-icons
爱集微
集微网官方账号
108808文章数 98328关注度
往期回顾 全部

科技要闻

雷军:骂小米汽车有流量,但别故意抹黑

头条要闻

特朗普称马杜罗夫妇将在美受审 还对古巴发出威胁

头条要闻

特朗普称马杜罗夫妇将在美受审 还对古巴发出威胁

体育要闻

青岛西海岸官宣:郑智出任一线队主教练

娱乐要闻

司晓迪事件再升级 司晓迪称鹿晗最好

财经要闻

具身智能抢人大战:毕业一年 年薪300万

汽车要闻

奕派科技全年销量275,752辆 同比增长28.3

态度原创

房产
本地
旅游
时尚
公开课

房产要闻

海大誉府新年家年华暨2号楼耀世加推发布会圆满落幕

本地新闻

即将过去的2025年,对重庆的影响竟然如此深远

旅游要闻

1500名俄游客跨江跨年!黑河这场盛会,藏着中俄互免签的深层密码

好美啊!58岁的她开挂了

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版