网易首页 > 网易号 > 正文 申请入驻

刚刚,稚晖君又开源了

0
分享至



GO-1的核心创新是ViLLA架构。

作者 |江宇

编辑 |漠影

机器人前瞻9月23日报道,智元机器人今日宣布全面开源其通用具身基座大模型GO-1(Genie Operator-1)。这是全球首个基于Vision-Language-Latent-Action (ViLLA)架构的具身智能模型,向全球开发者免费开放。


GO-1的核心创新是ViLLA架构。传统的VLA(Vision-Language-Action)模型直接从图像和文本预测动作,而ViLLA在两者之间引入“隐式动作标记”(latent action tokens),相当于为机器人构建一个“中间语义层”。

其共有三层结构:

1、VLM多模态理解层(基于InternVL2.5-2B):处理多视角图像、语言指令和力觉信号。

2、Latent Planner隐式规划器:利用latent tokens完成长时序规划,解决复杂任务。

3、Action Expert动作专家:基于扩散模型输出高频率的低层次连续动作序列。


▲GO-1三阶段训练机制示意图

这种设计使模型能先抽象理解“动作语义”,再转化为具体操作,提高了跨场景与跨机器人平台的泛化能力。

GO-1的训练依托于AgiBot World Colosseo数据集。该数据集由100余台双臂人形机器人采集而成,包含超过100万条操作轨迹,覆盖217类任务、87项技能和106种场景,构建于家庭、零售、工业、餐饮、办公五大环境中,总面积超过4000平方米,涉及对象超过3000种。

与以往主要集中在短时、单一任务的数据不同,该数据集突出长时序操作,轨迹平均时长在30至60秒之间,并包含“倒水”“折叠衣物”等高复杂度任务。


其采集过程采用human-in-the-loop机制,所有数据均经过人工校验,甚至包括失败数据也会被标注和保留,以提升模型对异常情况的鲁棒性。


基于这一数据集训练的策略在真实复杂任务上的表现,比Open X-Embodiment数据集提升约30%,在未见场景中也展现出显著的泛化能力。


此外,GO-1在“倒水”“补货”等需要指令理解与位置泛化的任务上,成功率明显优于RDT和π0模型。在引入latent planner之后,其复杂任务的平均完成率额外提升了0.12分。


同时,该模型性能随着数据规模呈现幂律扩展关系,验证了持续提升的可能性。在相同任务下,人工校验过的数据比未校验数据带来了0.18分的性能增益。


除了真实数据集上的实验,GO-1也在仿真与真机评测中进行了验证。在Genie Sim和Libero两大主流仿真平台上,模型均取得领先成绩。在Genie G1真机实验中,其表现同样优于其他SOTA模型。


▲GenieSim仿真评测结果


▲Libero仿真评测结果

虽然GO-1基于AgiBot G1机器人数据预训练,但在松灵机器人、Franka机械臂等平台测试中也展现了良好的迁移效果。GIA模型采用通用数据接口(兼容LeRobot格式),便于开发者在不同硬件上进行微调与部署。


与此同时,智元机器人还推出了一站式开发平台Genie Studio,覆盖数据采集、管理、训练、仿真、部署等全流程,内置GO-1基座模型和完整工具链,支持真机一键编译与部署,旨在降低开发门槛并提升效率。


GitHub地址:

https://github.com/OpenDriveLab/AgiBot-World

Huggingface地址:

https://huggingface.co/agibot-world/GO-1

论文:

https://arxiv.org/abs/2503.06669

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
特朗普遭2大暴击,奥巴马火力全开,特朗普高挂“免战牌”

特朗普遭2大暴击,奥巴马火力全开,特朗普高挂“免战牌”

男女那点事儿儿
2025-11-04 06:55:15
王家卫没想到,录音事件后,王传君却因一句“我不喜欢”口碑暴增

王家卫没想到,录音事件后,王传君却因一句“我不喜欢”口碑暴增

妙知
2025-11-03 11:10:13
心梗去世的人飙升 !医生含泪苦劝:无论多大年纪,天冷坚守8大原则

心梗去世的人飙升 !医生含泪苦劝:无论多大年纪,天冷坚守8大原则

今日养生之道
2025-11-04 07:40:02
华人五大世界级科学家,钱老第三,华罗庚未上榜,杨振宁让人意外

华人五大世界级科学家,钱老第三,华罗庚未上榜,杨振宁让人意外

春秋论娱
2025-10-25 07:20:23
怒扇水瓶发泄不满!史诗级神射手遭遇滑铁卢,离开库里后悔了吧

怒扇水瓶发泄不满!史诗级神射手遭遇滑铁卢,离开库里后悔了吧

毒舌NBA
2025-11-03 20:33:11
医生发现:高血压患者若每天吃水煮蛋,不用多久,或会有3个改善

医生发现:高血压患者若每天吃水煮蛋,不用多久,或会有3个改善

今日养生之道
2025-11-03 15:08:17
带小三产检后续:身份被扒,男方躲起来,小三航空公司遭围攻

带小三产检后续:身份被扒,男方躲起来,小三航空公司遭围攻

小李睡不醒了
2025-11-04 07:23:38
别等失去才后悔!72岁老人养老院7年经验:晚年最该攥紧的不是钱

别等失去才后悔!72岁老人养老院7年经验:晚年最该攥紧的不是钱

乐天果果
2025-10-14 21:16:22
郑丽文接棒后,卢秀燕、侯友宜不装了,傅崐萁、陈玉珍振臂一呼!

郑丽文接棒后,卢秀燕、侯友宜不装了,傅崐萁、陈玉珍振臂一呼!

米师傅安装
2025-11-04 00:08:59
百病不离肝!对肝脏最好的3种食物,一周吃2次,养肝护肝,别错过

百病不离肝!对肝脏最好的3种食物,一周吃2次,养肝护肝,别错过

阿龙美食记
2025-10-30 11:53:11
中方出手制止朱拉尼,海湾国家迅速转变立场,叙利亚局势迎来新局面

中方出手制止朱拉尼,海湾国家迅速转变立场,叙利亚局势迎来新局面

起喜电影
2025-11-02 05:16:49
大同女生买淀粉肠被没收钥匙后续:学校调查核实,网友质疑声不断

大同女生买淀粉肠被没收钥匙后续:学校调查核实,网友质疑声不断

鋭娱之乐
2025-11-03 12:45:08
投资遭“强行接管”:民企的县城之殇

投资遭“强行接管”:民企的县城之殇

三人成虎V5
2025-10-31 11:51:58
一觉醒来,中国斯诺克3胜8负!丁俊晖6-1,赵心童过关,2冠军陪跑

一觉醒来,中国斯诺克3胜8负!丁俊晖6-1,赵心童过关,2冠军陪跑

刘姚尧的文字城堡
2025-11-04 06:10:41
“一打开App就没了!”几分钟内抢空,有人抢了18万额度……多家银行调整→

“一打开App就没了!”几分钟内抢空,有人抢了18万额度……多家银行调整→

新浪财经
2025-11-03 19:13:34
千亿梦破碎!从62亿营收到日亏百万,为什么降价认怂也救不了西贝

千亿梦破碎!从62亿营收到日亏百万,为什么降价认怂也救不了西贝

坠入二次元的海洋
2025-10-28 09:11:16
如何避免像墨镜王导演那样被录音,总结了三点给大家

如何避免像墨镜王导演那样被录音,总结了三点给大家

熊太行
2025-11-03 12:43:57
江西男孩名字特殊,警察:你不改名,全国人口信息系统就得改

江西男孩名字特殊,警察:你不改名,全国人口信息系统就得改

纪实录
2024-04-10 20:10:35
晚点独家丨沈阳原上汽通用工厂改造,吉利将借其缓解银河产能压力

晚点独家丨沈阳原上汽通用工厂改造,吉利将借其缓解银河产能压力

晚点LatePost
2025-11-03 16:17:33
照片里最有气质的不是胡兵和刘烨,而是站在中间长得高大帅气的他

照片里最有气质的不是胡兵和刘烨,而是站在中间长得高大帅气的他

老吴教育课堂
2025-11-03 07:49:27
2025-11-04 09:27:00
机器人前瞻
机器人前瞻
专注于机器人报道的媒体
188文章数 4关注度
往期回顾 全部

科技要闻

余承东内部信:鸿蒙下一步要实现上亿覆盖

头条要闻

牛弹琴:想想不对劲德国外长又来电 中方三句话内涵深

头条要闻

牛弹琴:想想不对劲德国外长又来电 中方三句话内涵深

体育要闻

开拓者官宣召回杨瀚森 队记解析核心原因

娱乐要闻

男导演曝丑闻 蒋欣的含金量还在上升

财经要闻

作价40亿美元!星巴克中国易主

汽车要闻

环比增长28.7% 方程豹品牌10月销量31052辆

态度原创

手机
游戏
本地
房产
公开课

手机要闻

安兔兔性能榜大变天,OPPO+vivo成最大赢家

StarsWar12线下总决赛开启,一起重温DOTA1热血时刻

本地新闻

全网围观,到底多少人被这个野人大学生笑疯了

房产要闻

信达·繁花里 | 老照片征集活动 温情启幕

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版