网易首页 > 网易号 > 正文 申请入驻

全球首个端到端抓取大模型发布,国产机器人攻克大瓶颈?

0
分享至

在刚刚结束的 NVIDIA CES 2025 发布会上,全场唯一的轮式人形机器人托举起了英伟达新一代显卡产品 RTX5090 引发关注。而该机器人正是来自北京银河通用机器人有限公司的Galbot。

与此同时,在英伟达位于美国拉斯维加斯 Fountainebleu 展台上,Galbot 机器人还首次进行了真机演示。观众在现场24小时无人值守的便利店场景中,通过iPad模拟下单,即可体验机器人在便利店中取货、送货的便捷服务。

Galbot 凭借高效、流畅的工作展示,也让其背后的银河通用具身大模型技术和创新成果走向台前。1月9日,银河通用对外正式发布GraspVLA,号称全球首个端到端具身抓取基础大模型(Foundation Model)。

据银河通用介绍,GraspVLA的训练包含预训练和后训练两部分,其中预训练完全基于合成大数据。即无需大规模真实数据、仅通过合成数据达到基础模型的预训练过程,和进一步通过小样本微调使基础“通才”快速成长为指定场景“专家”的能力,解决了世界范围内具身通用机器人当前发展的两大瓶颈——数据瓶颈泛化瓶颈

此外,针对特别需求,GraspVLA 的后训练则仅需小样本学习即可迁移基础能力到特定场景,维持高泛化性的同时,还能形成符合产品需求的专业技能。

仅通过合成大数据的预训练

就可以实现充分泛化

具体而言,银河通用提出了 VLA(视觉-语言-动作模型) 达到基础模型,所需满足的七大泛化情况,并以GraspVLA进行展示。

光照泛化。咖啡厅、便利店、生产车间、KTV 等不同光照条件下,光线的冷暖、强弱变化,包括渐变和骤变,以及在极端黑暗环境下移动目标物体时,模型都应该具备准确找到并正常抓取物体的能力。

文内图片展示包括2倍、3倍或5倍速。“银河通用”公众号

背景泛化。实际环境中,机器人工作场景不尽相同,模型需要面对不同材质、不同纹理的桌面和操作台,甚至动态变化的背景画面。

平面位置泛化。模型还需要面对将物体在桌面上随意平移、旋转的情况。

空间高度泛化。即使面对物体摆放高低错落的工作台,模型也应该可以从容抓取。

动作策略泛化。模型应实时进行推理决策,不仅会移动跟随目标,对于物体竖放、倒放等不同摆放方式,还可根据物体和夹爪的位姿自动调整策略,选择最安全合理的抓取方式,处理复杂情况。

动态干扰泛化。真实工作场景复杂多变,机器人在执行任务时常常会受到干扰。在工作过程中,即使往工作空间中随意添加干扰物体,甚至发生撞击并使目标物体随机移位,模型也需要可以稳定地完成任务。

物体类别泛化。银河通用称,在上述测试中,所有物体、场景、摆放方式均未进行任何训练,GraspVLA 仅通过仿真合成数据学习到的语义和动作能力,就实现了在真实世界中零样本泛化测试。

此外,通过把仿真合成的动作数据和海量互联网语义数据巧妙地联合训练,对于没有学习过动作数据的物体类别,GraspVLA 也能把已掌握的动作能力泛化迁移:

通过少量真实数据的后训练

即可满足特定场景特殊需求

另一方面,经过合成大数据的预训练,GraspVLA 已经天然满足大多数应用需求,但是在产品和特定场景中常常有一些特殊需求,因此模型需要拥有对新需求的快速适应及迁移能力。

银河通用介绍,以商超场景为例,用户希望模型按照顺序取出同类商品。为满足用户需求,针对一箱怡宝矿泉水,仅需采集少量(少于一个人遥操一天)的真实数据,就能让 GraspVLA 理解并满足按序抓取的需求。

GraspVLA在经过怡宝一人/天采集数据的后训练,就可以举一反三,将这种少样本习得的行为自动迁移到其他品牌的饮品(农夫山泉、东方树叶),按摆放顺序分别抓取了瓶身颜色不同,瓶盖大小不一的同类商品。这展现了天量合成大数据预训练达成的基础模型。

工业场景中,往往有大量行业专用的特殊零件。虽然模型仅需预训练就可以抓起任意零件,但难以直接根据语言指令抓起对应物体,比如指定“抓取车窗控制器”,但模型抓起了接线座。

为了提升模型识别罕见零件的能力,仅需采集少量轨迹进行快速后训练。GraspVLA 就可以迅速掌握诸如接线座(Wiring Base)、三角板(Triangular Panel)、黑色软管(Black Hose)等特殊工业名词,能从任意摆放的密集场景中精准找出对应零件。

在家庭场景中,人们对机器人的行为会有特定的偏好,例如抓取杯子时不要碰到杯子内壁。同样通过采集少量带偏好的抓取轨迹,GraspVLA 即可学会按照自然语义抓取。

对此,银河通用表示,这种预训练全合成大数据方案在人力和资金投入上成本更低,时间效率更高,可持续发展性更好,也是 VLA 模型商业化应用中必备的能力。

本文系观察者网独家稿件,未经授权,不得转载。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
难绷,又一篇内容被删除了

难绷,又一篇内容被删除了

神秘阿饭
2026-04-07 20:40:02
“看站姿就不像当过兵的!”家长炫耀特种兵儿子,败露后惨遭打脸

“看站姿就不像当过兵的!”家长炫耀特种兵儿子,败露后惨遭打脸

妍妍教育日记
2026-04-02 12:29:05
中年以后就做两件事:存钱,存人

中年以后就做两件事:存钱,存人

洞见
2026-04-07 10:44:28
花200万购到奔驰山寨车遭三省法院“踢皮球”:我们没有管辖权!

花200万购到奔驰山寨车遭三省法院“踢皮球”:我们没有管辖权!

兵叔评说
2026-04-06 12:38:28
今年最传奇的游戏开发者,是这个从不用引擎的狠人。

今年最传奇的游戏开发者,是这个从不用引擎的狠人。

差评XPIN
2026-04-06 00:08:45
伦敦世乒赛开战在即!赛程阵容全曝光,国乒十人锁定双金目标

伦敦世乒赛开战在即!赛程阵容全曝光,国乒十人锁定双金目标

章蠞户外
2026-04-08 09:13:26
小孩子的嘴果然是口无遮拦啥都往外说!爸妈:以后还怎么见人

小孩子的嘴果然是口无遮拦啥都往外说!爸妈:以后还怎么见人

另子维爱读史
2026-04-01 19:28:39
金价要重现历史了,要有心理准备,月初金价可能将重现2015年历史

金价要重现历史了,要有心理准备,月初金价可能将重现2015年历史

南宗历史
2026-04-06 20:53:06
张雪峰:如果你不好好学习,一旦掉入社会底层,和一群没有素质的人混在一起.....

张雪峰:如果你不好好学习,一旦掉入社会底层,和一群没有素质的人混在一起.....

山东教育
2026-01-27 11:38:18
陈丽华去世仅2天,小11岁老公过往被扒,原来他和翁帆的处境一样

陈丽华去世仅2天,小11岁老公过往被扒,原来他和翁帆的处境一样

做一个合格的吃瓜群众
2026-04-07 20:43:53
李讷在医院见完妈妈的遗体最后一面后,去探望李敏,对她赞不绝口

李讷在医院见完妈妈的遗体最后一面后,去探望李敏,对她赞不绝口

简史档案馆
2026-04-07 11:05:03
2年合同出手,火箭队正式锁定第4控卫!场均2+1,他比阿门更全面

2年合同出手,火箭队正式锁定第4控卫!场均2+1,他比阿门更全面

熊哥爱篮球
2026-04-08 11:51:08
她靠“冒牌”出道走红,成央视宠儿,四登春晚,如今靠浪姐又火了

她靠“冒牌”出道走红,成央视宠儿,四登春晚,如今靠浪姐又火了

八斗小先生
2026-04-06 15:43:14
工龄40年,个人账户469396.83元,60岁2个月退休,养老金有多少?

工龄40年,个人账户469396.83元,60岁2个月退休,养老金有多少?

养老规划罗姐说
2026-03-15 19:58:58
与黑鹰行动相比,美军此次成功解救飞行员,是川普军事改革的胜利

与黑鹰行动相比,美军此次成功解救飞行员,是川普军事改革的胜利

壹家言
2026-04-06 07:52:53
兵败如山倒!国产新能源,撕下了二线豪华品牌最后的“遮羞布”

兵败如山倒!国产新能源,撕下了二线豪华品牌最后的“遮羞布”

羽逸地之光
2026-04-06 05:44:43
日媒:日本一老人在景点与女子发生争执啃咬对方手臂,被捕后短时间内死亡,警方正调查死因

日媒:日本一老人在景点与女子发生争执啃咬对方手臂,被捕后短时间内死亡,警方正调查死因

环球网资讯
2026-04-07 11:12:37
清明后多吃这“碱性菜”,一通便、二祛湿、三强免疫、四健脾胃

清明后多吃这“碱性菜”,一通便、二祛湿、三强免疫、四健脾胃

阿龙美食记
2026-04-06 12:27:05
没想到!中国给加纳援建的1000口井,竟成50万当地人的“救命药”

没想到!中国给加纳援建的1000口井,竟成50万当地人的“救命药”

老范谈史
2026-04-05 05:19:04
为啥说最好不要送孩子出国?网友:希望你的孩子跟你眼界一样

为啥说最好不要送孩子出国?网友:希望你的孩子跟你眼界一样

解读热点事件
2026-04-03 00:05:08
2026-04-08 12:11:00
观察者网 incentive-icons
观察者网
全球视野,中国关怀
138321文章数 1850361关注度
往期回顾 全部

科技要闻

造出地表最强AI,却死活不给你用!

头条要闻

午评:创业板指半日涨4.81% 全市场超5000只个股上涨

头条要闻

午评:创业板指半日涨4.81% 全市场超5000只个股上涨

体育要闻

皇马1.5亿巨星浪费超级单刀 丢球摊手抱怨

娱乐要闻

杨颖邓超低调现身观众席 支持陈赫话剧

财经要闻

特朗普同意停火两周 伊朗:接受停火提议

汽车要闻

5门5座/新复古造型 缤果Pro将于4月14日开启预售

态度原创

时尚
旅游
教育
艺术
军事航空

阔腿裤失宠了?今年这几条裤子最时髦!

旅游要闻

太火爆!大学生一天猛赚1800多元!提前一周就约满

教育要闻

孩子主动表达的重要性与警示信号

艺术要闻

齐白石『凌波仙子』

军事要闻

文化符号当“弹药” 美伊将信息战带入新阶段

无障碍浏览 进入关怀版