网易首页 > 网易号 > 正文 申请入驻

银河通用机器人:春晚上小盖的动作都不是提前编写程序的表演

0
分享至

IT之家 2 月 17 日消息,据银河通用机器人官方微信公众号消息,马年春晚上,银河通用机器人“小盖”的一系列操作惊艳了全场:从精细地盘核桃、捡玻璃碎片、货架取物,到生活化的叠衣服、串烤肠,全都轻松拿捏,动作灵巧且自然拟人。而且,与传统机器人表演依赖预编程不同,银河通用此次展示干活技能的实现是端到端自主感知、自主决策、自主执行。

IT之家附官方详细介绍如下:

银河通用的核心能力,源于一条迥异于传统机器人技术的大模型路径。公司自主创新并应用了一条融合超大规模虚实数据端到端训练大小脑协同具身大模型的新范式:即基于自主构建的百亿级具身智能数据集,打造的全球首个集成“大脑-小脑-神经控制”于一模的全身全手端到端大模型 ——“银河星脑 AstraBrain”。

今天,我们就透过这些绝活,首次官方深度解密这个全身全手、大小脑端到端协同的大模型是怎么练成的。

绝活背后的技术突破

春晚舞台上,“小盖”展示的每一个干活动作都不是提前编写程序的“表演”,而是 AstraBrain 自主决策能力的实时、自主干活能力。让我们透过这些最具代表性的绝活,拆解背后的技术密码。

绝活一:盘核桃 —— AstraBrain 中的小脑赋予指尖“手感”

当“小盖”将两枚核桃置于掌心,手指灵巧地搓动、翻转,这背后是灵巧操作领域的世界级难题。

盘核桃的挑战在于:核桃表面不规则、重量分布不均,手掌握持状态下每根手指的受力点时刻变化,任何细微的力矩偏差都会导致核桃滑落。

银河通用自主研发的 AstraBrain 中的灵巧手神经动力学小脑模型,正是破解这一难题的关键。想要练好灵活的盘核桃小脑,机器人需要先是在虚拟世界里打基础,让机器手在虚拟世界里疯狂练习,系统会给它喂各种大小、重量的虚拟核桃,让它靠不断试错,练出一套适应性极强的“基础盘法”。

其次是在现实中加纠偏:因为电脑模拟和现实(比如真实的摩擦力、机械误差)总有差别,所以我们让真实的机器手去接触各种实物,积累真实的“物理手感”。等它真正在现实里盘核桃时,系统就会利用这种手感,在后台悄悄微调动作指令,把虚拟和现实的误差给补齐。简单来说,就是在虚拟世界练招式,在真实世界找手感,两者结合,机器手就能在现实里把核桃盘得十分溜了。

刚开始盘不动还总掉

逐步盘起来但还不够流畅

逐渐流程自然,速度也提升

绝活二:捡玻璃碎片 ——AstraBrain 中的大脑挑战感知极限

在春晚舞台上,“小盖”被要求从浅色桌面上捡起散落的玻璃碎片。这是一个对人类都颇具风险的精细操作,对机器人而言更是感知与控制的双重极限。

玻璃碎片的难点在于:透明物体在视觉上近乎“隐形”,尤其是放置在浅色桌面上时,其边缘、厚度、反光特征极易与环境融为一体。传统视觉算法难以准确识别透明物体的三维轮廓和位姿,更无法判断抓取点。

AstraBrain 的突破在于,通过在仿真环境中生成海量的透明物体数据 —— 不同厚度、不同碎裂形状、不同光照条件下的玻璃碎片 —— 让机器人在虚拟世界中“见过”各种可能的透明形态。结合多模态感知融合技术,“小盖”能够从微弱的反光边缘和阴影变化中“看见”玻璃的存在,并精准规划抓取策略。

更关键的是,模型赋予的力觉感知让它在接触玻璃时能够感知到硬度和滑动趋势,以恰到好处的力度稳稳捏起碎片,既不会捏碎,也不会滑落。

这一能力,为机器人在家庭清洁、工业回收等场景中的透明物体处理打开了全新可能。

绝活三:货架取货 ——AstraBrain 大小脑协同在动态环境中精准抓取

在春晚舞台上,“小盖”需要从货架上取下一瓶矿泉水。

这看似简单的动作,实则暗藏玄机 —— 水瓶被紧密排列在货架层板之间,周围商品间距极小,稍有不慎便会碰倒邻品或抓取失败。

这要求机器人必须同时处理三重难题:一是通过大脑精准判断水瓶在货架上的位置;二是用拟人的动作伸手拿到水瓶,并过程中不能碰倒周围的商品;三是灵巧操作,水瓶上半身较细、下半身较粗,且通常被紧密卡位,直接平移取出极易卡顿。

AstraBrain 的强化学习框架让“小盖”在虚拟世界中经历了亿万次“取货试错”:碰到旁边商品扣分,成功取下加分。经过这样的自我博弈,它“悟”出了一条人类都未必想到的最优路径 —— 先以灵巧的手指轻轻扣住水瓶上半身的瓶盖处,微微倾斜以避让两侧邻品,感知到阻力后顺势调整角度,再稳稳向外抽出。

这一过程不是预设轨迹,而是实时决策的结果。每一次扣动、每一次倾斜、每一次抓取,都是机器人在毫秒级时间内根据当前环境做出的自主判断。

绝活四:叠衣服 ——AstraBrain 对柔性物体的泛化灵巧操作

叠衣服被认为是机器人操作领域的最大的命题之一:因为衣服是柔性的,没有固定形状,每一次拿起来的状态都完全不同。

春晚现场,“小盖”面对的是随机摆放的 T 恤,没有预设的折叠轨迹,没有固定的抓取点。它需要实时判断布料当前的褶皱状态,预测折叠后的形态,并规划出一系列抓、拉、折、压的动作序列。

AstraBrain 的解决方案是:在仿真环境中生成数以万计的柔性物体变形数据,让机器人在虚拟世界中“见过”各种可能的褶皱形态,并学会从当前状态推演出最优操作路径。当“小盖”的手指轻轻抚平衣角、精准对折时,它不是在执行程序,而是在调用海量仿真经验基础上的实时决策 —— 这正是“举一反三”能力的终极体现。

绝活五:串烤肠 —— 双手协作与工具使用的双重突破

如果说盘核桃考验的是单手的灵巧,那么烤肠则是对双手协同与工具操作能力的极限挑战。

在春晚舞台上,“小盖”需要一手操控烤钳进行烤制,另一只手抓取签子,双手协作、精准完成串烤肠,并递给明星 —— 整个动作丝滑如水,这背后涉及双手的空间协同、力度的独立控制,以及对工具这一“身体延伸”的理解。

AstraBrain 的端到端大模型架构,让机器人的“大脑”能够同时处理双手的独立指令流,并在执行过程中实时调整。更关键的是,通过对海量仿真数据的学习,“小盖”理解了“工具”的本质:烤钳不是需要被控制的“物体”,而是手的延伸,是完成任务的媒介。这种对工具操作的泛化能力,让它能够像人类一样,拿到任何新工具都能快速上手。

在以上所有的干活任务中,细心的观众可能还发现了,小盖机器人干起活来的举手投足比其他机器人都更像真人,透着一股亲切感。

这背后全靠“银河星脑 AstraBrain”对人类动作数据的大规模仿真生成机制。

为什么要死磕人类数据仿真生成”?因为相比去一点点采集机器人的生硬动作,我们人类每天的生活动作不仅海量,而且获取起来极其容易。把这种最丰富、最易得的人类数据结合仿真生成,能够把人类的动作先验利用到极致,正是当前通往机器人大模型技术突破最可能的方向。

银河星脑 AstraBrain :拒绝“死记硬背”,掌握“举一反三”

透过上述绝活,我们可以清晰地看到 AstraBrain 的核心哲学:拒绝对特定动作的机械设定,而是让机器人掌握一套可以泛化到新场景、新任务的通用能力。

图: AstraBrain 银河星脑技术框架

我们就以“小盖”应用最广泛的“货架取物”为例,拆解它经历了哪几个步骤的修炼:

第一步:人类少样本示范

过去教机器人一个新技能,往往需要遥操作手把手地教成千上万遍。

AstraBrain 彻底改变了这一模式。

它仅需少量人类示范,机器人便能理解任务的核心意图,将这些动作“记住”,并在自身硬件上等效地展示出来。这是“小盖”快速适应春晚舞台复杂光线、多变道具摆放的基础。

第二步:仿真数据合成

现实中学习效率太低、数据成本太高。

AstraBrain 的第二招,是把机器人扔进一个“虚拟世界”—— 高精度物理真实的仿真环境。

在这里,系统可以自动生成数万种不同的场景:货架摆法随机变化、光照条件任意切换,并通过生成式模型批量产出拟人化的抓取动作。机器人通过在海量仿真数据中模仿学习,掌握了应对各种复杂情况的操作精髓。

第三步:强化学习闭环

仅有模仿,还不足以支撑极致的精细化操作和动态避障。

为此,AstraBrain 引入强化学习机制,让机器人的末端执行器在虚拟世界中进行高强度的“自我博弈”:碰到旁边的商品就扣分,完美避障顺利取出就加分。经过亿万次这样的试错迭代,机器人自己“悟”出了一条连人类示范都未必能给出的最优路径 —— 这就练就了春晚上那种“举重若轻”的丝滑手感。

第四步:真实世界再“见习”

虚拟世界训练得再好,回到物理现实也难免存在误差。AstraBrain 修炼的最后一步,就是让机器人在真实环境中进行少量实际操作,收集这些真机数据进行“微调”。这一步看似简单,却是彻底打通虚拟与现实隔阂的关键一跃。

数据金字塔:从基石到塔尖的修炼逻辑

上述四步完成的基石,是银河通用技术体系中虚实融合的数据基建 —— “银河星坊”(AstraSynth),其具体包括以下基层:

基石层(人类数据): 为机器人构建通用的任务认知,让“小盖”理解“什么是盘核桃”“什么是抓取”。

中间层(仿真合成数据): 通过海量、低成本、多样化的虚拟数据,让机器人在仿真中遍历各种可能性,从而跨越虚实鸿沟。

塔尖层(真机实战数据): 在虚拟训练成熟后,用极少量但高质量的真实世界操作数据,完成实战场景下的最后打磨。

银河星坊 AstraSynth 数据金字塔

用虚拟仿真解决数据不够的难题,用强化学习解决动作不准的瓶颈 —— 这就是银河通用机器人的通关秘籍。

这套逻辑不仅能用来抓取货架上的商品,同样能用来盘核桃、叠衣服、烤肠。正如春晚舞台上“小盖”展现的那样,它并不是学会了某一个孤立动作,而是真正掌握了一种可以快速学习任何新技能的通用能力。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
“一言不合就倒开水”!上海今日局部暴雨!超强厄尔尼诺快速发展→

“一言不合就倒开水”!上海今日局部暴雨!超强厄尔尼诺快速发展→

极目新闻
2026-08-21 07:49:39
这就是现实!现在不少央国企慰问退休老同志,都变味了!

这就是现实!现在不少央国企慰问退休老同志,都变味了!

陈博世财经
2026-08-20 10:12:15
要不是当时考古现场全程录像拍得清清楚楚,这几件颠覆认知的南宋文物出土时摆在那里,单凭肉眼去看的话实在是太假了

要不是当时考古现场全程录像拍得清清楚楚,这几件颠覆认知的南宋文物出土时摆在那里,单凭肉眼去看的话实在是太假了

老吴教育课堂
2026-08-19 06:24:41
多地公布今年七夕结婚领证数据

多地公布今年七夕结婚领证数据

第一财经资讯
2026-08-20 12:37:12
Selina素颜接娃被嘲发胖:那场大火留下的,是一辈子无法摆脱的后遗症

Selina素颜接娃被嘲发胖:那场大火留下的,是一辈子无法摆脱的后遗症

布丁冰淇淋
2026-08-19 20:56:01
不可思议!网传一小学工作群通知吊唁校长父亲逝世3周年忌日,邀请老师当日到校集合,消息下方附带多条群内转账截图

不可思议!网传一小学工作群通知吊唁校长父亲逝世3周年忌日,邀请老师当日到校集合,消息下方附带多条群内转账截图

火山詩话
2026-08-21 06:47:41
残酷预警:再这样下去,社会将出现大批“天不怕地不怕”的狠人

残酷预警:再这样下去,社会将出现大批“天不怕地不怕”的狠人

青梅侃史啊
2026-08-17 16:37:06
同父不同命!窦唯女儿自曝20年断联父亲,难怪说王菲赌赢了

同父不同命!窦唯女儿自曝20年断联父亲,难怪说王菲赌赢了

娱说瑜悦
2026-08-20 15:20:14
压哨,豪购!阿森纳再次斩获“顶级拼图”!顶级中场“空降”曼联曼城

压哨,豪购!阿森纳再次斩获“顶级拼图”!顶级中场“空降”曼联曼城

头狼追球
2026-08-20 14:35:15
高曙光:我这辈子最正确的决定,就是在51岁娶了“鱼子酱女王”

高曙光:我这辈子最正确的决定,就是在51岁娶了“鱼子酱女王”

飘飘然的娱乐汇
2026-08-20 23:00:07
局势已彻底失控!日本专家紧急发出警告:一旦爆发冲突,即便东京主动提出停火,中方也不会手软

局势已彻底失控!日本专家紧急发出警告:一旦爆发冲突,即便东京主动提出停火,中方也不会手软

谈史论今1
2026-08-18 23:47:35
我们国家不叫“东大”,叫中国!

我们国家不叫“东大”,叫中国!

李光满说
2026-08-19 22:22:42
心理学惊人发现:经常容易胡思乱想、内耗的人,不是矫情也不是能力差,而是潜意识里有两个大多数人都没察觉的错误思维

心理学惊人发现:经常容易胡思乱想、内耗的人,不是矫情也不是能力差,而是潜意识里有两个大多数人都没察觉的错误思维

心理观察局
2026-07-10 09:13:24
受够了!拉什福德在社交媒体上直言不讳地向内维尔传递信息

受够了!拉什福德在社交媒体上直言不讳地向内维尔传递信息

领创体育君
2026-08-20 21:36:35
还没结束!阿森纳压哨豪购!阿尔特塔锁定四大顶级巨星

还没结束!阿森纳压哨豪购!阿尔特塔锁定四大顶级巨星

澜归序
2026-08-21 08:06:51
一个业余天文爱好者,靠谷歌地图发现了一个3.9亿年前的陨石坑

一个业余天文爱好者,靠谷歌地图发现了一个3.9亿年前的陨石坑

NASA爱好者
2026-07-29 01:30:05
上海突然出台楼市新政,可能是在给全国打样

上海突然出台楼市新政,可能是在给全国打样

拾榴询财
2026-08-20 17:09:15
王健林这辈子最失败、也最后悔的投资,恐怕就是分别给了王思聪、张艺谋和董明珠每人5个亿

王健林这辈子最失败、也最后悔的投资,恐怕就是分别给了王思聪、张艺谋和董明珠每人5个亿

谈史论今1
2026-08-16 20:23:49
“像女生器官,不许摆在桌子上!”小仙女怒怼男同学,令人生理不适

“像女生器官,不许摆在桌子上!”小仙女怒怼男同学,令人生理不适

妍妍教育日记
2026-08-08 11:25:10
奥运冠军刘虹发文宣布退役:人真正舍不得的,往往不是过去,而是那些没有发生的人生

奥运冠军刘虹发文宣布退役:人真正舍不得的,往往不是过去,而是那些没有发生的人生

极目新闻
2026-08-20 18:13:39
2026-08-21 08:19:00
IT之家
IT之家
爱科技,爱这里 - 前沿科技人气平台
361795文章数 607454关注度
往期回顾 全部

科技要闻

快手Q2研发狂烧45亿:如何面对双面夹击

头条要闻

很多人用过他的表情包 千万粉丝博主宣布退网一段时间

头条要闻

很多人用过他的表情包 千万粉丝博主宣布退网一段时间

体育要闻

46岁小罗抵达意大利 将为拉文纳征战意丙

娱乐要闻

任重晒全家福官宣二胎喜讯

财经要闻

许家印被判处无期 恒大集团被罚88.2亿

汽车要闻

比总部还大?比亚迪藏在上海虹桥的巨无霸闪充站!

态度原创

本地
游戏
家居
旅游
公开课

本地新闻

先导片|攀登不止,让不同的故事在此连接

《星际:异端先知》开发太久 规模过大或需大砍内容

家居要闻

2026建博会(广州) 公装联探展交流活动

旅游要闻

【烟火人间】胡同与海子

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版