网易首页 > 网易号 > 正文 申请入驻

GPT-6 Astra上真机,RoboChallenge这次跑出了新东西

0
分享至


两项任务成功率达100%。

作者 | 周加琦

编辑 | 漠影

VLA一直是具身智能领域主流的技术路线之一。

它的逻辑是:给模型输入图像、语言指令,再利用大规模机器人示范数据训练模型直接预测动作。随着机器人数据规模的扩大,VLA可以完成抓取、整理等复杂的真实操作任务。

同时,通用大模型在多模态理解、空间推理和复杂任务规划能力的也在持续提升,一个新的问题随之出现:如果利用它这些已有能力,不用VLA模型,能不能参与并完成机器人的真实操作?

近日,原力灵机做了一次这样的实验。

该团队将GPT-6 Astra接入真机评测平台RoboChallenge Table30 V2,在Aloha、DOS-W1、ARX5和UR5四种机器人本体上分别测试四项真实操作任务。

从最终结果来看,四项任务中,GPT-6 Astra有两项成功率达到100%。

在真实执行的过程中,通用大模型不只是单纯地“输出动作”,而是会试探环境、理解操作结果、发现异常并修正。


01.

从屏幕走向真机,

原力灵机搭建真实评测闭环

验证通用大模型能不能真正参与机器人操作,光看模型在视觉理解、空间推理等Benchmark上的成绩不够。

机器人一旦进入真实环境,面对的不只是“看懂一张图”、“规划一个任务”。相机视角会变,目标可能被遮挡,抓取可能失败。所以,模型不仅要知道下一步该如何做,还要根据真实执行结果不断重新判断当前状态。

因此,原力灵机团队选择直接上真机测试。

此次测试使用的是RoboChallenge中的Table30 V2真机Benchmark。RoboChallenge由原力灵机联合Hugging Face发起,希望通过统一的真实机器人环境,对不同模型的操作能力进行测试。

Table30 V2共包含30个真实世界操作任务,覆盖双臂DOS-W1、Aloha和单臂ARX5、UR5四种机型,涉及物体整理、装箱、工具使用和双臂协作等任务。

与仿真环境测试不同,RoboChallenge让参评模型直接连接真实机器人。测试中,平台通过远程API与用户部署的模型推理服务交互,模型持续获取机器人图像和状态,生成动作并下发执行。

一次动作执行结束后,模型还会重新获取机器人图像和状态,并据此决定下一步如何操作。这样,模型面对的不是固定的输入,而是一个会因为自身动作不断变化的真实物理环境。

该团队在四种机器人本体上各选择了一项任务。其中Aloha完成“盖章定位”,需要一只机械臂固定纸张,另一只机械臂拿起印章、蘸取印泥并完成盖章;DOS-W1执行“叠碗”,按顺序将不同颜色的碗套叠起来。

ARX5完成“寻找绿块”,需要从场景中找到两个绿色方块,并依次放入指定篮子;UR5则操作“碎纸”,抓取纸张并送入碎纸机完成碎纸。四项任务分别涉及双臂协作、物体关系判断、目标搜索和工具使用等不同操作能力。


每项任务进行10次真机Rollout,按照平台记录的状态和步骤分,统计最终成功率与得分。

02.

四项真机测试,两项任务成功率达100%

四项任务中,GPT-6 Astra在“叠碗”和“寻找绿块”任务中的成功率均达到100%,“盖章定位”和“碎纸”任务成功率分别为80%、70%。

在RoboChallenge Table30 V2公开运行记录中,后两个任务的最高成功率均为50%,而GPT-6 Astra在这两项任务上的成功率分别高出30%和20%。


不过,成功率并不等于执行过程更优。GPT-6 Astra在“叠碗”、“寻找绿块”和“碎纸”上的得分均低于对应公开最高分。例如碎纸任务中,机器人虽然最终完成任务,但部分执行曾误夹起支架并因此被扣分;叠碗过程中也出现过多次重试。

当然,这也反映出GPT-6 Astra并不是“一次做对”,而是依靠持续观察和调整,把已经出现偏差的任务继续做完。

03.

不只执行动作,

GPT-6 Astra还会根据结果动态调整

首先,GPT-6 Astra会通过实际动作不断补全对空间关系的理解。

在UR5碎纸任务中,该团队并没有向GPT-6 Astra提供显式的相机标定信息。模型一开始并不知道机械臂沿某个方向移动后,在不同相机画面中会产生怎样的变化。

实际执行时,Astra会先做几个小幅试探动作,再对比动作前后的图像变化,逐步判断机械臂的运动方向,以及夹爪与目标之间的相对位置。也就是说,它不是依赖预先给定的空间映射,而是在操作过程中,通过“动作—观察—再判断”建立局部的视觉与运动对应关系。


除了补全空间关系,Astra也会根据场景变化调整原来的操作顺序。

在“寻找绿块”任务中,当绿色目标受到其他方块遮挡时,模型不会持续重复原来的抓取动作,而是先处理遮挡物。测试中,Astra会先夹走紫方块,等第二个绿色方块暴露后,再调整夹爪位置,重新接近目标。


当动作本身出现偏差时,模型还会根据新的结果进行调整。

同样是在“寻找绿块”任务中,Astra一次抬起夹爪后发现绿色方块仍留在桌面,说明此前抓取并未成功。随后,模型重新张开夹爪、降低抓取位置并再次对准,直到确认方块已经离开桌面,再将其放入篮中。

UR5碎纸任务中也出现了类似情况。由于缺少侧面视角,机器人有时会把纸张下方的支架一起夹起。Astra在重新观察画面后识别出这一偏差,随后放下支架、重新调整位置,再次抓取纸张。


在双臂任务中,Astra还会借助参考信息组织多步骤动作,同时处理示例之外的变化。

原力灵机团队发现,在完全不提供示例的情况下,双臂任务对Astra较为困难,因此在“盖章”和“叠碗”任务中加入了RoboChallenge提供的参考轨迹作为上下文。

这些参考轨迹主要帮助模型理解两只机械臂如何分工、什么时候交替操作。但真实执行中仍会出现参考轨迹之外的情况。例如盖章过程中,印章可能意外脱离夹爪,Astra需要重新抓取;叠碗时,模型也需要在保留已有堆叠结果的情况下,重新尝试后续操作。



参考轨迹更像是在给模型一个任务组织框架,面对实际执行中的新情况,Astra仍然需要根据当前状态继续调整。

综合来看,GPT-6 Astra此次在真机上的特点主要体现在可持续判断当前状态,并根据执行结果调整下一步。

相比VLA模型,这次测试中的通用大模型更多承担了任务理解、状态判断和异常处理的角色。不过,在操作效率、稳定性和动作精度上,它仍有明显提升空间。

04.

结语:通用大模型

正在降低机器人智能的门槛

过去,机器人要获得复杂任务理解和决策能力,往往需要围绕特定本体、特定任务持续积累数据并训练策略。通用大模型的发展,则提供了另一种路径:部分更高层的理解和决策能力,可以直接从通用模型中获得。

这意味着,具身智能系统不必从零开始构建所有能力。随着通用模型能力继续增强,机器人模型可以把更多精力放在精确控制、稳定执行和效率优化上。

对行业来说,这可能会降低机器人获得更高阶智能能力的门槛,也让更多本体和应用能够站在通用模型提供的基础能力之上继续开发。

原力灵机这次测试提供了一个真机层面的验证:通用大模型正在从“会理解”进一步走向“能参与操作”,具身智能的技术边界也有了新的拓展空间。



特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
都已经遥遥领先了,凭什么还要消费者给时间?

都已经遥遥领先了,凭什么还要消费者给时间?

迷世书童
2026-10-12 00:05:17
发现一个残忍真相:极度自律,每天锻炼的人,不一定能长寿,但是,极度自私,不为任何人、任何事操心的人可能长寿

发现一个残忍真相:极度自律,每天锻炼的人,不一定能长寿,但是,极度自私,不为任何人、任何事操心的人可能长寿

品读时刻
2026-09-18 09:08:45
谁踩刹车每分钟20毫米?尊界V800最新检测报告引争议,懂车帝继续硬刚,测的不是一回事

谁踩刹车每分钟20毫米?尊界V800最新检测报告引争议,懂车帝继续硬刚,测的不是一回事

王新喜
2026-10-14 09:58:21
当不成巴西总统?博索纳罗对华表态激起千层浪,头号敌人还有底牌

当不成巴西总统?博索纳罗对华表态激起千层浪,头号敌人还有底牌

史行途
2026-10-14 01:38:57
一个贪财一个好色!三婚娶小37岁徒弟,81生女84生儿,现活成这样

一个贪财一个好色!三婚娶小37岁徒弟,81生女84生儿,现活成这样

兵卒史
2026-10-13 00:43:48
国家未出一分钱,为何农村私人祖传宅基地成了村集体的呢

国家未出一分钱,为何农村私人祖传宅基地成了村集体的呢

游文刀
2026-10-12 01:25:48
A股三大指数集体低开,上证指数跌0.27%,创业板指跌0.52%

A股三大指数集体低开,上证指数跌0.27%,创业板指跌0.52%

每日经济新闻
2026-10-14 09:34:48
30万斤堆积如山,树上6万斤无人问津,低价卖不动,农民满心无奈

30万斤堆积如山,树上6万斤无人问津,低价卖不动,农民满心无奈

三农雷哥
2026-09-05 12:16:13
Goal:莫德里奇点燃英冠球队冲超梦想,斯旺西向着英超全力进发

Goal:莫德里奇点燃英冠球队冲超梦想,斯旺西向着英超全力进发

懂球帝
2026-10-13 20:30:32
“没有北约宣传”引众怒,荷兰议会激烈内讧,议员公开痛骂国防大臣言论荒唐至极

“没有北约宣传”引众怒,荷兰议会激烈内讧,议员公开痛骂国防大臣言论荒唐至极

阿天爱旅行
2026-10-14 11:11:44
“江苏体制内独女炫耀视频”火了,同龄人被惹怒:你装什么装呢

“江苏体制内独女炫耀视频”火了,同龄人被惹怒:你装什么装呢

熙熙说教
2026-10-13 16:37:07
女博主曝光嫁给黑人的堂姐近况:吵架不说,还被暴打,告诫大家外国的月亮不一定更圆

女博主曝光嫁给黑人的堂姐近况:吵架不说,还被暴打,告诫大家外国的月亮不一定更圆

小徐讲八卦
2026-10-12 11:02:05
给团长当8年警卫,退伍时团长却避而不见,临走行李里发现绝密档案

给团长当8年警卫,退伍时团长却避而不见,临走行李里发现绝密档案

萧竹轻语
2025-09-09 19:21:59
普京要动真格了!一旦苏洛维金重掌兵权,对乌克兰将是一场灾难

普京要动真格了!一旦苏洛维金重掌兵权,对乌克兰将是一场灾难

近史谈
2026-10-13 18:52:20
章泽天在斯坦福学习,认真做笔记与同学讨论,持续深耕不断提升

章泽天在斯坦福学习,认真做笔记与同学讨论,持续深耕不断提升

记录天下风云
2026-10-14 02:27:09
国际顶尖医学科学家、院士李仁科去世!为全球该领域位列第一的科学家

国际顶尖医学科学家、院士李仁科去世!为全球该领域位列第一的科学家

梅斯医学
2026-10-14 12:50:13
董卿丈夫传来新消息!二人经济状况曝光,往后日子不容易。

董卿丈夫传来新消息!二人经济状况曝光,往后日子不容易。

萧狡科普解说
2026-10-14 10:40:26
31岁新疆演员古力娜扎,一个月宅家到情绪崩溃,第一通求助电话打给杨迪?

31岁新疆演员古力娜扎,一个月宅家到情绪崩溃,第一通求助电话打给杨迪?

动物奇奇怪怪
2026-10-14 11:28:40
真正害苦老百姓的不是地痞无赖,而是吃透规则的精英人群

真正害苦老百姓的不是地痞无赖,而是吃透规则的精英人群

游文刀
2026-10-13 12:33:35
顺风车乘客:想坐奥迪。顺风车主:想坐奥迪没问题啊,补点高速费,独享送你一人回家过节,连车费带高速费给到118。乘客:抢哦!!!

顺风车乘客:想坐奥迪。顺风车主:想坐奥迪没问题啊,补点高速费,独享送你一人回家过节,连车费带高速费给到118。乘客:抢哦!!!

呼呼历史论
2026-10-12 12:03:36
2026-10-14 13:27:00
机器人前瞻
机器人前瞻
智东西AI媒体矩阵品牌。机器人前瞻,机器人产业新媒体,专注报道全球机器人创新。
973文章数 19关注度
往期回顾 全部

科技要闻

两大厂接连挖人,明星AI公司申请破产保护

头条要闻

牛弹琴:美国果然釜底抽薪了 特朗普180度大转弯

头条要闻

牛弹琴:美国果然釜底抽薪了 特朗普180度大转弯

体育要闻

30天30队·太阳:金毛、比特、杜宾和二哈

娱乐要闻

蔡卓妍回应张致恒欠钱不还 不指望还钱

财经要闻

AI短剧正在毁掉中年男人?

汽车要闻

豪华智能全拉满 比亚迪大汉不止旗舰级舒适

态度原创

家居
本地
时尚
艺术
数码

家居要闻

2026建博会(广州) 公装联探展交流活动

本地新闻

这个十一,林都伊春彻底出圈!

战鹰:一个天才少女的「滑落」

艺术要闻

超高清到犯规!奥地利女画家玛丽的印象派抒情风景,美到窒息,看一眼就想住进画里!

数码要闻

三大CPU巨头集体涨价!Intel、AMD、高通最高涨20%:幕后推手竟是台积电

无障碍浏览 进入关怀版