网易首页 > 网易号 > 正文 申请入驻

RoboChallenge测评:π0、π0.5领先,自变量WALL-OSS-Flow零成功率引关注

0
分享至

在具身智能竞速加速升温的当下,真实场景的客观评测成为检验机器人模型能力最关键的一环。

近日,“具身进化论”在查询最新发布的RoboChallenge测试结果时注意到,π0、π0.5 在成功率上遥遥领先其他开源模型。自变量机器人(X Square Robot)的大模型wall-oss-flow虽然在多次企业自我宣传中提到,“基本上和PI、和google在同一个水平线上”,但是在多个任务上成功率偏低。根据公开的测评记录,其在31次测试中大部分成功率为零,这一表现引发业内对其大模型真实能力的讨论。

RoboChallenge是全球首个具身智能的大规模真机评测平台,也是目前行业内最受关注的真实物理机器人评测平台,由Dexmal原力灵机联合Hugging Face发布,被视作“机器人界的硬核基准”。其最大特点是真机真测:评测同时接入UR5、Franka、Aloha 双臂系统以及国产ARX-5 四类主流机器人,统一软件栈并配备多台RGB-D深度相机,以确保任务在高度一致的物理条件下进行。

平台的任务覆盖柔性物体处理、双臂协作、多阶段顺序动作等真实世界的关键难点。其中Table30场景包含30个具有代表性的日常任务,包括叠抹布、整理果篮、插花、开关水龙头等,难度从基础操作递进到长链条组合动作。

据了解,RoboChallenge 之所以被认为更加客观,是因为其采用了 “任务成功率 + 进度评分”的双指标体系。前者统计任务是否完整成功,后者将任务拆解为多个关键阶段并按推进程度累计分值,即便任务未完成也能反映模型做到哪一步,为能力评估提供更细粒度的信息。

在该评测体系中,多款主流开源模型已完成测试。“具身进化论”对比发现,基于Physical Intelligence (Pi)系列构建的π0和π0.5是官方重点基线,它们在成功率与进度得分上整体领先其他开源模型,特别是π0.5,显示出更成熟的任务执行能力。



π0测试结果



π0.5测试结果

相比之下,自变量的wall-oss-flow 在相同条件下的表现明显偏弱。测评结果显示:wall-oss-flow共测试31次,其中2次成功率为60%,1次成功率为50%,1次成功率为20%,其余所有任务成功率均为0。



wall-oss-flow测试结果

“具身进化论”从进度分情况看到,模型虽然在部分任务中能完成初段动作,但多数情况下未能完成关键步骤,执行链条往往在中段被迫中断。这与平台强调的“多阶段连续操作能力”形成明显差距。

公开信息显示,自变量2023年成立,创始人兼CEO为王潜。今年9月,自变量发布其开源大模型WALL-OSS,自变量在官方宣传稿中强调该模型“具备强大的泛化性和推理能力,在长程操作任务方面表现优于其他基础模型”。

王潜甚至曾在接受媒体采访时表示:“我们(自变量)的模型水平基本上和PI、和google在同一个水平线上。”

但此次RoboChallenge 的评测结果显示,自变量模型的水平、能力在真实机器人执行任务时未能体现,与PI的模型(π0 和 π0.5)也存在明显差距。

一位具身智能从业者对“具身进化论”分析,RoboChallenge的独特价值正是在于提供透明、可复现的真机评估环境,避免主观展示带来的偏差。随着越来越多模型加入测评,业内对“模型真实能力差异”有了更清晰的认知。

对具身智能行业而言,此次结果再次提醒:真正的竞争不在PR宣传中,而在三方认可的评测,学术基准线,以及机器人能否稳定完成任务的那一刻。

真实世界,正在成为检验大模型能力的最终标准。而认识到差距,正是追赶的开始。

免责声明:该文章系我网转载,旨在为读者提供更多资讯。所涉内容不构成投资、消费建议,仅供读者参考。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
世界第2,中国第1!赵心童单赛季排名创纪录,连超4大世界冠军!

世界第2,中国第1!赵心童单赛季排名创纪录,连超4大世界冠军!

刘姚尧的文字城堡
2026-02-23 09:32:38
女子假信佛与多位高僧发生不当关系,秘密录制5600段视频。

女子假信佛与多位高僧发生不当关系,秘密录制5600段视频。

特约前排观众
2026-02-09 00:05:05
今年春节,已没人再进行同学聚会了。

今年春节,已没人再进行同学聚会了。

老陆不老
2026-02-22 20:05:28
A股:大家做好准备了,明天(2月24日),A股或将迎来大变盘?

A股:大家做好准备了,明天(2月24日),A股或将迎来大变盘?

财经大拿
2026-02-23 10:54:17
成都楼市惊现“烫手山芋”:当年抢破头的房子,如今白送都没人要?

成都楼市惊现“烫手山芋”:当年抢破头的房子,如今白送都没人要?

房探科技
2026-02-23 11:15:25
“沸腾”了,暴涨600点!重磅利好,直线飙涨

“沸腾”了,暴涨600点!重磅利好,直线飙涨

中国基金报
2026-02-23 12:43:29
8个月前AI就知道他要杀人!ChatGPT员工争论了很久,选择沉默… 最后8个生命消失在这座小镇....

8个月前AI就知道他要杀人!ChatGPT员工争论了很久,选择沉默… 最后8个生命消失在这座小镇....

英国那些事儿
2026-02-22 22:49:40
詹姆斯或创NBA降薪纪录!下赛季可能少赚4873万:从顶薪变底薪?

詹姆斯或创NBA降薪纪录!下赛季可能少赚4873万:从顶薪变底薪?

罗说NBA
2026-02-23 04:58:55
前乌军总司令扎卢日内爆出猛料,俄乌开战前夕,泽连斯基多次误判

前乌军总司令扎卢日内爆出猛料,俄乌开战前夕,泽连斯基多次误判

碳基生物关怀组织
2026-02-21 22:57:12
被年轻人“抛弃”的8个家居产物,时代要淘汰你,连招呼都不会打

被年轻人“抛弃”的8个家居产物,时代要淘汰你,连招呼都不会打

室内设计师有料儿
2026-02-18 21:17:06
中国三大长寿食物,鱼只能排到第三,第一名很多人想不到!

中国三大长寿食物,鱼只能排到第三,第一名很多人想不到!

江江食研社
2026-02-12 12:30:10
55岁央视一哥康辉,缺席春晚真相曝光,为什么他不再抛头露面?

55岁央视一哥康辉,缺席春晚真相曝光,为什么他不再抛头露面?

天天热点见闻
2026-02-23 05:22:26
Coco说她很怀念在香港的日子,很怀念和谢贤在一起的12年

Coco说她很怀念在香港的日子,很怀念和谢贤在一起的12年

西楼知趣杂谈
2026-02-19 21:09:49
五台山景区大火持续达7小时:官方回应伤亡情况,一画面信息量大

五台山景区大火持续达7小时:官方回应伤亡情况,一画面信息量大

博士观察
2026-02-22 16:44:15
马筱梅晒定制红包,把婆婆张兰放感谢第一位,汪大爷也来陪产

马筱梅晒定制红包,把婆婆张兰放感谢第一位,汪大爷也来陪产

离离言几许
2026-02-23 11:49:37
刚刚曝光!库里的个人专属 Logo 被印在了安踏球鞋上

刚刚曝光!库里的个人专属 Logo 被印在了安踏球鞋上

FLIGHTCLUB中文站
2026-02-23 11:48:43
黄晓明紧急发文警告前妻baby!秀恩爱请注意形象,别影响我的家庭

黄晓明紧急发文警告前妻baby!秀恩爱请注意形象,别影响我的家庭

八卦王者
2026-02-22 10:56:41
女人默许你“得手”从不主动靠近:这三种默许,已是最明确的信号

女人默许你“得手”从不主动靠近:这三种默许,已是最明确的信号

青苹果sht
2026-02-22 06:58:10
都在质疑是不是演的?看完小乩童下轿这30秒,评论区彻底安静了

都在质疑是不是演的?看完小乩童下轿这30秒,评论区彻底安静了

奇思妙想生活家
2026-02-22 12:38:41
李亚鹏年初六到陈光标家做客!为陈光标儿子送行,其妻子罕见露脸

李亚鹏年初六到陈光标家做客!为陈光标儿子送行,其妻子罕见露脸

无心小姐姐
2026-02-23 06:31:12
2026-02-23 15:11:00
人民在线 incentive-icons
人民在线
融合全球传媒理念
35879文章数 11620关注度
往期回顾 全部

科技要闻

腾讯字节,“火拼”漫剧

头条要闻

牛弹琴:特朗普输了后连锁反应来了 印度打脸特朗普

头条要闻

牛弹琴:特朗普输了后连锁反应来了 印度打脸特朗普

体育要闻

哈登版骑士首败:雷霆的冠军课

娱乐要闻

谷爱凌奶奶去世,谷爱凌泪奔

财经要闻

结婚五金迈入10万大关 年轻人结婚更难了

汽车要闻

续航1810km!smart精灵#6 EHD超级电混2026年上市

态度原创

游戏
本地
教育
时尚
公开课

童年回忆竟还在更新!《小羊肖恩》衍生游戏在线联机

本地新闻

春花齐放2026:《骏马奔腾迎新岁》

教育要闻

大动作:英国留学剧本大变!

今年春天一定要拥有的针织,这样穿减龄又好看!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版