网易首页 > 网易号 > 正文 申请入驻

AI考卷被刷穿,下一关居然要考发明

0
分享至

刚刚过去的这几天,科技圈最热闹的话题,莫过于一群"出题人"被逼着连夜改写考卷了。

这份考卷,叫ARC-AGI,是业界公认最能检验AI"是不是真的聪明"的一套测试。它考的既不是背题,也不是算数,而是让AI面对从没见过的小图形,现场猜出规律、举一反三。过去几年,别说考满分,很多顶尖模型连及格都费劲。

可一切在9月3号那天变了。

一觉醒来,AI从"半瓶水"考到"天花板"

OpenAI在9月3日发布了新一代旗舰模型GPT-6 Astra。它在ARC-AGI-3这套半私有测试集上,一口气拿到了99.9%的成绩。用OpenAI内部的话说,模型在这个维度上已经"完全饱和"了。


这个数字意味着什么?放到更早的版本里看就很直观——同一类测试,此前很多模型的成绩还是个位数。从"几乎不会"到"接近满分",这种跳跃被不少人形容成跨越式巨变,而不是普通的进步。


OpenAI联合创始人兼总裁格雷格·布罗克曼随即公开喊话:"欢迎来到AGI时代"。英伟达CEO黄仁勋也跳出来,抢先替行业宣布"AGI已经到来"。

一时间,"AGI实现了"的呼声铺天盖地。

掌声背后,藏着两个扎心的细节

不过,狂欢之余,有心人很快发现了两个疑点。

第一个疑点是分数本身。99.9%听着吓人,可它是在OpenAI定制的测试环境下跑出来的。一旦换成ARC Prize官方那套中立的统一接口,同一个模型、同一批题,成绩直接掉到62.7%,差了37个百分点。也就是说,换个考场,这份"满分答卷"立马打了六折。


第二个疑点更有意思。就在几天前,OpenAI首席执行官山姆·奥尔特曼还公开表示,AGI本质上就是个"营销术语"。同一个公司,一边说AGI是营销话术,一边高调宣布进入AGI时代,这让围观群众多少有点错愕。


更耐人寻味的是,黄仁勋的高调宣布也被不少分析视为醉翁之意不在酒——有人指出,这背后藏着推动算力需求、铺垫未来数十万颗GPU销量的现实考量。

出题人坐不住了:考卷得重做

平心而论,不管各方怎么吵,99.9%的成绩确实把AI的"刷题"能力推到了一个新的高度。而这就直接逼出了另一个尴尬问题:考卷,可能出不下去了。

因为ARC这套题原本的设计思路,就是靠"让AI面对从未见过的难题"来拉开人机差距。结果AI把分数刷到接近满分,原来的题海对模型来说已经失去了筛选意义。ARC Prize方面的原定测试方案,也随之被全盘作废,需要重新拟题。


就在今天(9月16日),ARC Prize创始人弗朗索瓦·肖莱正式披露了下一代评测蓝图:

ARC-AGI-4确认将在明年第一季度如期登场,方向聚焦更长时间尺度下的"持续学习";

而真正被称作"人类最后考卷"的ARC-AGI-5,已经全面提上日程。

下一关,考发明

这版"人类最后考卷"考什么?答案是:发明。

按目前的规划,ARC-AGI-5瞄准的"发明",很可能是想提前找到一道更难被刷穿的考题——它不再只是让AI解别人出的题,而是要让AI走出预设的解法套路,去创造出能被验证、能被反复使用的新东西。

换句话说,过去考的是"解题能力",下一关可能要考"造物能力"了。

这个方向看起来确实比单纯刷分难上不少。但问题也随之而来:这道"发明题"能守住多久,谁都说不准。

"考无可考",或许已不是玩笑

回过头看,围绕AGI的争论其实从未停歇。模型公司在晒跑分时闭口不谈定义,芯片巨头忙着宣布"时代到来",评测机构则死守"必须在标准条件下解题才算数"的底线,还有大厂按合同条款各算各的。各方口中的AGI,各说各话,至今没有一个公认的统一标准。

而当AI连"发明"这种开放性考题都要被拿来验证,甚至可能再次被超越时,那句曾经带着玩笑意味的"考无可考",恐怕就要从感慨变成AGI讨论里绕不开的真问题了。

AI还在加速狂奔。只是不知道,下一次面对新考卷的,到底会是谁先交卷——是模型,还是已经快出不动题的我们。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
世体:自执掌巴萨帅印以来,弗里克就将佩德里的负荷管理视为关键

世体:自执掌巴萨帅印以来,弗里克就将佩德里的负荷管理视为关键

云隐南山
2026-09-19 13:49:02
民调:76%俄公民认为,在即将到来的选举中,统一俄罗斯党将获胜

民调:76%俄公民认为,在即将到来的选举中,统一俄罗斯党将获胜

冰语历史
2026-09-18 16:10:41
家中10样东西,过期1天也要扔!第一名家家都有,毒性最大

家中10样东西,过期1天也要扔!第一名家家都有,毒性最大

健康之光
2026-09-11 17:50:48
西甲前瞻丨塞维利亚VS巴塞罗那:后防大腿伤了,巴萨放走一人后悔否

西甲前瞻丨塞维利亚VS巴塞罗那:后防大腿伤了,巴萨放走一人后悔否

体育世界
2026-09-19 13:29:10
入院ICU后佘诗曼周家蔚集体沉默,探望的汤盈盈只求别给压力

入院ICU后佘诗曼周家蔚集体沉默,探望的汤盈盈只求别给压力

阿废冷眼观察所
2026-09-19 05:03:10
行政长官岑浩辉与河北省政协主席张国华会面

行政长官岑浩辉与河北省政协主席张国华会面

娱乐的宅急便
2026-09-19 02:40:28
中国男篮为何惨败?媒体人热议:全方面崩溃,没成绩更没精气神

中国男篮为何惨败?媒体人热议:全方面崩溃,没成绩更没精气神

奥拜尔
2026-09-18 20:23:08
柏林选举前最后民调:左翼党微弱领先,基民盟重燃希望

柏林选举前最后民调:左翼党微弱领先,基民盟重燃希望

阿尔卑斯瞭望
2026-09-19 13:44:54
葡萄牙主帅热苏斯:C罗和其他球员一样,如果状态好就会上场

葡萄牙主帅热苏斯:C罗和其他球员一样,如果状态好就会上场

懂球帝
2026-09-18 22:57:21
女人如有这6个信号:大胆拥抱她,100%她不会推开你

女人如有这6个信号:大胆拥抱她,100%她不会推开你

娱乐洞察点点
2026-09-19 13:26:27
戴安娜弟弟翻车!为复仇,搬出了英女王和自己亲爹的旧事,网友不满其言论而力挺查尔斯国王,当年真正痛苦的人其实是她!

戴安娜弟弟翻车!为复仇,搬出了英女王和自己亲爹的旧事,网友不满其言论而力挺查尔斯国王,当年真正痛苦的人其实是她!

书酱瞄瞄
2026-09-19 00:12:07
比赛还没开打,皇马先迎一个好消息,雪中送炭,取胜马竞概率大增

比赛还没开打,皇马先迎一个好消息,雪中送炭,取胜马竞概率大增

零度眼看球
2026-09-19 09:24:49
中国篮协不如足协!未道歉+主帅没下课 董路:一棵树结不出两种果子

中国篮协不如足协!未道歉+主帅没下课 董路:一棵树结不出两种果子

念洲
2026-09-19 13:36:49
A股:刚刚,重磅消息传来,释放三强烈信号!下周将迎来更大转变

A股:刚刚,重磅消息传来,释放三强烈信号!下周将迎来更大转变

虎哥闲聊
2026-09-19 00:01:52
韩国生育率彻底爆发,打脸了全球人口学家。

韩国生育率彻底爆发,打脸了全球人口学家。

流苏晚晴
2026-07-12 19:08:14
中超疯狂夜!积分榜乱了:三镇惨败,浙江成功上岸,四队只差2分

中超疯狂夜!积分榜乱了:三镇惨败,浙江成功上岸,四队只差2分

刘哥谈体育
2026-09-19 13:01:31
来势汹汹,两国兵力抵达日本,加速包围中国,朝鲜导弹飞向日本海

来势汹汹,两国兵力抵达日本,加速包围中国,朝鲜导弹飞向日本海

近史谈
2026-09-17 18:07:53
李乃文逛重庆手机旗舰店,看中三折叠屏,上手一试直接全款买了

李乃文逛重庆手机旗舰店,看中三折叠屏,上手一试直接全款买了

天马幸福的人生
2026-09-16 14:11:50
全国首个,深圳万亿级大规划来了!深圳超1800万人即将全网率先大爆发!

全国首个,深圳万亿级大规划来了!深圳超1800万人即将全网率先大爆发!

深圳梦
2026-09-19 00:18:58
31岁医学女博士辞去医生工作,送外卖、做驻唱:想试试生活有多少种可能

31岁医学女博士辞去医生工作,送外卖、做驻唱:想试试生活有多少种可能

扬子晚报
2026-09-17 20:39:38
2026-09-19 14:55:00
中科智媒
中科智媒
聚焦新闻前沿,每日热点速递
1022文章数 11817关注度
往期回顾 全部

科技要闻

要走650亿,智谱的理想越来越贵

头条要闻

媒体:菲有人在"918"招惹中国 等待他们的不会是好果子

头条要闻

媒体:菲有人在"918"招惹中国 等待他们的不会是好果子

体育要闻

好吧,中国男篮辛苦了

娱乐要闻

蔡卓妍小腹凸起疑怀孕?本人没回应

财经要闻

江西首富破产:一张927万商票压垮千亿帝国

汽车要闻

纯电/插混双动力+五座/六座双布局 海狮08应该怎么选?

态度原创

旅游
教育
艺术
数码
军事航空

旅游要闻

周励:马特洪峰纪行

教育要闻

作文写作是自由的!

艺术要闻

27幅 著名油画家 冯法祀油画选

数码要闻

单手也能打游戏!开源分体键盘Tiwaz亮相:自带拇指摇杆

军事要闻

特朗普再称对伊朗战争将很快结束

无障碍浏览 进入关怀版