网易首页 > 网易号 > 正文 申请入驻

刚刚!闭卷60分开卷82.9分,HLE-Diamond测试戳破AI末日论

0
分享至

9 月 22 日,AI 安全中心(Center for AI Safety)和 Scale AI 发布 HLE-Diamond(人类最终考试·钻石版)。

这是从"人类最终考试"(Humanity's Last Exam, HLE)题库中精炼出的一个子集。

这套题库打磨了一年,共包含 1000 道精华题。

题目设计为闭卷可答,一半考推理,一半考专家级知识。


HLE是由 Center for AI Safety 和 Scale AI 联合推出的超高难度基准测试,于 2025 年初发布。

它面向全球各领域专家征集了约 3000 道题目,覆盖数学、物理、化学、生物、医学、法律、人文等上百个学科,题目前沿且小众,旨在成为"人类最后一批还能难住 AI 的考题"。

也就是说,当 AI 能在这套题上拿高分,就意味着在专家级任务上追平了人类。因此 HLE 如今被视为衡量前沿模型真实能力上限的标尺。

HLE-Diamond 就是目前最难、也最干净的一套 AI 测验。它不仅花了一年时间打磨,还联合研究社区进行了众包质检。

目前已上架 Hugging Face:cais/hle-diamond。

这次“ AI 高考”的结果如下:

排名

模型

得分

GPT-6 Astra

60.6%

Claude Opus 5.5

55.0%

Claude Fable 5.1

51.3%

4

Claude Opus 5

38.6%

5

Gemini 3.8 Flash

34.3%

6

GPT-6 Sol

33.8%

7

GPT-5.6 Sol

31.2%

8

Muse Spark 1.3

25.4%

9

Grok 4.7

23.4%

全场第一名,刚刚过及格线,60.6 分。

60 分这个数字,既是里程碑,更是清醒剂。

最近 Anthropic 、马斯克、山姆奥特曼都在传播“AI 末日论”,要“放缓前沿 AI 研”,但实际上,AI 赶人类的路还长着呢。

把成绩单拆成两半看,事情就更有意思了。

模型

推理题

知识题

GPT-6 Astra

75.6%

45.6%

Claude Opus 5.5

63.2%

46.8%

Claude Fable 5.1

62.0%

40.6%

发现没有?几乎所有模型都是推理分,明显高于知识分。也就是说,现在的 AI 思维很猛,但"肚里的墨水"还不够。

给它一个数学逻辑题,它能给你拆得明明白白;问它一个冷门的专业领域知识,它就开始一本正经地胡说八道。

这也给行业提了个醒,光靠强化学习把"推理链"练得再长,但expert knowledge(专家知识)的积累,依然是硬骨头。

如果说上面的成绩是"裸考",那接下来的操作就是——允许带工具(联网搜索 + 写代码跑程序)。

结果画风突变。

模型

裸考

带工具

GPT-6 Astra

60.6%

82.9%

Claude Opus 5.5

55.0%

73.9%

Claude Fable 5.1

51.3%

72.4%

Claude Opus 5

38.6%

69.1%

Gemini 3.8 Flash

34.3%

60.3%

平均暴涨 20 多个百分点,最强者直接冲破 80 分。

这组对比其实也点出了 2026 年 AI 竞赛的真正赛点。

模型本身的"裸实力"是一回事,会不会调用工具、会不会当 agent(智能体)干活,完全是另一回事。

一个会自己查资料、自己跑代码的 AI,战斗力是裸奔状态的数倍。

AI 的"大脑"还没装满,但"手脚"已经越来越麻利了。

但是只有当某一天,AI 在这张卷子上裸考也能拿高分,那可能才是真正的"奇点临近"。

(数据来源:Center for AI Safety & Scale AI,2026.09.22所有模型均在 reasoning high 模式下评估)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
刘亦菲3年没戏拍!爆「不降5000万片酬」吓退一堆剧组 4代言也泡汤

刘亦菲3年没戏拍!爆「不降5000万片酬」吓退一堆剧组 4代言也泡汤

ETtoday星光云
2026-10-07 15:39:22
温瑞博2-3莫雷加德!国乒1男4女晋级单打八强,女双四强占三席

温瑞博2-3莫雷加德!国乒1男4女晋级单打八强,女双四强占三席

叮咚体坛
2026-10-08 22:16:18
“减肥神药”司美格鲁肽被提示能够抗衰老,晚年干预仍可显著延长寿命

“减肥神药”司美格鲁肽被提示能够抗衰老,晚年干预仍可显著延长寿命

医脉通
2026-10-07 12:05:10
青岛市市南区政府党组成员、副区长张志栋接受纪律审查和监察调查

青岛市市南区政府党组成员、副区长张志栋接受纪律审查和监察调查

天下泉城
2026-10-08 16:37:32
打虎!张硕辅被查

打虎!张硕辅被查

农民日报
2026-10-08 16:22:55
罗马里奥:热苏斯没兑现承诺,若我是C罗我会骂他“去死吧”

罗马里奥:热苏斯没兑现承诺,若我是C罗我会骂他“去死吧”

懂球帝
2026-10-08 16:58:14
汕头万象城突发火灾,微型消防站人员自行扑灭!无人员伤亡

汕头万象城突发火灾,微型消防站人员自行扑灭!无人员伤亡

南方都市报
2026-10-08 21:44:08
普京终于松口?中俄天然气管道不仅绕开蒙古,价格更只有欧美一半

普京终于松口?中俄天然气管道不仅绕开蒙古,价格更只有欧美一半

晓徙娱乐
2026-10-08 12:17:20
江淮汽车股价跌停,投资者关系部门回应尊界V800测试称“出厂前都有品控流程”

江淮汽车股价跌停,投资者关系部门回应尊界V800测试称“出厂前都有品控流程”

IT之家
2026-10-08 15:44:16
乌克兰抓住把柄,英媒爆料韩国竟秘密向俄罗斯运送万吨燃料

乌克兰抓住把柄,英媒爆料韩国竟秘密向俄罗斯运送万吨燃料

小兰聊历史
2026-10-08 12:03:44
随着A勒布伦0-3,WTT中国大满贯男单8强已诞生5席:2大前十悍将在列

随着A勒布伦0-3,WTT中国大满贯男单8强已诞生5席:2大前十悍将在列

俯身冲顶
2026-10-08 19:12:39
十万中国警察压向缅甸边境:滥杀我同胞,缅甸管不了,中国自己管

十万中国警察压向缅甸边境:滥杀我同胞,缅甸管不了,中国自己管

阿銍武器装备科普
2026-10-07 19:15:51
突然反转?高盛大摩花旗瑞银野村罕见一致:2027 年,中国房价大涨

突然反转?高盛大摩花旗瑞银野村罕见一致:2027 年,中国房价大涨

专业聊房君
2026-10-08 17:04:45
莫兰特+利拉德被教练点名批评!杨瀚森反而被夸:用正确方式打球

莫兰特+利拉德被教练点名批评!杨瀚森反而被夸:用正确方式打球

爱体育
2026-10-08 22:35:18
随着陈熠1-3,WTT中国大满贯女单8强已诞生5席:3大前十悍将在列

随着陈熠1-3,WTT中国大满贯女单8强已诞生5席:3大前十悍将在列

侧身凌空斩
2026-10-08 18:48:17
今日14时29分,江津正式进入……

今日14时29分,江津正式进入……

江津融媒
2026-10-08 12:18:39
47岁吴建豪暴瘦认不出!180只剩百斤,尖嘴猴腮像老头,健康引担忧

47岁吴建豪暴瘦认不出!180只剩百斤,尖嘴猴腮像老头,健康引担忧

八星人
2026-10-06 16:13:30
黄仁勋签了女粉丝的胸,更炸裂的来了!

黄仁勋签了女粉丝的胸,更炸裂的来了!

互联网品牌官
2026-10-08 15:08:44
大闹航班的欧某某最新进展:企业迟迟不敢认领,背后的现实太扎心

大闹航班的欧某某最新进展:企业迟迟不敢认领,背后的现实太扎心

一盅情怀
2026-10-08 13:13:12
凌晨于北京离世?同时交往8个男友?75岁刘晓庆私生活谣言多离谱

凌晨于北京离世?同时交往8个男友?75岁刘晓庆私生活谣言多离谱

林轻吟
2026-10-08 09:37:18
2026-10-08 23:31:00
AI先锋官 incentive-icons
AI先锋官
AIGC大模型及应用精选与评测
706文章数 108关注度
往期回顾 全部

科技要闻

江淮汽车回应"尊界V800刹车踏板支架断裂"

头条要闻

女局长被举报婚内出轨至少9人 大量亲密聊天记录公布

头条要闻

女局长被举报婚内出轨至少9人 大量亲密聊天记录公布

体育要闻

梅西社媒发文告别国家队 C罗点赞留言:致敬 拥抱

娱乐要闻

演员王晓慧刚担女主,就被曝已婚生子

财经要闻

央行:中国从不搞竞争性货币贬值

汽车要闻

特别版配色/碳纤尾翼 2027款深蓝L06将于10月9日上市

态度原创

教育
数码
时尚
旅游
军事航空

教育要闻

取消中考!多地开启12年贯通试点!山东家长需理性看待

数码要闻

亚马逊推出Kids Tablet系列平板,首度支持Google Play商店

复古灯芯绒,居然还能这么潮!

旅游要闻

全世界都知道中国人放假了:冰岛热度翻倍,老外也学会错峰了

军事要闻

美日将在距台仅110公里处演习

无障碍浏览 进入关怀版