网易首页 > 网易号 > 正文 申请入驻

新型AI基准测试“人类终极考试”揭示技术短板

0
分享至

非营利组织“人工智能安全中心”(CAIS)与数据标注和AI开发公司Scale AI联合推出了一项名为“人类终极考试”的新型基准测试,旨在评估前沿AI系统的综合能力。该测试因其极高的难度引起了广泛关注。

这一基准测试汇集了来自50个国家和地区的500多个机构的近1,000名学科专家提出的问题,涵盖数学、人文学科和自然科学等多个领域。题目形式多样,包括结合图表和图像的复杂题型,以全面考察AI系统在跨学科知识和多模态信息处理方面的能力。

初步研究结果显示,所有公开可用的旗舰AI系统在该测试中的回答准确率均未超过10%,表明尽管当前AI技术在特定领域取得显著进展,但在应对复杂综合性问题时仍存在明显短板。CAIS和Scale AI计划向研究社区开放这一基准测试,以促进更深入的研究和模型评估。

免责声明:本文内容由开放的智能模型自动生成,仅供参考。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
为什么人类会想到要遮挡生殖器?

为什么人类会想到要遮挡生殖器?

宇宙时空
2026-05-29 17:30:16
七年统治梦碎!乌克兰民众亲手选出的总统,却把乌克兰推向绝境?

七年统治梦碎!乌克兰民众亲手选出的总统,却把乌克兰推向绝境?

李摻穷游天下
2026-05-29 20:54:36
天赋新星接连伤停惹人疼!落后执教理念,正在消耗女排未来

天赋新星接连伤停惹人疼!落后执教理念,正在消耗女排未来

金毛爱女排
2026-05-31 00:00:04
正式官宣!国务院放大招:城里有房家庭都乐开花,不仅宜居还增值

正式官宣!国务院放大招:城里有房家庭都乐开花,不仅宜居还增值

羽逸地之光
2026-05-29 16:07:54
新格伦爆炸后首次航拍:核心设施几乎全毁

新格伦爆炸后首次航拍:核心设施几乎全毁

三体引力波
2026-05-30 19:01:47
61岁的王姬驾驭一身黑色礼服,这身材让年轻人都望尘莫及

61岁的王姬驾驭一身黑色礼服,这身材让年轻人都望尘莫及

大江
2026-05-24 12:20:25
少年打球得罪富二代,被砍断双手身亡,家长:给我砍,老子不差钱

少年打球得罪富二代,被砍断双手身亡,家长:给我砍,老子不差钱

就一点
2026-05-18 00:00:54
为28元外卖恶意投诉骑手,985女白领已被公司开除

为28元外卖恶意投诉骑手,985女白领已被公司开除

不写散文诗
2026-05-29 12:23:12
大胆点,其实90%的人都是很水的。

大胆点,其实90%的人都是很水的。

老陆不老
2026-05-29 20:35:12
陪玩陪睡根本不够!认干爹、舔手指,背地里的阴暗面完全藏不住了

陪玩陪睡根本不够!认干爹、舔手指,背地里的阴暗面完全藏不住了

杰丝聊古今
2026-05-03 13:35:27
法网爆大冷:女单10号种子出局,萨巴伦卡登场王曦雨冲击八强

法网爆大冷:女单10号种子出局,萨巴伦卡登场王曦雨冲击八强

寒律
2026-05-30 11:20:22
5千万挥霍一空后,沦落超市打工,不敢见人!马蓉现状太落魄

5千万挥霍一空后,沦落超市打工,不敢见人!马蓉现状太落魄

明天后天大后天
2026-05-13 11:56:55
伊朗这次情报太准了,美军开火3小时后,伊朗导弹突袭美空军基地

伊朗这次情报太准了,美军开火3小时后,伊朗导弹突袭美空军基地

可爱大王呼
2026-05-29 20:34:07
广东佛山这个“任性”的区,明明隶属于佛山市,却不说是佛山人?

广东佛山这个“任性”的区,明明隶属于佛山市,却不说是佛山人?

刘小顺
2026-05-30 12:28:03
《狂飙》高启强原型:从长沙菜场鱼贩到百亿黑老大,结局如何?

《狂飙》高启强原型:从长沙菜场鱼贩到百亿黑老大,结局如何?

南冥那只猫
2026-05-18 09:59:21
德拉罗萨以毒攻毒,公开嘲笑马科斯抓不到他:真主与我们同在!

德拉罗萨以毒攻毒,公开嘲笑马科斯抓不到他:真主与我们同在!

焦点集结号
2026-05-29 18:47:00
1994年彗星撞木星,威力高达6万亿吨TNT,为地球挡下一劫

1994年彗星撞木星,威力高达6万亿吨TNT,为地球挡下一劫

观察宇宙
2026-05-29 19:15:08
被问价3500万欧!罗马8球中场引英超两大豪门哄抢

被问价3500万欧!罗马8球中场引英超两大豪门哄抢

坠入温柔晚风
2026-05-31 00:04:05
很快Here we go,罗马诺:伊劳拉将成为利物浦下一任主帅

很快Here we go,罗马诺:伊劳拉将成为利物浦下一任主帅

懂球帝
2026-05-30 20:11:03
“一吨石油都别想进出伊朗港口” 对革命卫队意味着什么?

“一吨石油都别想进出伊朗港口” 对革命卫队意味着什么?

高博新视野
2026-05-30 18:47:42
2026-05-31 00:39:00
DoNews incentive-icons
DoNews
不局限于对互联网行业的追踪与探索,更要向未来、向未知的方向迈进。
107428文章数 26869关注度
往期回顾 全部

科技要闻

车圈大佬发声:价格战远去,但竞争仍残酷

头条要闻

两名9岁女孩被困电梯近2小时 求救几十次物业无动于衷

头条要闻

两名9岁女孩被困电梯近2小时 求救几十次物业无动于衷

体育要闻

岁月不饶人!39岁德约鏖战近5小时拼到呕吐

娱乐要闻

张碧晨《歌手》 “活人微死” 自嘲

财经要闻

双汇管不住一头猪

汽车要闻

900V+3.2秒破百 领克10+&领克10上市16.99万元起

态度原创

家居
旅游
亲子
房产
军事航空

家居要闻

云栖 舒展如流云

旅游要闻

六一带娃去哪玩?郑州又多了个好去处!

亲子要闻

打败食海锤头鲨这里的玩具随便我挑!疯狂动物园系列

房产要闻

红动五月!全国抢入核心资产,广州盯紧凯旋新世界!

军事要闻

美防长参加"香会" 就美中关系最新表态

无障碍浏览 进入关怀版