网易首页 > 网易号 > 正文 申请入驻

OpenAI发布权威AI科研基准,扯下AI遮羞布:奥赛金牌≠一流科学家!

0
分享至

新智元报道

编辑:艾伦

【新智元导读】OpenAI最新发布的FrontierScience基准,试图用真实的博士级难题,从物理、化学、生物三个维度上考验AI。真相是残酷的:在没有唯一标准答案的科研实战中,AI作为「顶级做题家」,距离真正的科学家,还差得远。

OpenAI在2025年12月16日发布了一套新基准FrontierScience,用来衡量AI在物理、化学、生物三门学科里,能否做到接近专家水准的科学推理,而不只是背知识点。

OpenAI在文中把科学工作描述成一套更接近「持续试错」的流程。

提出假设,设计验证,推翻再重来,还要把不同领域的线索拼成同一张图。

模型越强,问题就越尖锐,AI能不能把这种深推理用到真正的科研推进上。

OpenAI提到,过去一年他们的系统在国际数学奥林匹克和国际信息学奥林匹克上达到了金牌级表现,同时更重要的变化发生在实验室和办公室里。

研究者开始拿这些模型做跨学科文献检索,跨语言读论文,也拿它们去推复杂证明。

有些原本要耗掉几天甚至几周的工作,被压到几小时就能跑完一轮。

为什么需要FrontierScience?OpenAI给了一个对比。

2023年11月,GPQA这个由博士专家撰写、强调「谷歌搜不到」的科学题库发布时,GPT-4只拿到39%,低于专家基线74%。

两年后,GPT-5.2在同一基准上拿到92%。

当旧题库逐渐被刷穿,新的尺子就必须更长,否则你看不出模型还能往哪里发展。

FrontierScience的设计更像是给模型丢进两种不同的「科学难关」。

一类偏竞赛风格,考你在约束条件下把推理做到干净利落。

物理竞赛题示例

另一类更贴近研究现场,要求你在开放问题里把思路走通,哪怕没有标准答案那么工整。

物理科研问题示例

这套评测总量超过700道文本型题目,其中160道属于「黄金组」(Gold Set)题目。

竞赛赛道有100道题,强调短答案形式,便于核验对错。

研究赛道有60个原创研究子任务,由博士阶段或更资深的研究者设计,用10分制评分,拿到至少7分才算通过。

题目质量是有充足保障的:

竞赛赛道和42位前国际奖牌得主或国家队教练合作,总计109枚奥赛奖牌;

研究赛道由45位合格科学家与领域专家参与,覆盖从量子电动力学到合成有机化学,再到进化生物学等细分方向。

OpenAI还承认了一个不那么「中立」的细节。

两套题在制作流程里会刻意淘汰OpenAI自家内部模型已经能答对的题,因此这套评测对OpenAI自家模型可能更苛刻一些。

与此同时,他们开源了两套赛道的「黄金组」题目,其余题目保留,用来追踪数据污染。

OpenAI说,短答案适合机器判定,但研究型任务需要更细颗粒度的量表,于是他们用GPT-5充当模型判卷员,对照短答案逐项打分。

理想状态是请专家逐题批改,现实是规模不允许,于是规则被设计成尽量客观且可被模型检查,并配了验证流程来校准难度与正确性。

成绩单上,OpenAI给出了一轮初测对比。

他们评测了GPT-5.2、Claude Opus 4.5、Gemini 3 Pro、GPT-4o、OpenAI o4-mini、OpenAI o3等模型。OpenAI表示,GPT-5.2在竞赛题上得分77%,在研究题上得分25%,目前领先;Gemini 3 Pro在竞赛题上拿到76%,紧跟其后。

更值得注意的是失败原因。

OpenAI从答题记录里总结,前沿模型仍会犯推理、逻辑和计算错误,会卡在冷门概念上,也会出现事实性偏差。

另一个很朴素的观察也被写进正文:模型想得更久,准确率往往更高。

OpenAI对FrontierScience的边界也直言不讳。

它把科研切成可控的题目,这让评测更标准化,但也意味着它更像一张高清截图,而不是科研的全景纪录片。

尤其是它不评估模型能否提出真正新颖的假设,也不覆盖它与多模态数据和现实实验系统打交道的能力。

接下来,OpenAI计划迭代题库、扩展领域,并配套更多真实世界评估,看这些系统究竟让科学家多做成了什么。

奥赛金牌≠一流科学家,AI距离成为真正能独当一面的一流科学家,还有很长的路要走完。

参考资料:

https://openai.com/index/frontierscience/

秒追ASI

⭐点赞、转发、在看一键三连⭐

点亮星标,锁定新智元极速推送!

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
粟裕一举歼灭张灵甫的王牌74师,外界都讥讽张灵甫愚蠢至极;粟裕暮年却承认:他几乎就要赢了,我们赌上了全部

粟裕一举歼灭张灵甫的王牌74师,外界都讥讽张灵甫愚蠢至极;粟裕暮年却承认:他几乎就要赢了,我们赌上了全部

z千年历史老号
2026-10-13 09:29:29
“黑老大”黄大发被判处死刑立即执行!法院认定黄大发犯组织、领导黑社会性质组织罪等21项罪名,网友称其是《狂飙》中的“高启强”

“黑老大”黄大发被判处死刑立即执行!法院认定黄大发犯组织、领导黑社会性质组织罪等21项罪名,网友称其是《狂飙》中的“高启强”

每日经济新闻
2026-09-23 15:08:01
一个普通家庭,如果银行卡里真的躺着100万现金,会是什么感觉?

一个普通家庭,如果银行卡里真的躺着100万现金,会是什么感觉?

白浅娱乐聊
2026-10-13 15:17:43
汤镇业现状:住青岛20年,直言比香港好太多,如今一家8口很幸福

汤镇业现状:住青岛20年,直言比香港好太多,如今一家8口很幸福

暖心萌阿菇凉
2026-10-13 21:51:18
“黑天鹅”突袭!全球最大铜矿告急

“黑天鹅”突袭!全球最大铜矿告急

金融界
2026-10-14 12:33:44
乌克兰无人机袭击俄罗斯Yandex数据中心后 俄网络水军并未明显减少

乌克兰无人机袭击俄罗斯Yandex数据中心后 俄网络水军并未明显减少

cnBeta.COM
2026-10-14 03:43:04
全球最反华的国家出现!美日都被比下去,军队随时准备对华开战

全球最反华的国家出现!美日都被比下去,军队随时准备对华开战

瓦伦西亚月亮
2026-10-10 08:32:33
上海医院研究:低密度胆固醇越低,癌症风险越高?控制到多少才好

上海医院研究:低密度胆固醇越低,癌症风险越高?控制到多少才好

健身狂人
2026-10-14 14:25:11
1975年四川发现一具女尸,鉴定后确认她正是中央多年来寻找的人

1975年四川发现一具女尸,鉴定后确认她正是中央多年来寻找的人

微野谈写作
2026-10-14 08:50:10
谁给的通关?伪造材料载着“炸弹”跑了16年,央视曝光,官方出手

谁给的通关?伪造材料载着“炸弹”跑了16年,央视曝光,官方出手

阿伧说事
2026-10-13 12:00:29
缅北魏家魏怀仁和外甥陈大卫死有余辜,廖景芳是什么情况?

缅北魏家魏怀仁和外甥陈大卫死有余辜,廖景芳是什么情况?

水泥土的搞笑
2026-10-14 01:21:34
中国为什么没有渡边太太们?不是太太们不够精明,而是规则不让上桌

中国为什么没有渡边太太们?不是太太们不够精明,而是规则不让上桌

寰球经纬所
2026-10-13 21:44:34
梅西远赴伦敦出席2026金球奖盛典,或见证代际传承或获特别大奖

梅西远赴伦敦出席2026金球奖盛典,或见证代际传承或获特别大奖

星耀国际足坛
2026-10-13 21:06:41
“1200卷干部档案,有200多条问题”

“1200卷干部档案,有200多条问题”

中国新闻周刊
2026-10-14 08:37:16
大家心心念念的秦主任素颜照,来了!

大家心心念念的秦主任素颜照,来了!

笔杆论道
2026-10-12 08:58:03
5场0球0助攻!曼城7000万强援水土不服 主力位置恐将不保

5场0球0助攻!曼城7000万强援水土不服 主力位置恐将不保

球事百科吖
2026-10-14 05:23:01
8中7轰18+10!尼媒称怀斯曼确立第三中锋席位 布朗:他在逆境中成长

8中7轰18+10!尼媒称怀斯曼确立第三中锋席位 布朗:他在逆境中成长

颜小白的篮球梦
2026-10-14 09:53:45
为什么于和伟的这段表演可以封神?因为它踩到了中国人真正的痛点

为什么于和伟的这段表演可以封神?因为它踩到了中国人真正的痛点

糊咖娱乐
2026-10-13 18:14:41
懂车帝测试人连发多文,硬钢尊界

懂车帝测试人连发多文,硬钢尊界

正经社
2026-10-14 10:32:18
收评|顶不住了!哪有这样跌的!A股毁了!

收评|顶不住了!哪有这样跌的!A股毁了!

龙行天下虎
2026-10-14 15:04:08
2026-10-14 17:07:00
新智元 incentive-icons
新智元
AI产业主平台领航智能+时代
16422文章数 67159关注度
往期回顾 全部

科技要闻

苹果iPhone Duo完成大模型备案

头条要闻

女演员赴美游学遇"刚交学费即倒闭" 美高校出现倒闭潮

头条要闻

女演员赴美游学遇"刚交学费即倒闭" 美高校出现倒闭潮

体育要闻

巴萨4比1加拉塔萨雷:亚马尔杀穿地狱

娱乐要闻

胡歌觉得仙剑三很幼稚,忘了来时路?

财经要闻

赫尔曼・西蒙拆解下一轮产业机会

汽车要闻

豪华智能全拉满 比亚迪大汉不止旗舰级舒适

态度原创

艺术
数码
亲子
家居
公开课

艺术要闻

教堂锁死、窗户黑洞洞,株洲烂尾楼“北欧城堡”有点吓人

数码要闻

REDMI K100成本大涨:骁龙8E+内存+闪存成本高达3000元

亲子要闻

这些动画片,孩子越看越聪明!

家居要闻

2026建博会(广州) 公装联探展交流活动

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版