网易首页 > 网易号 > 正文 申请入驻

OpenAI发布权威AI科研基准,扯下AI遮羞布:奥赛金牌≠一流科学家!

0
分享至

新智元报道

编辑:艾伦

【新智元导读】OpenAI最新发布的FrontierScience基准,试图用真实的博士级难题,从物理、化学、生物三个维度上考验AI。真相是残酷的:在没有唯一标准答案的科研实战中,AI作为「顶级做题家」,距离真正的科学家,还差得远。

OpenAI在2025年12月16日发布了一套新基准FrontierScience,用来衡量AI在物理、化学、生物三门学科里,能否做到接近专家水准的科学推理,而不只是背知识点。

OpenAI在文中把科学工作描述成一套更接近「持续试错」的流程。

提出假设,设计验证,推翻再重来,还要把不同领域的线索拼成同一张图。

模型越强,问题就越尖锐,AI能不能把这种深推理用到真正的科研推进上。

OpenAI提到,过去一年他们的系统在国际数学奥林匹克和国际信息学奥林匹克上达到了金牌级表现,同时更重要的变化发生在实验室和办公室里。

研究者开始拿这些模型做跨学科文献检索,跨语言读论文,也拿它们去推复杂证明。

有些原本要耗掉几天甚至几周的工作,被压到几小时就能跑完一轮。

为什么需要FrontierScience?OpenAI给了一个对比。

2023年11月,GPQA这个由博士专家撰写、强调「谷歌搜不到」的科学题库发布时,GPT-4只拿到39%,低于专家基线74%。

两年后,GPT-5.2在同一基准上拿到92%。

当旧题库逐渐被刷穿,新的尺子就必须更长,否则你看不出模型还能往哪里发展。

FrontierScience的设计更像是给模型丢进两种不同的「科学难关」。

一类偏竞赛风格,考你在约束条件下把推理做到干净利落。

物理竞赛题示例

另一类更贴近研究现场,要求你在开放问题里把思路走通,哪怕没有标准答案那么工整。

物理科研问题示例

这套评测总量超过700道文本型题目,其中160道属于「黄金组」(Gold Set)题目。

竞赛赛道有100道题,强调短答案形式,便于核验对错。

研究赛道有60个原创研究子任务,由博士阶段或更资深的研究者设计,用10分制评分,拿到至少7分才算通过。

题目质量是有充足保障的:

竞赛赛道和42位前国际奖牌得主或国家队教练合作,总计109枚奥赛奖牌;

研究赛道由45位合格科学家与领域专家参与,覆盖从量子电动力学到合成有机化学,再到进化生物学等细分方向。

OpenAI还承认了一个不那么「中立」的细节。

两套题在制作流程里会刻意淘汰OpenAI自家内部模型已经能答对的题,因此这套评测对OpenAI自家模型可能更苛刻一些。

与此同时,他们开源了两套赛道的「黄金组」题目,其余题目保留,用来追踪数据污染。

OpenAI说,短答案适合机器判定,但研究型任务需要更细颗粒度的量表,于是他们用GPT-5充当模型判卷员,对照短答案逐项打分。

理想状态是请专家逐题批改,现实是规模不允许,于是规则被设计成尽量客观且可被模型检查,并配了验证流程来校准难度与正确性。

成绩单上,OpenAI给出了一轮初测对比。

他们评测了GPT-5.2、Claude Opus 4.5、Gemini 3 Pro、GPT-4o、OpenAI o4-mini、OpenAI o3等模型。OpenAI表示,GPT-5.2在竞赛题上得分77%,在研究题上得分25%,目前领先;Gemini 3 Pro在竞赛题上拿到76%,紧跟其后。

更值得注意的是失败原因。

OpenAI从答题记录里总结,前沿模型仍会犯推理、逻辑和计算错误,会卡在冷门概念上,也会出现事实性偏差。

另一个很朴素的观察也被写进正文:模型想得更久,准确率往往更高。

OpenAI对FrontierScience的边界也直言不讳。

它把科研切成可控的题目,这让评测更标准化,但也意味着它更像一张高清截图,而不是科研的全景纪录片。

尤其是它不评估模型能否提出真正新颖的假设,也不覆盖它与多模态数据和现实实验系统打交道的能力。

接下来,OpenAI计划迭代题库、扩展领域,并配套更多真实世界评估,看这些系统究竟让科学家多做成了什么。

奥赛金牌≠一流科学家,AI距离成为真正能独当一面的一流科学家,还有很长的路要走完。

参考资料:

https://openai.com/index/frontierscience/

秒追ASI

⭐点赞、转发、在看一键三连⭐

点亮星标,锁定新智元极速推送!

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
拒绝“40万变2亿”的承诺,选择储蓄债券,NBA鲨鱼如今身家5亿美元

拒绝“40万变2亿”的承诺,选择储蓄债券,NBA鲨鱼如今身家5亿美元

野生运营
2026-08-11 04:24:43
以高额“包养费”为诱饵,65%为女性受害者、最小仅19岁,涉案金额逾620万港元!香港警方侦破一援交诈骗团伙

以高额“包养费”为诱饵,65%为女性受害者、最小仅19岁,涉案金额逾620万港元!香港警方侦破一援交诈骗团伙

每日经济新闻
2026-08-10 19:43:12
榨干中国红利,却转头卖身美国!商务部雷霆出击,被查大快人心!

榨干中国红利,却转头卖身美国!商务部雷霆出击,被查大快人心!

卷史
2026-08-11 15:13:51
复旦王水牛的瓜,尺度太炸了

复旦王水牛的瓜,尺度太炸了

大张的自留地
2026-08-11 15:15:21
斗胆说几句内蒙古警车改标事件

斗胆说几句内蒙古警车改标事件

林中木白
2026-08-11 13:17:29
5万朝鲜兵压境,泽连斯基也没想到,朝鲜援俄居然舍得下血本

5万朝鲜兵压境,泽连斯基也没想到,朝鲜援俄居然舍得下血本

共工之锚
2026-08-11 13:52:59
特朗普下令斩首哈梅内伊时,绝对想不到,会因恐惧躲在食品卡车里

特朗普下令斩首哈梅内伊时,绝对想不到,会因恐惧躲在食品卡车里

西楼知趣杂谈
2026-08-11 20:37:48
伊朗最高领袖连夜签了6张任命状:71岁老将一人身兼两个关键职位,他前面两任全死于空袭

伊朗最高领袖连夜签了6张任命状:71岁老将一人身兼两个关键职位,他前面两任全死于空袭

网易新闻出品
2026-08-11 18:56:48
60岁藏民告诫我:在蒙古包睡觉时 ,女人床头系了红绳的一定别碰

60岁藏民告诫我:在蒙古包睡觉时 ,女人床头系了红绳的一定别碰

千秋文化
2026-08-10 20:17:37
154亿票房无人起身,5.7分烂片全场起立,百花奖撕开遮羞布

154亿票房无人起身,5.7分烂片全场起立,百花奖撕开遮羞布

阿废冷眼观察所
2026-08-12 03:45:30
维生素D补过头,可能“催熟”孩子!每天3000单位连吃7年,8岁孩子发育按下快进键

维生素D补过头,可能“催熟”孩子!每天3000单位连吃7年,8岁孩子发育按下快进键

极目新闻
2026-08-11 18:35:59
哪吒获奖无人站起,惊蛰无声获奖全体起立,讽刺的是哪吒的奖更大

哪吒获奖无人站起,惊蛰无声获奖全体起立,讽刺的是哪吒的奖更大

芊手若
2026-08-11 11:13:13
韩国宣布:不向乌克兰供武

韩国宣布:不向乌克兰供武

上观新闻
2026-08-11 12:15:00
丢人!前国足队长带队0-13惨败越南球队 47分钟丢9球 董路嘲讽

丢人!前国足队长带队0-13惨败越南球队 47分钟丢9球 董路嘲讽

念洲
2026-08-11 20:58:42
女追男,当晚男开玩笑说女“腿毛扎”不欢而散,事后被告强奸,一审判8个月

女追男,当晚男开玩笑说女“腿毛扎”不欢而散,事后被告强奸,一审判8个月

不掉线电波
2026-08-11 07:35:31
痛斥汪精卫,却劝乌克兰投降?精神分裂?还是坏?

痛斥汪精卫,却劝乌克兰投降?精神分裂?还是坏?

律法刑道
2026-08-10 09:49:38
巴沙尔·阿萨德,被判死刑

巴沙尔·阿萨德,被判死刑

南方都市报
2026-08-11 17:59:32
郭德纲篡改红歌被举报,武汉文旅回复:改编未报备,已立案调查

郭德纲篡改红歌被举报,武汉文旅回复:改编未报备,已立案调查

我就是个码字的
2026-08-11 16:12:25
震惊消息传出!穆杰塔巴恐成最短任期领袖,下任继承者引关注

震惊消息传出!穆杰塔巴恐成最短任期领袖,下任继承者引关注

老谢谈史
2026-08-12 01:01:46
萧旭岑出来表态了!在郑丽文明确表示台湾不是一个中国之后

萧旭岑出来表态了!在郑丽文明确表示台湾不是一个中国之后

果妈聊娱乐
2026-08-11 20:54:45
2026-08-12 06:43:00
新智元 incentive-icons
新智元
AI产业主平台领航智能+时代
15917文章数 66998关注度
往期回顾 全部

科技要闻

AI大战变天:扎克伯格突然回头

头条要闻

郭兰英逝世 代表作《我的祖国》《南泥湾》

头条要闻

郭兰英逝世 代表作《我的祖国》《南泥湾》

体育要闻

NBA老顽童,抽着大麻喝着小酒告别了

娱乐要闻

“雅典娜”确认被害 细节令人发指!

财经要闻

AI泡沫的剧本,是2008年的次贷危机?

汽车要闻

闪充/天神之眼B/云辇-C 2027款海豹06售9.99万元起

态度原创

游戏
健康
旅游
家居
军事航空

魔兽世界:时光服紧急削弱,精英玩家破灭,难度党为什么消失了?

心血管专家破解猝死八大谣言

旅游要闻

韩国赴华游升温,上海青岛受追捧

家居要闻

2026建博会(广州) 公装联探展交流活动

军事要闻

乌克兰袭击俄罗斯炼油厂 已致13死78伤

无障碍浏览 进入关怀版