网易首页 > 网易号 > 正文 申请入驻

AI在物理考试只拿30分?耶鲁学者查完卷子发现错的是题

0
分享至

如果只看那些专门为物理难题设计的测试,AI的成绩单相当难看——六套不同的评测,最差的时候只有30%的得分。这个数字流传开来,几乎坐实了一种印象:AI能写代码、能算数学,但一碰到真正的物理问题就露怯。


耶鲁大学的John Sous觉得,这个印象可能来得不太公平。他和同事在实际使用这些模型时,看到的成功案例和测试分数对不上。于是他们回过头去,把那些评测题目一道道重新检查了一遍。

结果发现问题不在AI身上。那些题目里藏着一连串错误,还有不少定义含糊、信息缺失的地方。把题目本身修好之后,同一批模型的得分一路升到了94%。Sous的说法很直接:不是AI答不出来,是卷子没把必要的信息给全。

“我认为任何定义清晰的东西,哪怕它非常难,我怀疑AI都会做得很好——可以说比最好的专家还好,”Sous说,“我们的数据支持这一点。”

这句话里藏着一个前提:定义清晰。物理学的麻烦恰恰在于,它并不总是定义清晰。

物理学家Vladimir Arnold说过一句被反复引用的话:数学是物理学中实验成本低廉的那一部分。换句话说,物理里那些能被写成方程、能被严格检验的部分,确实和数学很像,AI在这里如鱼得水。但物理还有另一面——那些新出现的、尚未开垦的、模糊的、处在最前沿的部分。

Sous描述了他眼中真正有意思的物理是什么样子:当我们在自然界观察到某种令人困惑的现象,一块材料、一片宇宙,我们还不理解它,这时候物理学家的工作是造出一个模型、一个近似、一个模拟,去抓住并预测这个现象。

“那是一个非常艺术、非常有创造性的过程,”他说,“AI真的能迈出下一步,完成理论物理学家的全部工作吗?做端到端的研究:定义、创造、探索、检验?目前图景还不清楚。”

数学之所以跑在AI进展的最前面,有一个技术上的原因:形式化。这种方法把一个数学想法翻译成可以被逐条检查的计算机代码,过程足够彻底,以至于一个定理如果能完好无损地通过检验,就被认为正确得无可置疑。它让AI在处理问题时,能知道自己什么时候得到了正确答案。

用形式化来检验物理,也有了一些进展,但和数学比起来还处在早期。物理问题往往更杂乱,更难被钉死。

不过,AI已经在被物理学家使用了。不只是写代码、做数学,甚至包括设计和运行实验。同样在耶鲁大学的Logan Wright正在开一门课,讲如何在物理研究中使用AI,他说课程大纲一直在改,为了追上进展。

Wright认为关键在于:造出输入和输出都能被计算机控制的实验。控制权交出去之后,AI就能拉动相应的操纵杆,去探索问题空间,得到有意义的结果。

“它没有手,没有眼睛,它只通过语言和代码与世界互动,”Wright说,“所以如果我们能建立一个实验,其中所有观察都被还原成代码,所有动作都被还原成代码……那么AI实际上能帮上很大的忙。”

他实验室里正在进行的一个实验,是分析不同形状的激光脉冲如何影响一个铷原子。研究人员用Anthropic的AI Claude来控制激光脉冲,并收集它们产生的效果数据。

“Claude现在基本上能说‘我认为这个激光脉冲会产生这个输出’,”Wright说,“然后它能去检验这一点。”

这类实验可以整夜运行,完成的工作量相当于人类一周的量。人类物理学家甚至可以用手机上的应用,在离开实验室的时候把突然想到的点子提出来,回来时直接看结果。

“并不是整个宇宙都能用这种方式探索。它会局限在非常受限的领域里,”Wright说,“我认为物理学下一个前沿的一部分,就是在这些领域里尽可能多地取得进展。”

Wright还提到一种已经完全可以想象的情形:AI很快会设计出一个人类不理解的实验,让人类把它造出来,然后产生令人兴奋的新结果。但他紧接着补了一句,这句话值得原样保留——“但要说清楚,就像数学里一样,存在一场争论:如果我们得到一个结果,却对它一无所知,那它算不算科学。”

这个问题目前没有答案。它悬在那里,和那个从30%跳到94%的分数一样,提醒着人们:在讨论AI能不能做物理之前,也许得先想清楚,我们到底在拿什么标准考它。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
官方:吴宜泽、贺国强退出斯诺克北爱尔兰公开赛

官方:吴宜泽、贺国强退出斯诺克北爱尔兰公开赛

懂球帝
2026-10-16 17:52:16
11月1日起社保缴费有新变化,网友:一年换一次劳务派遣公司,啥都不给交

11月1日起社保缴费有新变化,网友:一年换一次劳务派遣公司,啥都不给交

东方豪侠
2026-10-16 08:21:20
网传懂车帝5000元邀博主补刀尊界华为

网传懂车帝5000元邀博主补刀尊界华为

三言科技
2026-10-14 11:30:15
“疯狂小杨哥”现身直播间,持续约5分钟,称正在准备更好的作品和更加优质的内容,三只羊工作人员:是真人出镜;此前已注销亿级旧账号

“疯狂小杨哥”现身直播间,持续约5分钟,称正在准备更好的作品和更加优质的内容,三只羊工作人员:是真人出镜;此前已注销亿级旧账号

极目新闻
2026-10-16 20:55:58
半小时“午睡”被推翻,医生说:人到50岁,午睡尽量守住3个规矩

半小时“午睡”被推翻,医生说:人到50岁,午睡尽量守住3个规矩

健康之光
2026-10-07 17:46:08
妻子把发给情人的消息发给我:下次咱们还去那家宾馆,我回复好的

妻子把发给情人的消息发给我:下次咱们还去那家宾馆,我回复好的

千秋文化
2026-08-22 20:21:09
“让企退人员闭嘴”翻车!千万人的民生事,凭什么不让人表达观点

“让企退人员闭嘴”翻车!千万人的民生事,凭什么不让人表达观点

笑熬浆糊111
2026-09-21 08:59:01
1948年叶子龙喊徐向前徐总,毛主席立军规:全军仅三人可称老总

1948年叶子龙喊徐向前徐总,毛主席立军规:全军仅三人可称老总

赫埰足球解说
2026-10-13 12:59:41
男子当年埋了4箱顶级白酒,20年当众挖出时,顿时令他愣住了

男子当年埋了4箱顶级白酒,20年当众挖出时,顿时令他愣住了

五元讲堂
2025-04-16 16:40:30
这很科学:89%的人幻想过同时和多人发生性行为,算精神出轨吗?

这很科学:89%的人幻想过同时和多人发生性行为,算精神出轨吗?

宇宙时空
2026-05-26 18:20:10
中纪委亮重拳,全国严查“逃逸式”辞职!

中纪委亮重拳,全国严查“逃逸式”辞职!

职场资深秘书
2026-10-15 20:07:10
今年冬天可能是60年以来最反常的冬天,有三大特点,大家要注意

今年冬天可能是60年以来最反常的冬天,有三大特点,大家要注意

新时代的两性情感
2026-10-15 10:08:12
美国9月PPI同比增长6.3%,大幅超出市场预期!美股三大指数开盘涨跌不一,台积电跳水跌5%,市值蒸发约8000亿元

美国9月PPI同比增长6.3%,大幅超出市场预期!美股三大指数开盘涨跌不一,台积电跳水跌5%,市值蒸发约8000亿元

每日经济新闻
2026-10-16 19:47:48
今年真是个暖冬吗?丨快问快答

今年真是个暖冬吗?丨快问快答

经济日报
2026-10-16 13:26:09
钾含量是苹果10倍!医生提醒:中老年隔天吃一次,腿脚有劲精神好

钾含量是苹果10倍!医生提醒:中老年隔天吃一次,腿脚有劲精神好

观星赏月
2026-10-12 12:15:09
美国最后悔的一笔买卖!400万卖掉熔盐堆技术,中国如今独步全球

美国最后悔的一笔买卖!400万卖掉熔盐堆技术,中国如今独步全球

乌克兰小静
2026-10-16 08:26:08
瞒天过海?爱沙尼亚意外发现:自家多年来一直在帮俄维护油气管

瞒天过海?爱沙尼亚意外发现:自家多年来一直在帮俄维护油气管

一曲一场談
2026-10-15 15:28:22
中国最幸运的一群人:1962-1972年出生的人,有你吗?为啥幸运?

中国最幸运的一群人:1962-1972年出生的人,有你吗?为啥幸运?

娱乐圈的笔娱君
2026-10-16 01:43:54
邓文迪的二女儿,身高超过一米八且极为聪慧,二十三岁已成功获得硕士学位

邓文迪的二女儿,身高超过一米八且极为聪慧,二十三岁已成功获得硕士学位

一盅情怀
2026-10-09 16:07:51
蓝营大地震!郑丽文雷霆开铡 24 人,朱立伦苦心布局一夜崩塌

蓝营大地震!郑丽文雷霆开铡 24 人,朱立伦苦心布局一夜崩塌

云上乌托邦
2026-10-15 13:55:38
2026-10-16 22:28:49
宇宙来信2
宇宙来信2
有态度网友ytd
11文章数 20关注度
往期回顾 全部

科技要闻

杨天若院士:AI是中国弯道超车的机会

头条要闻

明代古宅蔡厅5根承重木柱被人锯断 雕花石础也被撬走

头条要闻

明代古宅蔡厅5根承重木柱被人锯断 雕花石础也被撬走

体育要闻

工资一分不要,曼联名将想把母队带回西甲

娱乐要闻

郭富城现身香港大学,袁咏仪夫妇全程冷漠不搭话

财经要闻

港交所拟2028年下半年实施T+1结算

汽车要闻

特斯拉会飞?全新Roadster亮相

态度原创

本地
亲子
游戏
时尚
公开课

本地新闻

因新荣记出圈,这座浙东小城才是吃货天堂

亲子要闻

工程车小故事:小车子进山洞变大

《地铁2039》实体版竟要联网下载 遭玩家抵制、退款

抠抠搜搜花大钱?劝你双11别着急下单,先来看这篇

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版