网易首页 > 网易号 > 正文 申请入驻

16道物理题,为什么AI平均分不低却几乎没人全过?

0
分享至

一个叫 Surface Evolver Bench 的榜单,测的不是聊天,也不是写代码,而是让大模型去写一种叫 Surface Evolver 的物理模拟数据文件。这个基准由 Yann Henon 创建,问的是同一个问题:LLM 智能体能不能写出完整的、能跑起来的液体表面模拟文件。

Surface Evolver 本身是一个存在多年的物理程序,专门用来建模由表面张力塑形的液体表面。这个基准把它变成了考题,一共 16 道任务,每道都要求智能体在几何约束、接触角、重力、体积条件之下,把一块液体表面模拟出来。


它到底怎么考

每道题不是让模型直接交答案,而是给了一个智能体循环:可以查文档、可以运行模拟器、可以反复调整,最后提交一份数据文件。模型每道题只跑一次,同一个模型的不同推理强度版本,会作为独立条目出现在榜单上。

评分是确定性的,而且带部分分。一道题要过三关:数据文件通过静态检查、完成一次隐藏的模拟运行、把隐藏的物理量(体积、面积、能量)在容差范围内对上参考解。

只有三关全过,这道题才算通过。这就是为什么榜单上通过率总是低于平均分——平均分是部分分的平均,通过率是更严格的二值判定。

分数和通过率,为什么差这么多

榜单数据来自公开的 Surface Evolver Bench 排行榜。图表里报的是平均分,也就是所有任务上的部分分平均值;更严格的二值通过率,则和数据一起保留在导出文件里。

这个设计其实挺有意思。部分分意味着模型只要做对了一部分检查,就能拿到分;但通过率要求的是全对。两个数字放在一起看,能看出模型是"接近做对"还是"真的做对"。

16 道题、每道一次运行、三关全过才算通过——这套规则把"看起来会"和"实际能跑"分得很开。对做智能体评测的人来说,这种确定性评分加部分分的组合,比单纯给个总分更能说明问题。

至于榜单上具体哪些模型排在哪、平均分和通过率各是多少,数据都在公开排行榜和导出文件里,可以自己去看。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
33岁歌手被当面追问发际线,当场承认植发:我以为看起来很自然

33岁歌手被当面追问发际线,当场承认植发:我以为看起来很自然

时光慢旅人
2026-10-03 00:45:44
安东尼奥252天两创奇迹!U23亚洲杯摘银,亚运会登上领奖台

安东尼奥252天两创奇迹!U23亚洲杯摘银,亚运会登上领奖台

奥拜尔
2026-10-03 16:17:31
美内政部证实:夏威夷火山国家公园标志性的霍莱海蚀拱门坍塌,坠入太平洋

美内政部证实:夏威夷火山国家公园标志性的霍莱海蚀拱门坍塌,坠入太平洋

环球网资讯
2026-10-03 16:08:17
真不能怀疑小孩胡说八道的本事,网友:要是信儿子,这个家就得散

真不能怀疑小孩胡说八道的本事,网友:要是信儿子,这个家就得散

户外阿毽
2026-10-03 11:11:33
11岁小孩哥夺亚运冠军!家长:绝对高风险,这块金牌不要也罢

11岁小孩哥夺亚运冠军!家长:绝对高风险,这块金牌不要也罢

史海流年号
2026-09-30 00:39:30
无耻小人被当成英雄收录语文课本,18年后真相揭晓,被判无期徒刑!

无耻小人被当成英雄收录语文课本,18年后真相揭晓,被判无期徒刑!

雍亲王府
2026-10-02 09:30:12
央视发布贺炜解说片段,他的手机打开了懂球帝APP并收到推送

央视发布贺炜解说片段,他的手机打开了懂球帝APP并收到推送

懂球帝
2026-10-04 00:28:07
国庆第一批血亏的生意出现!卷到50元还没人住,年轻人不想当韭菜

国庆第一批血亏的生意出现!卷到50元还没人住,年轻人不想当韭菜

铭记历史呀
2026-10-04 05:23:41
你假装放假,我假装消费

你假装放假,我假装消费

七叔东山再起
2026-10-03 20:00:48
中央定调,延迟退休实施,1976年出生,社保交够15年能不交了吗

中央定调,延迟退休实施,1976年出生,社保交够15年能不交了吗

虎哥闲聊
2026-10-03 20:18:45
3-1夺连胜!国乒19岁奇兵崛起:击败王楚钦御用陪练,王皓该重用他?

3-1夺连胜!国乒19岁奇兵崛起:击败王楚钦御用陪练,王皓该重用他?

李喜林篮球绝杀
2026-10-03 12:59:08
中日对峙若继续拖延下去,越来越多国家终将意识到:中日一旦开战,不会像俄乌冲突那样给第三方留下渔利空间,而注定是一场惨烈血战

中日对峙若继续拖延下去,越来越多国家终将意识到:中日一旦开战,不会像俄乌冲突那样给第三方留下渔利空间,而注定是一场惨烈血战

人生录
2026-10-02 20:33:29
王楚钦:现在打球失去动力,需要好好想想,接下来的路怎么走……目前,他已退出WTT中国大满贯,亚锦赛也不会参加

王楚钦:现在打球失去动力,需要好好想想,接下来的路怎么走……目前,他已退出WTT中国大满贯,亚锦赛也不会参加

都市快报橙柿互动
2026-10-03 13:25:53
随着特鲁姆普1-6,斯诺克深圳公开赛决赛2席诞生:2名中国选手在列

随着特鲁姆普1-6,斯诺克深圳公开赛决赛2席诞生:2名中国选手在列

侧身凌空斩
2026-10-03 23:24:37
中国为啥不想再办奥运会了?说白了,就是国际奥委会那帮人太双标

中国为啥不想再办奥运会了?说白了,就是国际奥委会那帮人太双标

荆楚寰宇文枢
2026-10-03 20:22:57
刷屏的“毛毛虫”是个什么虫?为何今年格外多?

刷屏的“毛毛虫”是个什么虫?为何今年格外多?

环球网资讯
2026-10-03 15:47:06
55岁马斯克被曝与高管女友分手,齐利斯是马斯克的“铁杆迷妹”,两人育有4娃,女方称“毫无预兆”

55岁马斯克被曝与高管女友分手,齐利斯是马斯克的“铁杆迷妹”,两人育有4娃,女方称“毫无预兆”

极目新闻
2026-10-03 11:20:10
2026年国庆为何没有大阅兵?

2026年国庆为何没有大阅兵?

知法而形
2026-10-01 12:05:49
刚有名人离世,何赛飞病况曝光令人揪心,与恩师之子离婚已水落石出

刚有名人离世,何赛飞病况曝光令人揪心,与恩师之子离婚已水落石出

麦芽是个小趴菜
2026-10-04 00:24:51
杭州一男子做推拿,迷迷糊糊中裤子被脱,技师举动让他惊出一身汗

杭州一男子做推拿,迷迷糊糊中裤子被脱,技师举动让他惊出一身汗

社会日日鲜
2026-08-10 16:38:30
2026-10-04 07:43:00
碳基打工人
碳基打工人
坐标北京,靠咖啡续命,靠小红书下饭的普通人类。
150文章数 86关注度
往期回顾 全部

科技要闻

英伟达盘中创历史新高,市值逼近6万亿美元

头条要闻

深圳车主赶着上班两次占用应急车道 被扣12分罚6000元

头条要闻

深圳车主赶着上班两次占用应急车道 被扣12分罚6000元

体育要闻

这个讨论了一夏天的问题,马刺有答案了吗

娱乐要闻

马思纯一家爬山祈福!素颜出镜笑容甜

财经要闻

4亿台电视挂墙落灰 为何没人愿意开了?

汽车要闻

方程豹9月热销破4万 首款皮卡鲨鱼将于四季度上市

态度原创

手机
旅游
健康
游戏
公开课

手机要闻

部分iPhone 18 Pro Max出现严重信号故障,苹果确认:中招后只能换机

旅游要闻

国庆假期,游客体验“升级版”

刷酸祛痘,为什么有人翻车?

任天堂9款第一方新作均分80.33 位居三家之首

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版