网易首页 > 网易号 > 正文 申请入驻

Gemini 4 Carbon 登顶 MathArena:贵 15 倍,多 4.8 点

0
分享至

随手先关注,不错过每日AI热讯速递

数学基准MathArena的综合榜首换人了。Gemini 4 Carbon85.4%的综合得分排到第一,把此前排在第一的GPT-6.1 Sol挤到第三[1]。

这是很长一段时间以来,第一次由非 OpenAI 模型坐上这个位置[2]。但榜单旁边那列成本同样醒目:为了这 4.8 个百分点,每道题的账单要多付十几倍。

①

这个榜首先要放回MathArena的口径里看。它报的「预期表现」(跨赛题归一化后的综合估分,缺测的题会用统计模型补算,因此带有正负号),汇总范围只包括未被弃用的比赛[1]。

题源也刻意避开旧题:用新发布的竞赛题与研究题,测模型在训练中没见过的推理;每个模型每道题跑四次,榜单同时给出平均分与单次运行成本[1]。

排名是这样:Gemini 4 Carbon85.4%排第一,单题预期成本15.70 美元[1]。

Claude Fable 5.282.8%排第二,40.20 美元GPT-6.1 Sol80.6%排第三,1.07 美元[1]。



图来源:MathArena[1]

所以「登顶」要先拆成两个数看:一个是综合排序,一个是那个带着正负号的估计值。

②

成本这道题更直接。按测试时用的推理档位折算,Carbon 的单题成本约为 GPT-6.1 Sol 的15 倍,Fable 5.2 约为40 倍[2]。

折算成绝对数,就是 15.70 美元、40.20 美元对 1.07 美元[1]。同一批题目跑一遍,选第一名和选第三名,账单相差一个数量级。

这个差距对谁最要紧?做批量任务的团队。单次调用看不出来,题目一多就成了预算问题。

反过来,如果只是偶尔问一道难题,成本差距可能还不如一次超时带来的等待更贵。

这个成本是按单题完整跑一次算的。榜单给的是一个综合平均值,落到具体题目上会上下浮动[1]。

所以它适合当量级参考,不适合当精确预算。

所以选型的分水岭不在榜首,而在你要跑多少次——这是一道算术题,不是立场题。

③

Carbon 的失败模式也进了榜单记录:它最常见的失败是超时[2]。

榜单记录的另一面是它几乎从不主动放弃任务:有一次它启动了一个脚本,跑了 11 个多小时都没有回头检查进度[2]。

这个特性往好里说,它愿意死磕;往坏里说,在流水线里它会把预算和时间一起吃掉。

对交互式使用,表现是慢;对自动化系统,表现是成本失控。同一个行为,落在两种场景里是两个问题。

所以真正的价值不在排名,而在提醒:把模型接进生产线之前,超时与自我中断的策略得先设计好。

④

至于它算不算当前最强的公开可用数学模型,得先看一个前提:被称解出 Navier-Stokes 这类难题的 OpenAI 模型,目前还没有公开可用[2]。把这些未公开的模型排除在外,它可能是其中最强的一个[2]。

榜单本身也在自我限定。85.4% 与 82.8%的置信区间(统计上允许的浮动范围,两个区间重叠时先后顺序就不算确定)相互重叠,前两名的先后在统计上并不牢靠[1]。

另外,Carbon 的第一名建立在部分题集上——出于成本考虑,它并没有在全部赛题上跑满,个别分数是估计值[1]。

所以这是一次真实的换位,但不是一次确定性的超越。榜首换人值得记一笔,成本那一列更值得先算清楚。

如果你的团队要选数学模型,会为了这 4.8 个百分点多付十几倍吗?欢迎在评论区聊聊。

参考来源:

[1] Model performance across MathArenahttps://matharena.ai/

[2] Gemini 4 Carbon takes the MathArena crown but costs 15 times more than GPT-6.1 Solhttps://the-decoder.com/gemini-4-carbon-takes-the-matharena-crown-but-costs-15-times-more-than-gpt-6-1-sol

欢迎点赞、分享、推荐

一起拥抱AI

声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
疯狂囤地的真相,万斯和比尔盖茨,都摸到了美国的底层命门

疯狂囤地的真相,万斯和比尔盖茨,都摸到了美国的底层命门

华山穹剑
2026-11-12 23:03:04
小哥的“几把猫”丢了,到处贴寻猫启事,网友一看配图:难怪这猫会离家出走...

小哥的“几把猫”丢了,到处贴寻猫启事,网友一看配图:难怪这猫会离家出走...

铲屎官阿伟
2026-11-15 15:16:46
三观被颠覆!外国网友震惊:DeepSeek的老板居然不长左边这样?

三观被颠覆!外国网友震惊:DeepSeek的老板居然不长左边这样?

国创漫话
2026-11-13 23:52:07
多地推迟到校时间,中国教育报:学习不该是比早起、比晚睡的消耗战

多地推迟到校时间,中国教育报:学习不该是比早起、比晚睡的消耗战

澎湃新闻
2026-11-13 18:29:04
警告:英伟达GPU恐遭“雪崩”

警告:英伟达GPU恐遭“雪崩”

半导体行业观察
2026-11-15 10:30:30
俄罗斯迫使乌克兰投降的四个计划,有两个已经失败了!

俄罗斯迫使乌克兰投降的四个计划,有两个已经失败了!

山河路口
2026-11-14 13:51:46
最低14℃!新一轮冷空气+降雨即将来袭!深圳天气再反转!

最低14℃!新一轮冷空气+降雨即将来袭!深圳天气再反转!

深圳本地宝
2026-11-15 13:10:49
日本网友让志田千阳“滚出日本、入籍中国”,结果她真的来了

日本网友让志田千阳“滚出日本、入籍中国”,结果她真的来了

叒女紫121
2026-10-15 17:59:37
夏宝龙在深圳听取有关工作情况汇报

夏宝龙在深圳听取有关工作情况汇报

政知新媒体
2026-11-15 15:39:46
萨巴伦卡决胜盘丢6局爆冷出局,郑钦文反倒成年终总决赛最大赢家

萨巴伦卡决胜盘丢6局爆冷出局,郑钦文反倒成年终总决赛最大赢家

小辉体育
2026-11-14 14:00:32
阿尔特塔彻底慌了!阿森纳头号核心遭皇马挖角!穆里尼奥准备出手

阿尔特塔彻底慌了!阿森纳头号核心遭皇马挖角!穆里尼奥准备出手

澜归序
2026-11-15 10:05:39
AI换脸像赵丽颖,平台能靠审核过免责吗?

AI换脸像赵丽颖,平台能靠审核过免责吗?

马俊哲律师
2026-11-13 12:20:11
鲸鱼平台上亿“理财”资金无法提现

鲸鱼平台上亿“理财”资金无法提现

经济观察报
2026-11-15 09:23:16
美国科技网站《商业内幕》:黄仁勋垮台,最大的赢家是中国

美国科技网站《商业内幕》:黄仁勋垮台,最大的赢家是中国

百味朱砂
2026-11-15 11:56:06
美专家意见罕见统一:中国两岸统一后,美国唯一可行选择曝光

美专家意见罕见统一:中国两岸统一后,美国唯一可行选择曝光

铁锤侃侃而谈
2026-11-13 09:38:13
我感觉其实不用再猜了,万斯大概率就是下一届美国总统。真要是他入主白宫,首当其冲的就是中国

我感觉其实不用再猜了,万斯大概率就是下一届美国总统。真要是他入主白宫,首当其冲的就是中国

扶苏聊历史
2026-10-26 17:56:12
重大调整!12月1日起,山东分割肉不再出具肉品合格证

重大调整!12月1日起,山东分割肉不再出具肉品合格证

天气观察站
2026-11-15 07:46:39
"9·11"后第2次!全美机场停飞 追踪地图停满飞机

"9·11"后第2次!全美机场停飞 追踪地图停满飞机

看看新闻Knews
2026-11-14 10:21:26
医生直言:一片西地那非在你体内走了一趟,干了5件事你未必知道

医生直言:一片西地那非在你体内走了一趟,干了5件事你未必知道

健康之光
2026-07-22 14:53:21
养老金调完了,机关事业单位和企业退休的人,到手到底差出多少?

养老金调完了,机关事业单位和企业退休的人,到手到底差出多少?

江启
2026-11-06 07:32:36
2026-11-15 17:15:00
比比超
比比超
一个产品人の观察,深耕AI&出海全球化。 公众号:比比超
214文章数 6关注度
往期回顾 全部

数码要闻

苹果HomeView与第四代Apple TV 4K开售 299美元起

头条要闻

客人要求用百元大钞做“现金花束” 花店直接报警

头条要闻

客人要求用百元大钞做“现金花束” 花店直接报警

体育要闻

马刺破勇士:文班与库里各自的价值

娱乐要闻

陈晓楠对话厉娜和许飞引全网热议

财经要闻

英伟达、字节、谷歌,涌入"救命"的生意

科技要闻

历史头一回!马斯克用"筷子"夹住太空飞船

汽车要闻

更豪华更好开 问界新M8细节升级见真章

态度原创

旅游
时尚
艺术
本地
家居

旅游要闻

秋假遛娃剑门关,全程17000步,6个小时,喜提废腿体验!

“小棕裙”今年冬天爆火,这样穿时髦又松弛!

艺术要闻

漫天香氛,秋风醉人~杭州的秋天从不让人失望!13个地方,秒出大片!

本地新闻

乌兰察布:以前种土豆,现在种Token

家居要闻

2026建博会(广州) 公装联探展交流活动

无障碍浏览 进入关怀版