网易首页 > 网易号 > 正文 申请入驻

没有"最强模型":AI评测正在失效

0
分享至

一个月前,我们发布了2026年第一季度的前沿模型报告。结论很直接:不存在所谓的"最强模型"。

从1月到3月的Stratix评测中,没有任何一家厂商能在五项基准测试中的两项以上领先。


Claude Opus 4.6在SWE-bench Lite上拔得头筹,却在MATH-500上跌出前25名。Grok 4 Fast以89.0%的得分统治LiveCodeBench,却在Terminal-Bench上只拿到25.0%。Gemini 3 Pro拿下Terminal-Bench第一,却连LiveCodeBench前十都没进。

这意味着什么?如果你只看一张排行榜选模型,至少会在一个关键场景上栽跟头。

更麻烦的是AI给AI打分这件事。

我们让六个前沿模型用同一套评分标准,评判同一段智能体执行记录。最终得分差距在10分以内,表面看达成了共识。

但翻开推理过程,完全是另一回事:Claude Opus 4.6扣分是因为审批文档不完整;Gemini 3.1 Pro揪出了前置步骤的排序漏洞;GPT-5.4只关心工具调用是否完整。四个裁判,四种失败理论,四种对"好"的定义。

单裁判流水线里,所有这些细微差别都被压缩成一个数字。

对开发团队来说,现状已经很清楚。模型发布节奏越来越快,依赖单一排行榜或单一裁判评测不再可行。持续的多模型评测,加上完整的推理透明度,正迅速成为生产级AI系统的入场券。

你们现在怎么处理模型选型?有没有在流水线里用多模型评判或陪审团机制?发布周期加快后,哪些评测实践最靠得住?

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
市民在上海街边看到“好东西”售价仅35元,最后竟被迫支付了8700!还是假货!果断报警

市民在上海街边看到“好东西”售价仅35元,最后竟被迫支付了8700!还是假货!果断报警

环球网资讯
2026-05-12 14:30:58
奥迪 E7X 开启预售 限时28.98万元起

奥迪 E7X 开启预售 限时28.98万元起

华西都市报
2026-05-13 02:15:07
胖虎:有一次巴西队半场出现争执,安帅抽完烟后讲话平复众人

胖虎:有一次巴西队半场出现争执,安帅抽完烟后讲话平复众人

懂球帝
2026-05-13 08:57:18
75岁大爷与保姆生下儿子,做亲子鉴定后,大爷却被子女们气得心梗

75岁大爷与保姆生下儿子,做亲子鉴定后,大爷却被子女们气得心梗

黄家湖的忧伤
2025-03-06 09:30:21
中国政府奖学金留学人员抵达平壤,正式开启在朝留学生活

中国政府奖学金留学人员抵达平壤,正式开启在朝留学生活

大风新闻
2026-05-11 08:36:09
A·史密斯认为尼克斯队,是勒布朗·詹姆斯5亿美元合同的最佳选择

A·史密斯认为尼克斯队,是勒布朗·詹姆斯5亿美元合同的最佳选择

好火子
2026-05-13 00:41:17
今天上海局部有雨,最高31℃

今天上海局部有雨,最高31℃

鲁中晨报
2026-05-13 07:26:05
“不签20%分成协议,就不让招生、不给宣传”,深圳红立方被曝向商户索要利润分成

“不签20%分成协议,就不让招生、不给宣传”,深圳红立方被曝向商户索要利润分成

小陆搞笑日常
2026-05-13 00:12:34
1980年钟伟直呼毛主席大名,黄克诚举拐怒斥:你老小子真是忘了本

1980年钟伟直呼毛主席大名,黄克诚举拐怒斥:你老小子真是忘了本

史之铭
2026-05-12 20:53:20
死里逃生!U17国足时隔21年重返世界大赛,圆满晋级世少赛!

死里逃生!U17国足时隔21年重返世界大赛,圆满晋级世少赛!

田先生篮球
2026-05-13 09:29:30
奥巴梅扬拿灭火器狂喷高层遭弃用!马赛封闭集训变派对

奥巴梅扬拿灭火器狂喷高层遭弃用!马赛封闭集训变派对

仰卧撑FTUer
2026-05-12 18:18:06
伊朗北部发生地震 德黑兰震感明显

伊朗北部发生地震 德黑兰震感明显

财联社
2026-05-13 04:35:10
曾发涉港不当言论!NBA名记Shams:76人队解雇总经理莫雷

曾发涉港不当言论!NBA名记Shams:76人队解雇总经理莫雷

全景体育V
2026-05-13 08:14:35
法总统候选人梅朗雄放话:如果成功当选总统,法国将退出北约

法总统候选人梅朗雄放话:如果成功当选总统,法国将退出北约

上观新闻
2026-05-12 13:58:15
真怕黑色3分钟!国少最后阶段踢得太乱了 球迷:日本教练非蠢即坏

真怕黑色3分钟!国少最后阶段踢得太乱了 球迷:日本教练非蠢即坏

刀锋体育
2026-05-13 09:02:55
谁,在为俞浩的“表演”埋单?

谁,在为俞浩的“表演”埋单?

小蜜情感说
2026-05-12 16:06:53
皇马内乱不断,曼联酝酿重磅挖角巴尔韦德,夏窗强势出手

皇马内乱不断,曼联酝酿重磅挖角巴尔韦德,夏窗强势出手

夜白侃球
2026-05-13 09:35:03
手机号要变了:中国移动开了个头

手机号要变了:中国移动开了个头

林子说事
2026-05-12 18:37:55
看是御姐,脸还能打,肉却 “软趴趴” 了

看是御姐,脸还能打,肉却 “软趴趴” 了

飛娱日记
2026-03-13 11:31:29
十年前,易建联花1000万在洛杉矶买下豪宅,如今出售市值多少?

十年前,易建联花1000万在洛杉矶买下豪宅,如今出售市值多少?

小兰聊历史
2026-04-26 08:44:22
2026-05-13 10:04:49
字节漫游指南
字节漫游指南
有态度网友ytd
3787文章数 40关注度
往期回顾 全部

科技要闻

谷歌剧透安卓重大升级 Gemini深度集成底层

头条要闻

牛弹琴:印度的大麻烦来了 CNN的报道更是触目惊心

头条要闻

牛弹琴:印度的大麻烦来了 CNN的报道更是触目惊心

体育要闻

骑士终于玩明白了?

娱乐要闻

白鹿风波升级!掉粉20万评论区沦陷

财经要闻

深圳夫妻囤芯片,身家飙涨320亿

汽车要闻

吉利银河“TT”申报图曝光 电动尾翼+激光雷达

态度原创

房产
健康
游戏
旅游
公开课

房产要闻

穗八条引爆楼市!万博宝藏红盘,五一劲销出圈

干细胞能让人“返老还童”吗

《深海迷航2》也在发售前两天泄露完整版本

旅游要闻

5月15日嗨玩节来袭 蚌埠本土文创邀您带走珠城韵味

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版