网易首页 > 网易号 > 正文 申请入驻

Kimi K3数学验证更严谨 Claude Fable 5速度却快近三倍

0
分享至

“正确答案”和“可信的答案”之间,往往隔着一整套验证工序。当模型给出一个看似合理的最终数值,中间的计算步骤是否经得起推敲?生成的代码能否跑通全部断言?这才是生产环境真正关心的问题。

近日,一项针对Kimi K3与Claude Fable 5的实测对比发布,测试将焦点从“答没答对”进一步延伸到“中间状态是否自洽”以及“代码是否完整可执行”。结果显示,两款模型在不同维度上呈现出明显分化。


最直观的差异体现在响应速度上。在相同的测试条件下,Claude Fable 5的平均延迟为37.1秒,而Kimi K3达到108.0秒。对于追求低延迟的应用场景,这几乎是三倍的时间差。不过,速度的快慢并不能直接等同于回答质量的高低,这一点在数学问题的验证环节表现得尤为突出。

测试从数学推理、代码生成、物理问题以及约束推理四个方向展开,所有任务采用完全相同的提示词与评判标准。测试方强调,判断成功与否的依据并不是HTTP状态码返回200,而是比对了最终值、中间状态、finish_reason字段、代码的可执行性以及断言是否一致。

在代码任务中,要求实现一个包含请求ID重试合并、ISO-8601时间处理、半开区间过滤、token与延迟聚合及多键排序功能的Python函数。首轮测试将max_tokens限制在4000,两个模型的响应都因达到长度上限而终止。重试时将max_tokens扩大至7000,Kimi K3耗时145.2秒,生成5199个completion tokens;Claude Fable 5耗时46.6秒,生成3710个completion tokens。最终两者的Python实现都通过了全部8项断言。

值得注意的是token消耗规模。Kimi K3首轮报告了约12500个reasoning tokens,整轮completion tokens为13975个;Fable 5的completion tokens则为10187个。更大体量的内部推理虽然带来了更细致的校验过程,但也推高了延迟,并可能导致在有限输出预算下可见代码篇幅被压缩。

数学题的测试把“中间一致性”摆上台面。题目是一个偏置硬币问题,设定正面概率为3/5,允许模式重叠,要求计算首次出现“HHTH”序列的期望次数。正确期望值为715/54,约等于13.2407。Kimi K3在求解时对状态方程、模式边界以及公平硬币特例下的数值做了交叉验证。Claude Fable 5交出的最终数值与正确答案一致,但在推导过程中有两个中间状态值与模型自身列出的方程无法匹配。

物理题方面,两道题的表现没有拉开差距。一个涉及完全非弹性碰撞、摩擦和弹簧压缩的两阶段问题,两个模型都正确算出了碰撞后速度2.4米/秒、碰撞中损失能量21.6焦耳以及弹簧最大压缩量约0.2212米。另一道约束推理题要求确定Eli、Bo、Ada、Cici、Deng五人唯一可行的日程安排,两者同样给出了一致的结果。

基于以上表现差异,测试方提出了一个按任务类型做模型路由的思路:对于需要产出大规模可测试代码的任务,可以从Claude Fable 5开始评估;涉及严密数学推导的场景,则继续保留Kimi K3。针对长篇代码,特别建议将finish_reason字段和实际执行测试列为必查项,以防止输出被截断却未察觉的情况。

同时,测试方也明确指出了本次比较的边界。这是基于小样本量的实测记录,并不是通用的排行榜。真正的生产环境评估,每个类别需要重复20到50次,并系统性地测量成功率、截断比例、首token时间、P50/P95/P99延迟、completion tokens消耗以及每单位获批结果的成本。

在这轮样本范围内,Claude Fable 5展示了一条更快的交付路径,而Kimi K3对于数学推理的中间状态执行了更审慎的校验。至于优先选速度还是优先选验证深度,这个问题并没有一刀切的答案。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
美股半导体突然“翻脸”,AI这根橡皮筋还能拉多久?

美股半导体突然“翻脸”,AI这根橡皮筋还能拉多久?

海右那人
2026-07-18 09:08:00
今日足球看点:世界杯季军战,法国VS英格兰,失意豪门荣誉之战

今日足球看点:世界杯季军战,法国VS英格兰,失意豪门荣誉之战

Shoot体育
2026-07-18 07:15:05
卫报:因凡蒂诺获超200足协支持,有望连任第四届

卫报:因凡蒂诺获超200足协支持,有望连任第四届

懂球帝
2026-07-17 22:20:06
大胆预测辛纳和阿卡的大满贯数量,能赶超德约的24冠吗?

大胆预测辛纳和阿卡的大满贯数量,能赶超德约的24冠吗?

海阔山遥YAO
2026-07-18 04:51:55
美国国务卿鲁比奥表示,美国将重点打击左翼团体

美国国务卿鲁比奥表示,美国将重点打击左翼团体

老王说正义
2026-07-17 10:16:40
亚马逊《战神》剧集突换主演:已拍4集全部作废,原因公布

亚马逊《战神》剧集突换主演:已拍4集全部作废,原因公布

碳基打工人
2026-07-18 02:15:26
省厅遇见已经是局长的前女友,她撕了我工作证,省长帮我捡了起来

省厅遇见已经是局长的前女友,她撕了我工作证,省长帮我捡了起来

千秋文化
2026-07-17 19:15:49
首发价5999元起!九号Fz5电动自行车上市:最远能跑100公里

首发价5999元起!九号Fz5电动自行车上市:最远能跑100公里

快科技
2026-07-17 19:24:05
印度正在毒杀全世界?7亿人的排泄物,毁了人类积攒百年的抗生素?

印度正在毒杀全世界?7亿人的排泄物,毁了人类积攒百年的抗生素?

阿器谈史
2026-06-25 14:17:40
结直肠肿瘤早期表现不典型,身体异常变化别忽略

结直肠肿瘤早期表现不典型,身体异常变化别忽略

中医陈旺医生
2026-07-18 01:55:11
再见了,布朗尼!庇护到期,父子篮球结束

再见了,布朗尼!庇护到期,父子篮球结束

体育新角度
2026-07-17 12:06:36
俄乌战争的拐点来了

俄乌战争的拐点来了

报人刘亚东
2026-07-12 10:48:50
队报:劳塔罗本届世界杯已完成救赎,他是阿根廷队的关键人物

队报:劳塔罗本届世界杯已完成救赎,他是阿根廷队的关键人物

懂球帝
2026-07-17 16:11:17
英法官痛斥巴勒斯坦人国际司法中心缺乏诚信——起诉以军士兵极其荒谬,反赔士兵8.2万镑

英法官痛斥巴勒斯坦人国际司法中心缺乏诚信——起诉以军士兵极其荒谬,反赔士兵8.2万镑

老王说正义
2026-07-17 02:08:38
严重挑衅中国!一国党,找死!

严重挑衅中国!一国党,找死!

澳洲财经见闻
2026-07-17 04:34:44
1981年,何长工探望叶剑英,闲聊时为何叮嘱:你这两个月注意点?

1981年,何长工探望叶剑英,闲聊时为何叮嘱:你这两个月注意点?

云霄纪史观
2026-07-18 01:53:40
土耳其无人机击落中国造CH-95,当场炸成火球,释放出重磅信号

土耳其无人机击落中国造CH-95,当场炸成火球,释放出重磅信号

史行途
2026-07-17 02:15:52
大女儿长的就讨厌!宝妈晒两个女儿,差距太大引关注,难怪会偏心

大女儿长的就讨厌!宝妈晒两个女儿,差距太大引关注,难怪会偏心

世界圈
2026-07-13 12:39:40
世界杯三四名决赛遇冷:英法战仍有七千张门票未售出

世界杯三四名决赛遇冷:英法战仍有七千张门票未售出

绿茵狂热者
2026-07-18 00:44:38
三个亿的南锣鼓巷老宅,为何让父子反目成仇?

三个亿的南锣鼓巷老宅,为何让父子反目成仇?

天气观察站
2026-07-18 00:13:16
2026-07-18 10:04:49
Ping值焦虑
Ping值焦虑
有态度网友ytd
287文章数 67关注度
往期回顾 全部

科技要闻

WAIC2026看什么?这份"不迷路"攻略请收好

头条要闻

美军连续七晚空袭伊朗 伊朗称将进入"全面进攻"阶段

头条要闻

美军连续七晚空袭伊朗 伊朗称将进入"全面进攻"阶段

体育要闻

30亿欧对决,世界杯季军战毫无意义?

娱乐要闻

曲婉婷自爆患癌!全网喊“苍天绕过谁”

财经要闻

股民当街砍博主!韩国股市 终极大屠杀

汽车要闻

把中国超跑卖到英国,比亚迪正在被世界看见

态度原创

家居
房产
艺术
本地
军事航空

家居要闻

2026建博会(广州) 公装联探展交流活动

房产要闻

炸场!十五五定调黄埔!科学城真正的红利赢家,藏不住了

艺术要闻

被遗忘的国家主席,书法写得真好啊!

本地新闻

十年了,为什么鬼怪CP还能让人美美嗑上?

军事要闻

伊朗议长:这是一场“生存之战”

无障碍浏览 进入关怀版