网易首页 > 网易号 > 正文 申请入驻

成本2.03美元、幻觉率飙升50%,Anthropic新王登顶暗藏致命伤

0
分享至

独立评测机构Artificial Analysis最新数据显示,Anthropic的旗舰模型在综合知识、编程、科学推理与事实准确性等九项测试中拿下61分,将Fable 5(60分)、GPT-5.6 Sol(59分)等对手甩在身后。该成绩是在模型公开发布前,由评测方与Anthropic合作完成的。

编程对决中,这款新模型在“xhigh”推理等级下配合Claude Code,于Artificial Analysis编程指数上并列第一。而在模拟真实终端环境的Terminal-Bench v2.1中,“max”设定使其斩获89%的成绩,追平了此前的领头羊GPT-5.6 Sol。


科学推理层面,它在涵盖多学科的高难度测试Humanity's Last Exam中拿到53%,与Fable 5持平。在阿贡国家实验室与伊利诺伊大学香槟分校构建的物理基准CritPt上,该模型同样和Fable 5打成平手,但仍落后于GPT-5.6 Sol、GPT-5.5 Pro与GPT-5.6 Terra。

事实准确性却是明显短板。在AA-Omniscience检测中,尽管得分较上代提升了7个点,仍不敌Fable 5。更棘手的是,模型在不确知时更倾向直接作答,导致幻觉率猛增14个百分点,达到50%。

Epoch AI的评测结果进一步勾勒出竞争态势:Claude新旗舰的整体能力指数得分为159,略低于Fable 5的161分。但若只看软件工程基准SWE-ECI,它与Fable 5同为161分,优于GPT-5.6 Terra和上代Claude旗舰。GPT-5.6 Sol则在两项指标上均保持领先。

这场前沿模型竞赛的胶着状态已被坐实——没有哪一款能建立清晰优势,这为“AI模型终将走向商品化”的论点增添了分量。

成本端是该模型另一张牌。在智能指数测试中,单任务平均开销仅2.03美元,低于带后备方案的Fable 5(2.75美元),但高于上代旗舰的1.80美元和Sonnet 5的1.53美元。在“high”和“xhigh”两个推理等级上,它的表现均优于上代及Sonnet 5,且成本更低。

Vals.ai借助面向编程的Vibe Code Bench,在五个推理等级上对其进行了测试。得分从“low”的76.7%升至“medium”的82%,再到“high”的89.8%,但随后在“xhigh”(88.3%)和“max”(88.4%)两个最高档位出现回落。

这两个高档位的成本反而高出许多。Vals.ai发现,更高的推理等级倾向于产出更复杂也更容易出错的方案,而“high”等级生成的方案更简洁,能更可靠地满足需求。Terminal-Bench 2.1也呈现类似规律。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
四大粮商估计做梦都想不到:中国不买大豆了,开始改买电和废气了

四大粮商估计做梦都想不到:中国不买大豆了,开始改买电和废气了

麓谷隐士
2026-07-26 07:25:03
某大厂员工自爆:经过了六七轮面试,才拿到的工作机会,以为一定是个非常重要的岗位,没想到进去后发现,只要有手有脚就能干

某大厂员工自爆:经过了六七轮面试,才拿到的工作机会,以为一定是个非常重要的岗位,没想到进去后发现,只要有手有脚就能干

李东阳朋友圈
2026-07-25 08:28:36
谢霆锋:有几年,每次碰到爸爸,他都给我说一句话,说没钱,想赚

谢霆锋:有几年,每次碰到爸爸,他都给我说一句话,说没钱,想赚

秀语千寻
2026-07-26 19:39:15
20万人凯道集会,蒋万安号召力被戳穿

20万人凯道集会,蒋万安号召力被戳穿

叮当当科技
2026-07-27 08:26:06
国家统计局:上半年算力需求大幅增长,推动电子行业利润同比增长96.9%

国家统计局:上半年算力需求大幅增长,推动电子行业利润同比增长96.9%

界面新闻
2026-07-27 09:38:31
全国每人吃5斤才能吃完,昔日网红食物价格腰斩

全国每人吃5斤才能吃完,昔日网红食物价格腰斩

新周刊
2026-07-25 16:05:57
哈登成最大笑话,詹姆斯降薪4870万组史诗级五巨头,依旧高居联盟第一

哈登成最大笑话,詹姆斯降薪4870万组史诗级五巨头,依旧高居联盟第一

体坛风之子
2026-07-26 07:00:22
携程被罚51.79亿!原来这些都是携程系的!江浙沪周边亲子游目的地汇总,自驾省钱秘籍来啦!

携程被罚51.79亿!原来这些都是携程系的!江浙沪周边亲子游目的地汇总,自驾省钱秘籍来啦!

平湖在线
2026-07-26 10:34:27
两党罕见达成一致:要用从中国收来的钱,帮助美国实现工业振兴

两党罕见达成一致:要用从中国收来的钱,帮助美国实现工业振兴

忠于法纪
2026-07-27 09:27:32
考古发现,陈胜吴广起义最大错误,不是兵不够,而是永远不懂这个

考古发现,陈胜吴广起义最大错误,不是兵不够,而是永远不懂这个

优趣纪史记
2026-07-25 18:07:39
朱芳雨下课有几点原因,陈海涛忍无可忍,让儿子陈浩峰接任总经理

朱芳雨下课有几点原因,陈海涛忍无可忍,让儿子陈浩峰接任总经理

负面黑洞
2026-07-24 19:06:12
79岁王奎荣将北京140平房子、2000多万存款,全部赠予小37岁妻子

79岁王奎荣将北京140平房子、2000多万存款,全部赠予小37岁妻子

国际阿尝
2026-07-04 09:05:08
人口迁徙大势已定!大批人离开深圳,纷纷涌向这三座城市

人口迁徙大势已定!大批人离开深圳,纷纷涌向这三座城市

阿笎评论哥
2026-07-26 23:50:46
王虹知网论文数量是 0,她的论文数量,还比不上一个普通老师

王虹知网论文数量是 0,她的论文数量,还比不上一个普通老师

老张侃诗词
2026-07-25 21:05:04
普京:我确信乌克兰迟早会失去西部土地

普京:我确信乌克兰迟早会失去西部土地

桂系007
2026-07-27 03:17:51
非必要不做肠镜?医生提醒:只要做过肠镜,这7件事一定要多注意

非必要不做肠镜?医生提醒:只要做过肠镜,这7件事一定要多注意

叙说医疗健康
2026-07-25 06:00:22
不是76人!也不是热火!新赛季东部最强球队诞生,联盟最强死亡五小出炉

不是76人!也不是热火!新赛季东部最强球队诞生,联盟最强死亡五小出炉

大卫的篮球故事
2026-07-26 20:23:23
李春江回归宏远?权力棋局下的13年反转

李春江回归宏远?权力棋局下的13年反转

衔春信
2026-07-27 00:41:40
养老金迎来“一好一坏”消息?提醒退休人员,学会区分真假信息

养老金迎来“一好一坏”消息?提醒退休人员,学会区分真假信息

白昼说故事
2026-07-27 09:05:45
大S台北信义豪宅已完成过户!具俊晔和两个孩子各拿三分之一,汪小菲代管背后有深意

大S台北信义豪宅已完成过户!具俊晔和两个孩子各拿三分之一,汪小菲代管背后有深意

喜欢历史的阿繁
2026-07-26 17:43:17
2026-07-27 10:07:00
爬虫饲养员
爬虫饲养员
业余养了只叫“龙虾”的AI爬虫,主业是给互联网打工。
300文章数 58关注度
往期回顾 全部

科技要闻

苹果眼镜目标WWDC2027亮相,摄像头成最难一关

头条要闻

因凡蒂诺回应批评称争议判罚原本就常见 还提到伊朗队

头条要闻

因凡蒂诺回应批评称争议判罚原本就常见 还提到伊朗队

体育要闻

詹姆斯的最后一集,依旧最艰难的路?

娱乐要闻

演员王建隆在家中去世,年仅43岁

财经要闻

不肯裁员的善人:西安商人严鹏之死

汽车要闻

轿跑姿态+大空间/标配655km续航 奇瑞风云A9置换价10.68万起

态度原创

家居
健康
亲子
艺术
公开课

家居要闻

2026建博会(广州) 公装联探展交流活动

教你三步快速识别中风

亲子要闻

6岁女童接受基因编辑实验后死亡 #基因编辑悲剧# #金牌药师

艺术要闻

739米!深圳差点就拥有“中国第一高楼”

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版