网易首页 > 网易号 > 正文 申请入驻

DeepSeek V4.1 Flash 1017 测评

0
分享至

基本情况:

DeepSeek 自从涨价以来,基本保持了每月更新。每次更新都会把 Flash 模型大幅向前推进,大步追赶世界顶级水准。新 Flash 延续了前代的基础智力,在 Agent 任务上则带来了堪比跨代的改进,正式超过前任国模 SOTA Kimi K3,成为国内最高水准的新代表。虽然 Kimi 也到了换代时间,但从成本来看,新 Flash 的性价比 SOTA 地位应该会持续更长时间。

逻辑成绩:

表格的排序切换为按 中位分数 降序。


*1 表格为了突出对比关系,仅展示部分 可对照模型 ,不是完整排序。

*2 题目及测试方式,参见: 大语言模型-能力横评 26-09 月榜 ,增加 #79 、 #80 。

Agent 成绩 :



  • 编程任务 :本次编程测试切换到 DeepSeek Harness 0.2.1 版本进行,使用标准模式。前一次 9 月测试时考虑到 DSH 尚在发展期,不够成熟,所以没有使用。今后所有 DeepSeek 模型均使用 DSH 进行测试。

  • 新 Flash 编程能力的泛化性较好,不同技术栈基本能保持相同水准,这是国产模型第一次达到如此高的泛化性能。因此虽然部分任务小问题偏多,但整体排序可以给到超过 K3 的位置。与上周的 Gemini Argon 相比基本持平,新 Flash 审美略好,但长板不够长。

  • 新 Flash 的审美总体上算国模翘楚,向上和 GPT6 Astra 也在伯仲之间,但整体品控比不上 Opus 5.5。而且审美可以跨技术栈复用,不会出现像之前仅在少数前端任务表现好,换技术栈就大幅衰退的情况。不过新 Flash 的审美倾向于把所有空间填满,如果是前端页面,就塞满各种小元素和文字,如果是 App ,则会弃用系统控件,使用质感更好的自绘控件。这方面和 Astra 行为更像,而 Opus 更高级的地方在于懂得留白。如果细看每个细节,其实也不经看,如果要用来上线和商用,反而要修的细节也更多。当然,Astra 也是如此。

  • 任务效率上,分任务场景而定。DeepSeek 系列模型一贯风格是追求思考充分再动手,代码一次成型。新 Flash 在常见的前端技术栈上也进化出集中写代码和集中验证的特征,较少在验证过程边验边改。这类任务新 Flash 的效率就有极大的改善,比如 J 任务上,新 Flash 步骤仅有旧版的20%,大部分都是验证过程优化带来的。不过前端以外的场景虽然效率也有优化,但没有如此大优势。横向对比,其效率仍不如 Astra,大致持平 6.1 Sol,极大幅优于 Opus 5.5。

  • 在品控上,新 Flash 更频繁的依赖截图视检和自动化脚本。得益于新 Flash 视觉能力的提升,能发现更多被旧版忽略的小细节,比如 UI 重叠,模型细节,纹理颜色等。不过 Flash 进行品控的操作效率还有优化空间,有时也会在不重要的环节浪费大量注意力,也带不来有效改进。不过 Flash 的指令遵循能力强,如果任务原本就有丰富细节要求,则可以利用 Flash 这种能力来直出更好的产物。

  • 推理能力 :新旧 Flash 在单轮和多轮推理任务上,表现有好有坏,与注意力有关的任务,则新版有显著提升,幻觉更低,更能从细节中找答案。而且新 Flash 在这类任务的 Token 效率也更高,用量仅有旧版的一半甚至更少。但需要大量探索和反思的任务,新 Flash 效率反而更低,也会多出 30%-40%,但得分并不会提高。换句话说,新 Flash 在复杂推理方面没有本质提升。但幻觉的改善可能会体现在大量长文本材料的中低难度任务上,一次成功率会大幅提高,也就是 DeepSeek 官方所述,针对 WorkBuddy 的改进。注意到前代 Flash 也是在幻觉方向做出了有效改进,或许 DeepSeek 已经走在正确路线上。

赛博史官曰:

数据和算力是大模型并列第一的驱动力,而从国内现状出发,向上拔高带不来等比提升的智力密度,反而是在舒适区间沉淀技术,打通关节,让数据飞轮持续运转,更有可能做到随着算力丰富和数据积累,逐步走出自己的 J 型增长曲线。纵然国际风云变幻,风高浪急,掌好自己的舵,跟紧航向仍是当下最明智的举动。等到时机成熟,更大尺寸模型终有羽翼丰满,天际畅游的一日。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
男子买房后,房价从240万降到了80万。在网上抱怨几句后,李诞说:你应该赶紧去买几瓶茅台...

男子买房后,房价从240万降到了80万。在网上抱怨几句后,李诞说:你应该赶紧去买几瓶茅台...

LULU生活家
2026-09-14 15:37:16
李小冉已离婚,无需承担前夫的巨额债务,法律边界清晰,提前布局守住了自身权益

李小冉已离婚,无需承担前夫的巨额债务,法律边界清晰,提前布局守住了自身权益

很哥
2026-10-19 22:31:55
辽宁男篮全力出击!拿下青岛队,库珀对位威瑟斯庞,央视直播

辽宁男篮全力出击!拿下青岛队,库珀对位威瑟斯庞,央视直播

体坛瞎白话
2026-10-20 09:15:05
美国威胁称,如果欧洲优先考虑本国卫星通信公司,将面临严重后果

美国威胁称,如果欧洲优先考虑本国卫星通信公司,将面临严重后果

山河路口
2026-10-19 13:02:09
一夫一妻制逐渐难维持!社会学家分析:未来3种模式将成为主流?

一夫一妻制逐渐难维持!社会学家分析:未来3种模式将成为主流?

月下守候
2026-10-19 22:46:50
彭德怀入朝只带三个四野副手:不是不想多带,是这三个人缺一不可

彭德怀入朝只带三个四野副手:不是不想多带,是这三个人缺一不可

纪史行者
2026-10-20 01:35:03
深圳楼市彻底分裂:有人2280万抢香蜜湖,有人280万龙岗房难卖

深圳楼市彻底分裂:有人2280万抢香蜜湖,有人280万龙岗房难卖

说故事的阿袭
2026-10-20 06:35:31
为什么作为发达国家,日本的社保越交越多,养老金却越领越少呢?

为什么作为发达国家,日本的社保越交越多,养老金却越领越少呢?

流苏晚晴
2026-10-18 19:42:32
官方:亨利与凯特-斯科特将主持2026年金球奖颁奖典礼

官方:亨利与凯特-斯科特将主持2026年金球奖颁奖典礼

懂球帝
2026-10-19 21:32:22
3大瓜!翟天临当爸、郭麒麟结婚、劣迹网红复出捞金,风波不断

3大瓜!翟天临当爸、郭麒麟结婚、劣迹网红复出捞金,风波不断

两只米老鼠
2026-10-18 18:10:00
10月20日提醒所有退休人员十月份养老金到账,一定要核对三样内容

10月20日提醒所有退休人员十月份养老金到账,一定要核对三样内容

白昼说故事
2026-10-20 10:11:05
19岁全红婵模样大变样,婴儿肥褪去清秀亮相,这哪还是从前那个假小子

19岁全红婵模样大变样,婴儿肥褪去清秀亮相,这哪还是从前那个假小子

罗纳尔说个球
2026-10-20 01:42:44
日本老人的“极简晚餐”,看完后才明白,日本为何平均寿命这么高

日本老人的“极简晚餐”,看完后才明白,日本为何平均寿命这么高

白米饭怎么吃
2026-10-19 16:48:25
35岁傅彪儿子,住豪宅生活奢华,单身满头白发,和母亲相依为命

35岁傅彪儿子,住豪宅生活奢华,单身满头白发,和母亲相依为命

生命之泉的奥秘
2026-10-20 05:59:45
金价崩了!水贝挤爆、大妈狂买:同一块金子,谁在哭,谁在笑?

金价崩了!水贝挤爆、大妈狂买:同一块金子,谁在哭,谁在笑?

牛锅巴小钒
2026-10-19 19:05:58
高三的儿子突然提出晚上和我一起睡,结果凌晨熟睡时,让我浑身发冷

高三的儿子突然提出晚上和我一起睡,结果凌晨熟睡时,让我浑身发冷

悬案解密档案
2026-06-26 13:37:02
一夜4场大败!就在刚刚,斯诺克乱套了:8连败的"磨王"绝杀世界第3!世界前5仅剩赵心童,顶尖选手集体回家

一夜4场大败!就在刚刚,斯诺克乱套了:8连败的"磨王"绝杀世界第3!世界前5仅剩赵心童,顶尖选手集体回家

锐评利物浦
2026-10-20 10:09:41
大连双线争冠,底线踢亚冠!体坛:英博今年票房收入5千万 球迷:去年还7千万呢

大连双线争冠,底线踢亚冠!体坛:英博今年票房收入5千万 球迷:去年还7千万呢

刀锋体育
2026-10-20 10:00:36
网友扎堆称“去漯河看极光”?当地文旅局回应:本地没有极光,但夜色灯光很漂亮,好吃的好玩的也很多

网友扎堆称“去漯河看极光”?当地文旅局回应:本地没有极光,但夜色灯光很漂亮,好吃的好玩的也很多

极目新闻
2026-10-19 15:20:23
李小冉,你这身材50岁??

李小冉,你这身材50岁??

健身迷
2026-04-24 10:41:50
2026-10-20 11:43:00
呼呼历史论
呼呼历史论
分享有趣的历史
697文章数 18451关注度
往期回顾 全部

科技要闻

新版MiniMax,能和DeepSeek掰手腕吗?

头条要闻

媒体:菲律宾对中国的有些举动已经属于蹬鼻子上脸

头条要闻

媒体:菲律宾对中国的有些举动已经属于蹬鼻子上脸

体育要闻

从NBA退役10年后,他真去警局上班了

娱乐要闻

港媒曝刘恺威与32岁黎纪君恋情,秘密恋爱两个月

财经要闻

这些科技股王,为什么总输给茅台?

汽车要闻

方盒子家族再添新成员 捷途自由者7实车体验

态度原创

艺术
家居
旅游
亲子
时尚

艺术要闻

这对福建夫妻,先婚后爱,30多年亦师亦友

家居要闻

2026建博会(广州) 公装联探展交流活动

旅游要闻

重走唐蕃古道:从丹噶尔古城看古道商贸新篇

亲子要闻

天然奶源如何进入配方科学,周鹏教授解析婴幼儿胃肠消化健康

4种“棒针毛衣”穿搭,美翻了!

无障碍浏览 进入关怀版