网易首页 > 网易号 > 正文 申请入驻

DeepSeek V4终于补上视觉:多模态Agent能力逼近Opus 4.8

0
分享至



DeepSeek 的 Agent 路线,终于补上了视觉这一块。

就在今天下午,DeepSeek 正式上线实验性多模态视觉理解模型 DeepSeek-V4-Flash-Vision-Exp,并同步开放 API。用户只需将模型名称设置为 deepseek-v4-flash-vision-exp,即可在原有 V4-Flash 的基础上加入图片理解能力。

按照 DeepSeek 公布的数据,新模型在纯文本 Agent、推理和世界知识等能力上与正式版 V4-Flash 基本持平,而在需要视觉理解的 Agent Benchmark 上出现明显提升。DeepSeek 称,其多模态 Agent 能力已经接近 Claude Opus 4.8。

这次更新其实延续了 DeepSeek 最近一个相当清晰的方向:把模型能力进一步推向 Agent。

在今年 4 月 V4 发布后,DeepSeek 一直在强化工具调用和 Agent 能力。7 月底更新的 V4-Flash 已专门针对 Agent 做过后训练,8 月 13 日正式版 V4-Pro 又进一步提升了生产环境中的 Agent 表现,并原生支持 Responses API。与此同时,DeepSeek 最近还开放了自家的 Agent 框架 DeepSeek Harness,试图把模型、工具调用、文件操作、搜索、子 Agent 等能力组织进同一套工作流。

此前,视觉是这套体系里此前比较明显的一块缺口。 但在昨天,Harness v0.1.0-rc.8 更新中,DeepSeek 已经加入更完整的多模态支持:模型适配器可以配置原生图片请求,/goal、/plan 等指令开始支持图文输入,同时还修复了大尺寸图片和历史图片过多导致请求失败的问题。现在随着 V4-Flash-Vision-Exp 上线,Harness 不再只是“接口上做好了看图准备”,而是有了 DeepSeek 自己的原生多模态模型可以接入。

从跑分看,新模型的提升并不主要来自文本能力。在考察终端环境复杂任务执行能力的 Terminal Bench 2.1 上,新模型从 V4-Flash 的 82.7 提升至 83.9;在面向真实软件工程长任务的 DeepSWE 上,从 54.4 升至 59.3;NL2Repo 和 DSBench-Hard 也分别提升至 57.7 和 63.6。整体来看,新模型原本已经较强的 Coding Agent 能力继续小幅上升。

更明显的变化出现在视觉任务上。比如在考察专业图表理解能力的 Chartography 中,新模型达到 64.3(p0.95);此外,ApexBench Pass@1 为 36.5,Agents' Last Exam 为 27.3,ZeroBench Pass@5 为 35.0。DeepSeek 特别说明,旧版 V4-Flash 在 ApexBench 和 Agents' Last Exam 中会直接忽略其中的多模态信息,因此这部分差距更能反映加入视觉能力后的变化。


(来源:DeepSeek)

这对于 Agent 的意义,比普通的“看图问答”更大。现实中的 Agent 很多时候并不是只在文本和代码之间工作。它需要读网页布局、判断按钮位置、理解截图和图表、查看生成出来的 PPT 或网页效果,再根据视觉结果继续修改。也就是说,只有能“看见”自己的工作结果,Agent 才更容易形成完整的执行闭环。

DeepSeek 官方展示的三个案例也都指向这一点:一个是自动制作高端西藏自驾游 PPT,一个是根据视觉要求重新设计 Harness 官网,另一个则是制作带 3D 黏土怪物动态效果的前端 Demo。它们都不只是识别一张图片,而是需要让模型在长链条任务中同时处理视觉信息、代码和工具调用。


(来源:DeepSeek)

API 层面,DeepSeek 也直接围绕 Agent 使用做了适配。V4-Flash-Vision-Exp 支持 Chat Completions、Messages 和 Responses 三种格式,图片可以通过 Base64、外部 URL 或 Files API 传入。图片会转换成 token 计费,单张图片最多占 384 tokens,价格与 V4-Flash 保持一致。新上线的 Files API 还允许同一张图片上传一次后,在多个请求中通过 file_id 重复调用,减少重复传输。官方文档显示,目前 Files API 支持 JPEG、PNG、GIF 和 WebP。


(来源:DeepSeek)

当然,这并不是 DeepSeek 第一次做多模态。早在 2024 年,DeepSeek 就发布过 DeepSeek-VL,随后又推出统一多模态理解与生成模型 Janus。不同之处在于,这一次视觉能力第一次真正进入 V4 主力模型、官方 API 和 Harness Agent 工作流。

目前 V4-Flash-Vision-Exp 仍然带着 “Exp” 后缀,DeepSeek 也明确将其定义为实验模型,尚未公布新的开源权重或完整技术报告。因此,它还不能被视为 V4 多模态能力的最终形态。

但从最近几次连续更新来看,DeepSeek 的路径已经越来越明确:V4 负责模型能力,Harness 负责把模型接入真实任务,而视觉则让 Agent 从主要处理文本和代码,进一步开始理解屏幕上的世界。

参考资料

1.https://api-docs.deepseek.com/updates/

2.https://api-docs.deepseek.com/quick_start/pricing/

3.https://api-docs.deepseek.com/news/news260424/

4.https://github.com/deepseek-ai/DeepSeek-Harness

5.https://github.com/deepseek-ai/DeepSeek-VL

6.https://github.com/deepseek-ai/Janus

运营/排版:何晨龙

注:封面/首图由 AI 辅助生成

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
星链支持出现故障,乌再遭无预警袭击!!!

星链支持出现故障,乌再遭无预警袭击!!!

山河路口
2026-10-14 16:57:45
中航协回应空姐下跪2天,荒唐事再现,不止知名董事长私生活被扒

中航协回应空姐下跪2天,荒唐事再现,不止知名董事长私生活被扒

娱瓜酱
2026-10-14 15:28:49
郑钦文教练问中国网友:我真的这么老吗?38岁 头发稀疏+胡须发白

郑钦文教练问中国网友:我真的这么老吗?38岁 头发稀疏+胡须发白

念洲
2026-10-14 07:14:29
日媒就俄方宣布中国黑龙江代表团访问了日俄争议岛屿提问,外交部回应

日媒就俄方宣布中国黑龙江代表团访问了日俄争议岛屿提问,外交部回应

环球网资讯
2026-10-14 15:24:17
散步半小时是错的?医生提醒:年过70岁,散步尽量做到这6点!

散步半小时是错的?医生提醒:年过70岁,散步尽量做到这6点!

白宸侃片
2026-10-14 12:04:47
新能源汽车的三大乱象:条条违法,个个坑钱!

新能源汽车的三大乱象:条条违法,个个坑钱!

梦归秋辰
2026-10-13 14:54:48
“收益亏完了,牛市像一场梦”

“收益亏完了,牛市像一场梦”

吴晓波频道
2026-10-14 08:34:26
江西省农业厅副厅长曹爱珍:仅5年从教师晋升副县长,耀眼明星终落马

江西省农业厅副厅长曹爱珍:仅5年从教师晋升副县长,耀眼明星终落马

十为先生
2026-09-11 14:18:51
性专家说:当一个异性开口跟你要钱,要礼物,不管对方是不是想试探你的真心,你都应该明白,你已被对方列入供养者行列

性专家说:当一个异性开口跟你要钱,要礼物,不管对方是不是想试探你的真心,你都应该明白,你已被对方列入供养者行列

心理观察局
2026-08-05 06:46:04
台湾舆论称大陆首度将国内法适用到台“友邦”现任官员身上,国台办:台湾从来不是一个国家,没资格与任何国家建立或保持所谓“外交关系”

台湾舆论称大陆首度将国内法适用到台“友邦”现任官员身上,国台办:台湾从来不是一个国家,没资格与任何国家建立或保持所谓“外交关系”

政知新媒体
2026-10-14 13:06:42
冷空气来了!广州未来几天…

冷空气来了!广州未来几天…

广州生活美食圈
2026-10-14 11:48:41
同属魏家核心骨干,为啥魏怀仁小儿子能保住性命?他曾露面劝降…

同属魏家核心骨干,为啥魏怀仁小儿子能保住性命?他曾露面劝降…

莫地方
2026-10-14 09:43:58
魏怀仁被判死刑,他儿子却活了下来:那劝降视频起多大的作用呢?

魏怀仁被判死刑,他儿子却活了下来:那劝降视频起多大的作用呢?

莫地方
2026-10-14 09:57:53
外交部:中国台湾地区对外交往必须按照一个中国原则处理

外交部:中国台湾地区对外交往必须按照一个中国原则处理

环球网资讯
2026-10-14 15:33:39
心脏好不好,不看心电图?心血管主任:这5个指标才是关键

心脏好不好,不看心电图?心血管主任:这5个指标才是关键

白宸侃片
2026-10-12 13:58:49
郑大世谈出任主帅:进入40岁以后,中年危机来了,我有些迷茫

郑大世谈出任主帅:进入40岁以后,中年危机来了,我有些迷茫

懂球帝
2026-10-14 16:08:17
新任陕西省委常委李九红已任省委政法委书记

新任陕西省委常委李九红已任省委政法委书记

澎湃新闻
2026-10-14 09:36:26
比一票否决更可怕的是全票通过,联合国五常一致对外会发生什么?

比一票否决更可怕的是全票通过,联合国五常一致对外会发生什么?

揽星戈
2026-10-14 00:10:40
悉尼奥运会前,袁伟民坚决反对“马家军”参赛:大不了不当局长了

悉尼奥运会前,袁伟民坚决反对“马家军”参赛:大不了不当局长了

小莜读史
2026-10-12 09:38:33
又一电诈头目落网!坑害国人超27亿,杀人不眨眼,全网呼吁查赵薇

又一电诈头目落网!坑害国人超27亿,杀人不眨眼,全网呼吁查赵薇

泪满过眼
2026-10-10 07:24:15
2026-10-14 18:19:00
DeepTech深科技 incentive-icons
DeepTech深科技
麻省理工科技评论独家合作
17365文章数 515233关注度
往期回顾 全部

科技要闻

苹果iPhone Duo完成大模型备案

头条要闻

开业未满半年的莫氏鸡煲珠海店暂停营业 莫叔:很正常

头条要闻

开业未满半年的莫氏鸡煲珠海店暂停营业 莫叔:很正常

体育要闻

巴萨4比1加拉塔萨雷:亚马尔杀穿地狱

娱乐要闻

胡歌觉得仙剑三很幼稚,忘了来时路?

财经要闻

赫尔曼・西蒙拆解下一轮产业机会

汽车要闻

豪华智能全拉满 比亚迪大汉不止旗舰级舒适

态度原创

亲子
游戏
家居
本地
公开课

亲子要闻

《婴幼儿心理师》职业自选学习

PS5破解版商店竟然重新上线了!版本还更新了

家居要闻

2026建博会(广州) 公装联探展交流活动

本地新闻

这个十一,林都伊春彻底出圈!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版