网易首页 > 网易号 > 正文 申请入驻

DeepSeek V4终于补上视觉:多模态Agent能力逼近Opus 4.8

0
分享至



DeepSeek 的 Agent 路线,终于补上了视觉这一块。

就在今天下午,DeepSeek 正式上线实验性多模态视觉理解模型 DeepSeek-V4-Flash-Vision-Exp,并同步开放 API。用户只需将模型名称设置为 deepseek-v4-flash-vision-exp,即可在原有 V4-Flash 的基础上加入图片理解能力。

按照 DeepSeek 公布的数据,新模型在纯文本 Agent、推理和世界知识等能力上与正式版 V4-Flash 基本持平,而在需要视觉理解的 Agent Benchmark 上出现明显提升。DeepSeek 称,其多模态 Agent 能力已经接近 Claude Opus 4.8。

这次更新其实延续了 DeepSeek 最近一个相当清晰的方向:把模型能力进一步推向 Agent。

在今年 4 月 V4 发布后,DeepSeek 一直在强化工具调用和 Agent 能力。7 月底更新的 V4-Flash 已专门针对 Agent 做过后训练,8 月 13 日正式版 V4-Pro 又进一步提升了生产环境中的 Agent 表现,并原生支持 Responses API。与此同时,DeepSeek 最近还开放了自家的 Agent 框架 DeepSeek Harness,试图把模型、工具调用、文件操作、搜索、子 Agent 等能力组织进同一套工作流。

此前,视觉是这套体系里此前比较明显的一块缺口。 但在昨天,Harness v0.1.0-rc.8 更新中,DeepSeek 已经加入更完整的多模态支持:模型适配器可以配置原生图片请求,/goal、/plan 等指令开始支持图文输入,同时还修复了大尺寸图片和历史图片过多导致请求失败的问题。现在随着 V4-Flash-Vision-Exp 上线,Harness 不再只是“接口上做好了看图准备”,而是有了 DeepSeek 自己的原生多模态模型可以接入。

从跑分看,新模型的提升并不主要来自文本能力。在考察终端环境复杂任务执行能力的 Terminal Bench 2.1 上,新模型从 V4-Flash 的 82.7 提升至 83.9;在面向真实软件工程长任务的 DeepSWE 上,从 54.4 升至 59.3;NL2Repo 和 DSBench-Hard 也分别提升至 57.7 和 63.6。整体来看,新模型原本已经较强的 Coding Agent 能力继续小幅上升。

更明显的变化出现在视觉任务上。比如在考察专业图表理解能力的 Chartography 中,新模型达到 64.3(p0.95);此外,ApexBench Pass@1 为 36.5,Agents' Last Exam 为 27.3,ZeroBench Pass@5 为 35.0。DeepSeek 特别说明,旧版 V4-Flash 在 ApexBench 和 Agents' Last Exam 中会直接忽略其中的多模态信息,因此这部分差距更能反映加入视觉能力后的变化。


(来源:DeepSeek)

这对于 Agent 的意义,比普通的“看图问答”更大。现实中的 Agent 很多时候并不是只在文本和代码之间工作。它需要读网页布局、判断按钮位置、理解截图和图表、查看生成出来的 PPT 或网页效果,再根据视觉结果继续修改。也就是说,只有能“看见”自己的工作结果,Agent 才更容易形成完整的执行闭环。

DeepSeek 官方展示的三个案例也都指向这一点:一个是自动制作高端西藏自驾游 PPT,一个是根据视觉要求重新设计 Harness 官网,另一个则是制作带 3D 黏土怪物动态效果的前端 Demo。它们都不只是识别一张图片,而是需要让模型在长链条任务中同时处理视觉信息、代码和工具调用。


(来源:DeepSeek)

API 层面,DeepSeek 也直接围绕 Agent 使用做了适配。V4-Flash-Vision-Exp 支持 Chat Completions、Messages 和 Responses 三种格式,图片可以通过 Base64、外部 URL 或 Files API 传入。图片会转换成 token 计费,单张图片最多占 384 tokens,价格与 V4-Flash 保持一致。新上线的 Files API 还允许同一张图片上传一次后,在多个请求中通过 file_id 重复调用,减少重复传输。官方文档显示,目前 Files API 支持 JPEG、PNG、GIF 和 WebP。


(来源:DeepSeek)

当然,这并不是 DeepSeek 第一次做多模态。早在 2024 年,DeepSeek 就发布过 DeepSeek-VL,随后又推出统一多模态理解与生成模型 Janus。不同之处在于,这一次视觉能力第一次真正进入 V4 主力模型、官方 API 和 Harness Agent 工作流。

目前 V4-Flash-Vision-Exp 仍然带着 “Exp” 后缀,DeepSeek 也明确将其定义为实验模型,尚未公布新的开源权重或完整技术报告。因此,它还不能被视为 V4 多模态能力的最终形态。

但从最近几次连续更新来看,DeepSeek 的路径已经越来越明确:V4 负责模型能力,Harness 负责把模型接入真实任务,而视觉则让 Agent 从主要处理文本和代码,进一步开始理解屏幕上的世界。

参考资料

1.https://api-docs.deepseek.com/updates/

2.https://api-docs.deepseek.com/quick_start/pricing/

3.https://api-docs.deepseek.com/news/news260424/

4.https://github.com/deepseek-ai/DeepSeek-Harness

5.https://github.com/deepseek-ai/DeepSeek-VL

6.https://github.com/deepseek-ai/Janus

运营/排版:何晨龙

注:封面/首图由 AI 辅助生成

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
利物浦6000万镑追明泰达个人协议,布莱顿拒放行

利物浦6000万镑追明泰达个人协议,布莱顿拒放行

体坛观察猿
2026-08-22 02:22:05
完爆 1.2 亿恩佐!曼城绝杀捡漏!5100 万锁定罗德里完美替身

完爆 1.2 亿恩佐!曼城绝杀捡漏!5100 万锁定罗德里完美替身

澜归序
2026-08-21 08:01:09
中俄没能最后一刻挽救伊朗,才知道伊朗为何没选歼10:有4点原因

中俄没能最后一刻挽救伊朗,才知道伊朗为何没选歼10:有4点原因

琴音缭绕回
2026-08-21 13:49:07
被上海、成都惊艳到了!满大街都是“九分裤+短靴”,时髦又松弛

被上海、成都惊艳到了!满大街都是“九分裤+短靴”,时髦又松弛

时尚穿搭生活馆
2026-08-21 22:36:30
数百名医生已证实:西地那非的真相,最好花点时间看看

数百名医生已证实:西地那非的真相,最好花点时间看看

橘子约定
2026-08-21 09:52:33
金融监管总局:对恒大人寿保险有限公司吊销业务许可证

金融监管总局:对恒大人寿保险有限公司吊销业务许可证

界面新闻
2026-08-21 17:21:51
2021年陕西女子给外甥补课,不料引狼入室,停电后外甥果断出手

2021年陕西女子给外甥补课,不料引狼入室,停电后外甥果断出手

纪实文录
2025-02-28 16:24:01
阿森纳官宣第5援!28岁英格兰国脚中卫5500万镑加盟 签约5年穿15号

阿森纳官宣第5援!28岁英格兰国脚中卫5500万镑加盟 签约5年穿15号

我爱英超
2026-08-21 23:28:01
首轮 3-0 大胜后再战豪门!西班牙人主场能否掀翻皇马

首轮 3-0 大胜后再战豪门!西班牙人主场能否掀翻皇马

内在觉知
2026-08-22 01:20:03
给央视《重器》演技排座次:于和伟第2,蒋奇明第7,第1名意外

给央视《重器》演技排座次:于和伟第2,蒋奇明第7,第1名意外

立场影视
2026-08-20 18:56:55
学历被撤销,唐家兄弟恩怨死结!哥哥频频出镜喊冤,弟弟抛出“炸弹”:一份步城一中的证明

学历被撤销,唐家兄弟恩怨死结!哥哥频频出镜喊冤,弟弟抛出“炸弹”:一份步城一中的证明

火山詩话
2026-08-21 07:39:12
两女孩买三座放零食后续!官方正式定调,站票求让座大妈不服不行

两女孩买三座放零食后续!官方正式定调,站票求让座大妈不服不行

冰语历史
2026-08-20 17:39:27
港媒:中国高铁已被“粪便淹没”!再不解决后果严重,真的假的?

港媒:中国高铁已被“粪便淹没”!再不解决后果严重,真的假的?

青山夜谈
2026-07-23 03:37:44
福彩3d第224期最精准双飞稳定3d号码预测/福彩3d今日预测开奖结果

福彩3d第224期最精准双飞稳定3d号码预测/福彩3d今日预测开奖结果

彭卉玩具
2026-08-22 04:57:50
河南省最新任免名单

河南省最新任免名单

天命生商
2026-08-21 19:54:47
官方:3名球迷辱骂身着非主队球衣男童父亲,对申花主场予以通报批评

官方:3名球迷辱骂身着非主队球衣男童父亲,对申花主场予以通报批评

懂球帝
2026-08-21 22:17:10
他鼓吹日韩印组团对付中国,日本网民:不要韩印

他鼓吹日韩印组团对付中国,日本网民:不要韩印

环球时报国际
2026-08-21 08:05:12
冯小刚花60万给女儿徐朵整牙,最后扔下一句:骨相不行,别演戏了

冯小刚花60万给女儿徐朵整牙,最后扔下一句:骨相不行,别演戏了

西楼知趣杂谈
2026-08-19 21:12:47
在中国发现一个奇怪的现象:父母就像一个袋子,一旦父母不在了,什么舅舅姑姑表兄弟,就像袋子里的沙子,都散了,不再相互往来

在中国发现一个奇怪的现象:父母就像一个袋子,一旦父母不在了,什么舅舅姑姑表兄弟,就像袋子里的沙子,都散了,不再相互往来

心理观察局
2026-08-05 07:07:27
曼城“大甩卖”引詹俊惊叹,夏窗最多11人离队,或重启恩佐谈判!

曼城“大甩卖”引詹俊惊叹,夏窗最多11人离队,或重启恩佐谈判!

绿茵舞着
2026-08-21 23:01:14
2026-08-22 05:32:49
DeepTech深科技 incentive-icons
DeepTech深科技
麻省理工科技评论独家合作
17115文章数 515195关注度
往期回顾 全部

科技要闻

阿里AI的两面:云赚56亿,千问烧掉138亿

头条要闻

30岁女干部突遇洪水不幸牺牲 更多细节公布

头条要闻

30岁女干部突遇洪水不幸牺牲 更多细节公布

体育要闻

续哈登+招沃特森=骑士赌了

娱乐要闻

冯绍峰七夕带儿子游玩!次日聚会

财经要闻

蔡昉解读经济:扩大消费需求的政策思考

汽车要闻

2026成都车展:小鹏全阵容亮相 三款新车套件上新

态度原创

房产
时尚
家居
本地
公开课

房产要闻

两大热盘即将入市!三亚又一批安居房狠货要炸场了!

全网全文背诵:阿姨你找谁啊?

家居要闻

2026建博会(广州) 公装联探展交流活动

本地新闻

《牛来》的一声“妈妈”,到底多少人被精神污染了

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版