网易首页 > 网易号 > 正文 申请入驻

昨夜,DeepSeek Harness首发新版本:14项更新,多模态能力拉满!

0
分享至


智东西
作者 江宇
编辑 李水青

智东西8月20日报道,昨夜,DeepSeek Harness迎来公测后的首次重要更新。DeepSeek Harness v0.1.0-rc.8版本上线多模态能力成为这次更新的重头戏。

此次更新共带来14项调整,覆盖多模态输入、子代理协作、终端体验、工具调用和开发者支持等多个方向,既补齐了Agent处理图片等多模态任务的能力,也进一步完善了子代理协作、终端交互和工具调用体验。


新版支持原生图片请求和图文混合输入,/goal、/plan等命令也可以直接接收图片;与此同时,Claude Code、Codex进一步接入其子代理体系Windows终端体验以及图片请求、流式生成、自定义网关等一批问题也得到修复。

DeepSeek Harness于8月13日正式开启v0.1版本公测并同步开源。公测当晚,智东西曾第一时间拉取源码进行实测,用它完成88页论文翻译、贪吃蛇游戏开发等任务。

仅过去不到一周,这套Agent Harness又把多模态补上了。这次更新很快引起了DeepSeek Harness社区讨论。

有国内开发者看到更新后直接感叹:“DSH支持多模态了,奔走相告!”


海外开发者同样把注意力放在这两项能力上。有网友评价称,DeepSeek Harness正变得“越来越有意思”,多模态支持和更完善的子代理集成是一次明显推进。


更有意思的是,有开发者进一步扒出了DeepSeek Harness的“看图”方式:面对本身不支持图像输入的模型,它还能调用OCR、颜色统计、像素扫描等工具,把图片拆成结构化信息后再交给文本模型推理,相当于给纯文本模型拼出一套工具层的“视觉”。

GitHub:https://github.com/deepseek-ai/deepseek-harness/releases/tag/dsh-v0.1.0-rc.8

一、多模态正式补齐,直接“看图”

rc.8最明显的变化,就是DeepSeek Harness进一步补齐了多模态输入。

根据官方更新日志,DeepSeek模型适配器现在可以通过配置启用原生图片请求。对于具备视觉能力的模型,Harness可以直接把图片送进模型;/goal、/plan等指令也已经支持图文混合输入。

同时,输入框中的@菜单新增文件和会话引用,用户可以直接把本地文件、已有会话等内容拉进当前任务。

这意味着,过去主要围绕文本、代码和工具调用展开的Agent工作流,现在可以进一步把截图、图片等视觉信息纳入任务上下文。

子代理体系也继续扩充。

新版支持把Claude Code和Codex作为Profile Bundle按需安装。其中,Codex支持非交互权限模式以及多个命名实例,方便在同一个任务中配置不同Codex子代理。

Windows用户这次也被重点照顾。DeepSeek Harness的PTY终端加入持久PowerShell会话,并在极简模式预设中默认开启,减少命令执行过程中频繁重建终端环境的问题。

除了新能力,这次更新还集中修掉了一批公测后暴露的问题。

比如,当单张图片尺寸过大,或者历史会话中累积图片过多时,此前可能导致模型请求直接失败;新版对此进行了处理。

取消一次流式生成后,已经显示出来的回复前缀此前也可能不会被带入下一轮提问或者分叉会话,这一问题目前已经修正。

对于使用自定义OpenAI兼容网关的开发者,新版还修复了部分网关因请求格式差异而无法调用,以及推理内容回传缺失的问题。

二、纯文本模型也能“看图”,OCR和像素分析拼出工具层视觉

DeepSeek Harness补上原生图片请求之外,一个有意思的细节很快被开发者扒了出来。

网友Yinsen测试DeepSeek Harness处理图片时发现,当所调用的模型本身没有声明图像输入能力,直接调用read_image会首先失败。


但任务并没有就此停下。从其展示的执行轨迹来看,Harness随后会退化到另一套工具链:先进行OCR文字识别,再统计图片中的颜色比例、扫描部分像素行,同时读取图片尺寸、色彩模式等元信息。

例如,一张包含文字和简单图形的图片,可以被拆成“文字内容及坐标”“背景颜色比例”“特定区域像素变化”“图片尺寸”等多组信息。

最后,这些结构化结果会被重新交给文本大模型,让模型根据OCR文本、颜色占比、像素位置等证据“脑补”出整张图的大致内容。

因此,这种能力和视觉大模型直接理解图片仍然有明显区别。对于PPT截图、流程图、界面截图等结构相对明确的图片,它可以借助OCR和像素特征得到不少有效信息;面对真实照片、复杂空间关系等内容,这种工具链能够恢复的信息则会受到明显限制。

但从Agent Harness的角度看,这个设计颇有意思:视觉能力并不完全绑死在底座模型上,工具也可以承担一部分感知工作。

事实上,在官方加强多模态支持之前,DeepSeek Harness社区已经围绕视觉能力出现了一批插件,包括dsh-vision、dsh-vision-toolkit、modlens、dsh-auto-vision、dsh-subagent-vision以及通过pi2dsh桥接的pi-vision等。

其中一些方案就是通过OCR、像素分析、结构化证据或者独立视觉子代理,让纯文本模型间接处理图片;也有开发者通过自定义路由,为本身支持视觉的模型配置input: [text, image],直接接收图片。

rc.8上线后,原生多模态模型和这类工具层视觉方案可以进一步配合使用。

三、上线不到一周加速迭代,盯上了多模态和子代理

8月13日公测时,DeepSeek Harness团队就强调,其核心设计思路是“一切皆插件”:模型、工具、技能、会话、沙箱、存储、循环、调度和UI等Agent能力,都可以由不同插件组合和替换。当Agent Harness拥有越来越丰富的工具和子代理后,一些原本依赖单个模型能力的任务,也可以通过工具编排被重新拆解和实现。

此次rc.8又继续强化了这种插件化思路:视觉模型可以原生接收图片,纯文本模型也能借助视觉工具获得部分图像信息;Claude Code和Codex则可以作为子代理按需装进同一套Harness中。

除了这些核心变化,rc.8还加入了web_search并发查询、子代理reportDelivery及时唤醒父任务、本地运行dsh web自动打开浏览器等优化,并提升了大型历史会话分叉以及SQLite后端的读写性能。

结语:一切皆插件,把模型能力“拆开重组”

从8月14日开放公测,到如今把多模态和更多子代理能力装进来,DeepSeek Harness仍处于快速迭代阶段。

接下来值得期待的,是这套插件化Harness能否继续把更多模型、工具和Agent装进同一个体系,并跑出更复杂、更稳定的任务流程。


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
整容成瘾、陪睡上位?33岁杨紫背后男人曝光,是谁在“使坏”?

整容成瘾、陪睡上位?33岁杨紫背后男人曝光,是谁在“使坏”?

凛若秋霜
2026-07-23 15:06:22
5方9人大交易达成!库明加啊,完啦

5方9人大交易达成!库明加啊,完啦

聚焦科技与创新
2026-08-20 10:54:10
刚收下中国6000吨救命油,转头就砸中资营地,蒙古国翻脸太快

刚收下中国6000吨救命油,转头就砸中资营地,蒙古国翻脸太快

阿芒娱乐说
2026-08-20 06:01:57
统一不用等到2027?大陆这招温水煮青蛙太高明,美日全慌了

统一不用等到2027?大陆这招温水煮青蛙太高明,美日全慌了

经纬戎韬
2026-08-19 17:36:06
叶海洋四孩身世揭秘!同一位生父、美国顶级精子库,真相终于明朗

叶海洋四孩身世揭秘!同一位生父、美国顶级精子库,真相终于明朗

娱乐洞察点点
2026-08-19 01:27:53
拟10派10元,大手笔分红又现!多家A股公司业绩大增

拟10派10元,大手笔分红又现!多家A股公司业绩大增

证券时报
2026-08-20 08:34:02
许家印判了,无期!一个房地产时代的剧终

许家印判了,无期!一个房地产时代的剧终

东哥探盘
2026-08-20 13:27:54
阿富汗塔利班统治五年:目前有4500万人口,其中2/3年龄不足20岁

阿富汗塔利班统治五年:目前有4500万人口,其中2/3年龄不足20岁

麓谷隐士
2026-08-19 00:05:04
一场1-1绝平!验出海港最大水货!穆斯卡特或弃用!

一场1-1绝平!验出海港最大水货!穆斯卡特或弃用!

王稱吃吃喝喝
2026-08-20 08:04:28
完全不给面子,土耳其官宣不承认以色列,全军进入战备待战

完全不给面子,土耳其官宣不承认以色列,全军进入战备待战

快乐彼岸
2026-08-19 07:59:28
“抱歉,我们不喜欢肥头大耳的”,女孩公开追求体制内男,面相输了

“抱歉,我们不喜欢肥头大耳的”,女孩公开追求体制内男,面相输了

泽泽先生
2026-08-14 09:31:42
丢人丢到国外了!49岁中国奥运冠军严重违规被查,官方:他已辞职

丢人丢到国外了!49岁中国奥运冠军严重违规被查,官方:他已辞职

二疯说球
2026-07-31 10:14:55
蛇鼠一窝!恒大二把手夏海钧在美国的邻居,竟然是另一个逃跑富豪

蛇鼠一窝!恒大二把手夏海钧在美国的邻居,竟然是另一个逃跑富豪

阿晭评论哥
2026-07-18 22:00:09
出狱后的雷政富沧桑感袭面而来,前后对比引人唏嘘

出狱后的雷政富沧桑感袭面而来,前后对比引人唏嘘

霹雳炮
2026-03-14 22:49:47
涉嫌严重违纪违法,康佳集团原副总裁杨波被查

涉嫌严重违纪违法,康佳集团原副总裁杨波被查

都市快报橙柿互动
2026-08-19 22:06:36
富商给瘫痪女儿招婿,穷小子为20万答应,洞房夜掀开头纱他傻眼了

富商给瘫痪女儿招婿,穷小子为20万答应,洞房夜掀开头纱他傻眼了

温情邮局
2025-05-16 14:23:56
万万没想到,王菲 “真正归宿” 曝光,不是谢霆锋,却与前夫有关

万万没想到,王菲 “真正归宿” 曝光,不是谢霆锋,却与前夫有关

潋滟晴方DAY
2026-08-19 11:21:12
央视选角大翻车?顶着张歪瓜脸,演特警像混混,连段奕宏都救不了

央视选角大翻车?顶着张歪瓜脸,演特警像混混,连段奕宏都救不了

阿讯说天下
2026-08-20 11:47:44
杨天真称今年开机率仅去年30%,宋佳坦言:不焦虑,难得有空“做不忙的事”

杨天真称今年开机率仅去年30%,宋佳坦言:不焦虑,难得有空“做不忙的事”

娱乐嗑学家.
2026-08-20 08:29:05
多地宣布调整最低工资标准,广州市调整为2680元/月 深圳市调整为2700元/月

多地宣布调整最低工资标准,广州市调整为2680元/月 深圳市调整为2700元/月

每日经济新闻
2026-08-19 23:29:30
2026-08-20 14:12:49
智东西 incentive-icons
智东西
智东西,AI产业新媒体,专注报道人工智能的前沿技术发展,和技术应用带来的千行百业产业变革。
12468文章数 117160关注度
往期回顾 全部

科技要闻

DeepSeek Harness更新多模态支持

头条要闻

许家印被判无期徒刑 恒大集团、恒大地产等案一审宣判

头条要闻

许家印被判无期徒刑 恒大集团、恒大地产等案一审宣判

体育要闻

拥有“儿皇梦”的罗德里,为何选择巴萨?

娱乐要闻

汪峰也没想到章子怡,挖到了一条财路

财经要闻

许家印被判处无期 恒大集团被罚88.2亿

汽车要闻

城区油耗3L级 长安CS55蓝鲸超擎混动 7.99万起

态度原创

艺术
旅游
家居
亲子
本地

艺术要闻

251米!宁波第三高楼来了,长得像棵大树!

旅游要闻

广州七夕夜游冲进全国第三!珠江夜游人气高涨

家居要闻

2026建博会(广州) 公装联探展交流活动

亲子要闻

哥哥问妹妹:人最怕什么?4岁妹妹一句话,瞬间把网友逗笑了

本地新闻

先导片|攀登不止,让不同的故事在此连接

无障碍浏览 进入关怀版