网易首页 > 网易号 > 正文 申请入驻

Deepseek V4的最后一块拼图来了?全新OCR架构超越视觉压缩

0
分享至

1 月 27 日,DeepSeek 发布了《DeepSeek-OCR 2: Visual Causal Flow》论文,并同步开源新一代文档理解模型。这是该公司在 2026 年 1 月的第三次技术更新:月初完善了 R1 论文的技术细节,中旬开源了 Engram 记忆模块,月末又推出 OCR 2。如此密集的节奏,也让外界猜测春节前后可能亮相的 DeepSeek-V4 的轮廓逐渐成形。

在讨论 OCR 2 的更新前,不妨先回溯去年 10 月的初代版本。虽然名字里带着“OCR”(Optical Character Recognition,光学字符识别),但 DeepSeek 开源的初代模型瞄准的并非传统意义上的字符识别,而是想解决大模型长期面临的一个瓶颈:超长上下文带来的算力压力。

由于大语言模型的自注意力机制计算复杂度随序列长度呈平方级增长,当上下文从千级 token 扩展到万级,计算量可能暴增百倍。处理上百页的财报或整本书时,开发者往往陷入两难:要么切片分段输入,牺牲全局连贯性;要么硬扛长序列,付出高昂的计算成本与延迟。

DeepSeek 团队选择换了个思路:既然文本 token 太昂贵,能否用图像来“打包”同等信息?他们发现,将一页文档渲染为图像后,视觉编码器提取的视觉 token 数量远少于等效文本,却能完整保留文字与版式结构。这套“上下文光学压缩”(Contextual Optical Compression)技术,本质上是将一维的文本序列“折叠”进二维像素空间,借图像的天然空间结构实现高效压缩。

而 OCR 从图像中还原文本的任务效果,恰好可以成为验证压缩质量的理想标尺:还原越准,说明压缩越有效。

最后的成果确实令人瞩目。在 10 倍压缩率下,文本还原准确率仍达 97%;即便压缩至 20 倍,准确率也保持在 60%左右。一张 1,024×1,024 的文档图像,传统方案需数千 token,DeepSeek-OCR 仅用 256 个即可表征,效率奇高。

但初代 OCR 也存在明显短板。它的核心编码器 DeepEncoder 采用 SAM(Segment Anything Model,分割万物模型)加 CLIP(Contrastive Language-Image Pre-training,对比语言图像预训练)的双模块设计:SAM 负责局部细节感知,CLIP 负责全局语义理解,中间嵌入 16 倍压缩层。这套架构虽然高效,但在处理图像时遵循固定的空间顺序——无论文档内容如何,视觉 token 总是按从左上到右下的栅格排列。

也就是说,不管面对的是论文、发票还是漫画,模型都像扫描仪一样逐字逐行,从左到右地机械扫描。这显然和人类读文档的方式不同,我们会根据版面布局、语义结构进行自然跳转:先看标题,再看摘要,表格要整体理解,图注和正文有对应关系。

此次发布的 OCR 2 要解决的正是这个问题。新架构 DeepEncoder V2 做了一个关键改动:用一个小型语言模型(基于 Qwen2-0.5B,约 5 亿参数)替代了原有的 CLIP 模块,从而引入了“因果”机制。

具体而言,V2 把视觉 token 分成了两组处理:第一组是原始视觉 token,它们之间可以互相“看到”,保证模型对整张图有全局视野;第二组是新引入的“因果流查询”(causal flow query),它们有严格的先后顺序。每个查询只能看到它前面的信息,就像人逐步阅读文档时,后面理解的内容会基于前面已读的内容来组织。

这种设计让模型可以根据图像内容动态调整“阅读顺序”。最终送入解码器的只有第二组 token,它们已经按语义逻辑重排过,而非机械的空间顺序。论文把这称为“视觉因果流”(visual causal flow)——让 2D 图像理解通过两级级联的 1D 因果推理来实现。

这种改变带来的提升是多维度的。

在 OmniDocBench v1.5 测试集上(涵盖杂志、论文、研究报告等 9 类文档),OCR 2 总体得分 91.09%,比前代提升 3.73 个百分点。更能说明新架构价值的是“阅读顺序”指标:编辑距离从 0.085 降到 0.057,意味着模型对文档结构的判断更准确。它确实在学着按语义而非空间来组织信息。

同时,OCR 2 延续了前代的高压缩率优势,视觉 token 上限仅 256–1,120 个,而多数同类模型需要超过 6,000 个。在文本、公式、表格等细分类别上均有 2–6 个百分点的提升,与 Gemini-3 Pro 在相近 token 预算下的对比中(文档解析编辑距离 0.100 vs 0.115),OCR 2 也占据优势。

得益于此,OCR 2 拥有了更广泛的应用场景,它可以用来处理布局复杂、结构多变的文档。例如学术论文中多栏混排加公式表格、财务报表里数据图表与文字说明交织、杂志版面的图文混搭——这些曾经让初代 OCR 捉襟见肘的场景,现在恰恰是因果视觉流架构的用武之地。

不过,新架构并非完美。论文坦承,在报纸类文档上,OCR 2 的识别准确率仍有明显差距,甚至识别性能略低于一代模型。团队归因于两点:一是报纸版面密集、文字量大,当前 token 上限可能不足(可通过增加局部裁剪缓解);二是训练数据中报纸样本仅 25 万张,覆盖有限。这再次印证了端到端模型的通病:性能高度依赖训练数据的广度与质量。

此外,有研究者通过语义破坏实验发现,DeepSeek-OCR 系列的高分部分源于语言先验——模型有时是“猜”出内容,而非真正“看清”。当输入被刻意打乱时,性能会显著下滑。这意味着在识别生造词、严重污损的扫描件等边缘场景中,其鲁棒性可能仍不及传统管道式 OCR。

回看 1 月的三次技术更新,一条清晰的主线逐渐浮现:DeepSeek 正系统性地探索如何让模型在不同任务中“更聪明地工作”,而非一味堆叠计算量。

月初,团队将 R1 论文从 22 页大幅扩充至 86 页,揭示其推理能力的核心来源。并非依赖海量人工标注数据,而是通过强化学习在“做题-反馈-改进”的循环中自主学会思考与纠错。这为低成本训练强推理模型开辟了一条新路径。

中旬,梁文锋署名的 Engram 论文进一步延伸这一思路:既然人名、术语等静态知识无需每次重新思考,何不将其存为可检索的记忆表?实验表明,将约 20%的参数用于构建这类外部记忆、80%保留给动态计算,在知识问答、推理与代码任务上反而表现更优。

到了月末,OCR 2 则将这一哲学延伸至视觉领域。它不再让模型机械地按空间栅格扫描文档,而是引入因果机制,使其能像人类一样根据语义结构动态调整“阅读顺序”。

三次更新看似分别切入推理、记忆与视觉,实则共同回应一个问题:模型在哪些环节可以少算多查,或重组流程以提升效率?R1 证明复杂推理可借强化学习涌现,Engram 验证静态知识适合查表替代计算,OCR 2 则展示 2D 图像理解能通过因果排序适配 1D 语言模型的处理范式。这种结构优化的转向,或许正是 DeepSeek 为下一代模型铺就的底层逻辑。

如果传闻属实,计划于 2 月中旬春节前后发布的 DeepSeek-V4,或将首次整合这三条技术线索:融合 R1 的推理框架、Engram 的记忆架构与 OCR 2 的视觉理解能力,打造一个更高效处理文本、代码与复杂文档的多面手。不过最终体验如何,我们还需等待春节它的真正亮相。

1.https://github.com/deepseek-ai/DeepSeek-OCR-2/blob/main/DeepSeek_OCR2_paper.pdf

运营/排版:何晨龙

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
伊朗,密集“换帅”

伊朗,密集“换帅”

中国新闻周刊
2026-08-12 07:28:04
涉嫌严重违纪违法,王道俊被查

涉嫌严重违纪违法,王道俊被查

都市快报橙柿互动
2026-08-11 22:40:04
央视直播8月12日欧洲大满贯赛程,蒯曼一天3战

央视直播8月12日欧洲大满贯赛程,蒯曼一天3战

乒乓球球
2026-08-12 07:44:17
乌克兰袭击俄罗斯炼油厂,距离乌边境1200公里,已致13死78伤,媒体称或为乌对俄本土发动的最致命袭击之一;基辅遭遇弹道导弹袭击

乌克兰袭击俄罗斯炼油厂,距离乌边境1200公里,已致13死78伤,媒体称或为乌对俄本土发动的最致命袭击之一;基辅遭遇弹道导弹袭击

每日经济新闻
2026-08-11 08:59:05
14岁儿子说“大不了去送外卖”,三伏天父亲带他亲自体验,结果儿子依然不想上学,却意外修复了父子关系

14岁儿子说“大不了去送外卖”,三伏天父亲带他亲自体验,结果儿子依然不想上学,却意外修复了父子关系

阿乐碎碎念
2026-08-09 08:03:57
特朗普改主意了

特朗普改主意了

环球时报国际
2026-08-11 07:56:31
“犹太战神”沙龙:娶亲姐妹为妻,手上沾满鲜血却对中国另眼相待

“犹太战神”沙龙:娶亲姐妹为妻,手上沾满鲜血却对中国另眼相待

古史青云啊
2026-08-11 14:21:39
主动投案,南京市交通集团党委书记、董事长奚晖接受审查调查

主动投案,南京市交通集团党委书记、董事长奚晖接受审查调查

界面新闻
2026-08-11 14:14:33
33岁单亲妈妈1.9元自助餐引流8000单,到店收60元服务费,核销仅50人

33岁单亲妈妈1.9元自助餐引流8000单,到店收60元服务费,核销仅50人

宇宙来信发
2026-08-11 17:57:37
山东网友打算买龟,多个商家直言“山东不卖”,评论区全是电商泪

山东网友打算买龟,多个商家直言“山东不卖”,评论区全是电商泪

谭谈社会
2026-05-30 15:06:18
凯莉·克拉克森遇大风裙摆险掀翻,44岁自嘲“胸太小不会走光”引爆笑

凯莉·克拉克森遇大风裙摆险掀翻,44岁自嘲“胸太小不会走光”引爆笑

我是一个养虾人
2026-08-10 23:05:59
历史新高!尼克斯主场揭幕战二手票最低1999美元

历史新高!尼克斯主场揭幕战二手票最低1999美元

体坛周报
2026-08-12 08:13:11
广东揭西县通报人员跳桥事件:2人遗体已打捞上岸,无生命迹象

广东揭西县通报人员跳桥事件:2人遗体已打捞上岸,无生命迹象

澎湃新闻
2026-08-12 01:13:05
中概股普遍下跌,纳斯达克中国金龙指数跌2.94%

中概股普遍下跌,纳斯达克中国金龙指数跌2.94%

每日经济新闻
2026-08-12 05:35:04
中方潇洒离场,日本1028家企业破产,高市输麻了,反华反到大动脉

中方潇洒离场,日本1028家企业破产,高市输麻了,反华反到大动脉

老头的传奇色彩
2026-08-12 04:15:43
曝张婉婷怀三胎!肚大如箩面相变凶,宋宁峰带俩娃、发福油腻邋遢

曝张婉婷怀三胎!肚大如箩面相变凶,宋宁峰带俩娃、发福油腻邋遢

悦君兮君不知
2026-08-11 22:31:07
公司33人集资炒股,每人出了9万,我因忘了密码没参与,三个月后,他们33个人集体向我递了辞职信

公司33人集资炒股,每人出了9万,我因忘了密码没参与,三个月后,他们33个人集体向我递了辞职信

一面故事
2026-08-07 18:50:07
15家“人形机器人”龙头企业(名单)

15家“人形机器人”龙头企业(名单)

侃故事的阿庆
2026-08-10 09:18:33
哈利波特新剧女星回应罗琳争议:强烈反对其跨性别观点,剧集12月首播

哈利波特新剧女星回应罗琳争议:强烈反对其跨性别观点,剧集12月首播

影视情报室
2026-08-11 00:18:24
难怪美国突然对伊停火,外媒曝光内幕,特朗普在谋划重大战略转向

难怪美国突然对伊停火,外媒曝光内幕,特朗普在谋划重大战略转向

徐云流浪中国
2026-08-12 07:30:23
2026-08-12 08:44:49
DeepTech深科技 incentive-icons
DeepTech深科技
麻省理工科技评论独家合作
17089文章数 515189关注度
往期回顾 全部

科技要闻

AI大战变天:扎克伯格突然回头

头条要闻

美军MH-60直升机向商船开火:发射两枚"地狱火"导弹

头条要闻

美军MH-60直升机向商船开火:发射两枚"地狱火"导弹

体育要闻

NBA老顽童,抽着大麻喝着小酒告别了

娱乐要闻

“雅典娜”确认被害 细节令人发指!

财经要闻

李嘉诚,再一次大撤退!他嗅到了什么?

汽车要闻

闪充/天神之眼B/云辇-C 2027款海豹06售9.99万元起

态度原创

游戏
艺术
本地
数码
家居

魔兽世界:时光服紧急削弱,精英玩家破灭,难度党为什么消失了?

艺术要闻

色彩的盛宴,视觉的狂欢:西班牙水彩大师福斯蒂诺·马丁·冈萨雷斯的艺术世界

本地新闻

黄州一夜,苏轼写给普通人的月光

数码要闻

石头G30S Ultra滚筒扫地机官宣:41000Pa巅峰吸力、75℃热活水拖

家居要闻

2026建博会(广州) 公装联探展交流活动

无障碍浏览 进入关怀版