找回密码
 立即注册
查看: 1216|回复: 2

DeepSeek又拿第一!首创“因果流”视觉推理,超越Gemini ...

[复制链接]

4072

主题

535

回帖

1万

积分

论坛元老

积分
13076
发表于 2026-2-15 22:36:29 | 显示全部楼层 |阅读模式
pTu3q38MncMnVIXM.jpg
. h& n1 q9 y$ O$ g4 b: F编辑:定慧 好困
! S* ]( h# f, N2 P【新智元导读】DeepSeek开源DeepSeek-OCR2,引入了全新的DeepEncoder V2视觉编码器。该架构打破了传统模型按固定顺序(从左上到右下)扫描图像的限制,转而模仿人类视觉的「因果流(Causal Flow)」逻辑。
0 _0 B% j3 e! k7 G  O0 ?DeepSeek又双叒叕更新了!7 D# T/ ~! ?8 c
这次是DeepSeek-OCR模型的重磅升级:DeepSeek-OCR2。( b5 x# L2 G: o7 k" j5 y7 N0 [( q
lBk6gIFs7RsgrY1b.jpg 5 Y( b; q# B; T; X; f0 O: V* E
还记得上一代DeepSeek-OCR吗?那个用视觉方式压缩一切的模型。
. I7 r# @% {6 {# w- c8 i  [这一次,DeepSeek更进一步,对视觉编码器下手了,提出了一种全新的DeepEncoder V2架构,实现了视觉编码从「固定扫描」向「语义推理」的范式转变!
: c7 r: k8 n' W/ j$ f v70qZD1igDIdciso.jpg 9 w- n. o0 x! {- z. y
DeepSeek-OCR2不仅能像人类一样按逻辑顺序阅读复杂文档,还在多项基准测试中刷新了SOTA。; B% G8 Z+ u0 c: v! ~
当然,按照DeepSeek的惯例,Paper、Code、Model全开源!
- d- t% H" k0 R zNW7921h1xV1QXq9.jpg
; \* c. ]  J& @DeepSeek-OCR2的核心创新在于通过DeepEncoder V2,赋予了模型因果推理能力(Causal Reasoning)。( o( [$ E' y1 q0 D1 t0 ~' E
这就像是给机器装上了「人类的阅读逻辑」,让AI不再只是死板地从左上到右下扫描图像,而是能根据内容语义灵活调整阅读顺序。
4 y* ?/ P' V! U4 t) K8 _& H$ EDeepSeek-OCR2
2 U$ Q. x+ T' s5 U视觉因果流$ J1 [$ `9 R) k
DeepSeek在论文中指出,传统的视觉语言模型(VLM)通常采用光栅扫描(Raster-Scan)顺序处理图像,即固定地从左到右、从上到下。
9 s$ ]$ P5 B1 B这种方式强行将2D图像拍扁成1D序列,忽略了图像内部的语义结构。
: T% }7 Y3 W; J& w/ K6 ~. e& Q fa88RVr9fv8P9eRs.jpg 1 T. P: p* P# u5 {+ J
这显然与人类的视觉习惯背道而驰。
! j) K3 w8 ~$ ~" e5 {8 Z人类在看图或阅读文档时,目光是随着逻辑流动的:先看标题,再看正文,遇到表格会按列或按行扫视,遇到分栏会自动跳跃。$ h* f1 v* t5 l7 w  e& m
为了解决这个问题,DeepSeek-OCR2引入了DeepEncoder V2。
1 d* L# j2 ~# ]& \! ?它最大的特点是用一个轻量级的大语言模型(Qwen2-0.5B)替换了原本的CLIP编码器,并设计了一种独特的「因果流查询」(Causal Flow Query)机制。; o5 Y1 C/ F0 ^/ d  C7 T
DeepEncoder V2架构详解
! s. B' o5 ~5 W( W' u; TDeepEncoder V2主要由两部分组成:( A3 w2 G4 L6 b# H
1. 视觉分词器(Vision Tokenizer)
# I! G9 _0 {2 k+ V" o沿用了SAM-base(80M参数)加卷积层的设计,将图像转换为视觉Token。
: C* N9 S, F3 f5 e3 t3 _8 X Y55Bb2fgzgFG0f11.jpg
: D* B6 j5 n9 N" j2. 作为视觉编码器的LLM. `4 r) q1 \9 n  E& u  j
这里DeepSeek使用了一个Qwen2-0.5B模型。
& V# ?3 c  m' a6 }" f, E3 ^它不仅处理视觉Token,还引入了一组可学习的「查询Token」(Query Tokens)。: E& f" o# z4 b/ u
LbGsl23S6dlMVn63.jpg # n! c, Z8 d8 o# |$ z2 ~
关键的创新点在于注意力掩码(Attention Mask)的设计:1 a- k9 M  r6 I; f( S
JRajWCZ6k3KcbDko.jpg
  A5 e& M# t0 e) |1 ]: q9 ]视觉Token之间采用双向注意力(Bidirectional Attention),保持全局感知能力,类似于ViT。
7 X4 y8 p7 A, C$ b而查询Token则采用因果注意力(Causal Attention),每一个查询Token只能看到它之前的Token。
7 `, |" K: r- N$ V通过这种设计,DeepEncoder V2实现了两级级联的因果推理:) ^' C$ ]1 [7 a5 G! u: E+ p
编码器通过可学习的查询对视觉Token进行语义重排,随后的LLM解码器则在这个有序序列上进行自回归推理。
9 w1 v4 q& S  L) l这意味着,DeepSeek-OCR2在编码阶段就已经把图像里的信息「理顺」了,而不是一股脑地扔给解码器。
2 Y! }+ x- G6 U! o' zToken更少,精度更高
) W! n8 X4 v% X) G实验数据显示,DeepSeek-OCR2在保持极高压缩率的同时,性能显著提升。1 `8 |2 r' ?0 Z( h/ D, F
在OmniDocBench v1.5基准测试中,DeepSeek-OCR2在使用最少视觉Token(仅256-1120个)的情况下,综合得分高达91.09%,相比前代提升了3.73%。
- j& y7 G$ Z0 S5 W4 E R7t89H111s1x2gSx.jpg
' H7 R' v2 F& C& Y' N特别值得一提的是,在阅读顺序(R-order)的编辑距离(Edit Distance)指标上,DeepSeek-OCR2从前代的0.085显著降低到了0.057。( i$ j4 S, d4 r9 A1 L
这直接证明了新模型在处理复杂版面时,逻辑性更强,更懂「阅读顺序」。
; U3 k" x+ }' N, D在和Gemini-3 Pro等闭源强模型的对比中,DeepSeek-OCR2也丝毫不落下风。
, }* L, }. N9 {1 Q) t% W9 ?在均使用约1120个视觉Token的情况下,DeepSeek-OCR2的文档解析编辑距离(0.100)优于Gemini-3 Pro(0.115)。
- b8 M/ A5 r1 }  H9 l XJzoAIj7QsAOW07h.jpg % [' v8 @/ O( A6 x& K8 ^
gm916YMt2699x19y.jpg
1 m0 Y3 u2 d, w! T不仅是刷榜,DeepSeek-OCR2在实际生产环境中也非常能打。
# l. b$ s" q) I* I6 C; _DeepSeek披露,在处理在线用户日志图像时,OCR结果的重复率从6.25%降到了4.17%;在PDF数据生产场景中,重复率从3.69%降到了2.88%。/ H% S+ s) B5 G
ieZy45N94MyMInie.jpg
- q6 C  c- E% T' c6 o这意味着模型生成的文本更加干净、准确,对于作为LLM训练数据的清洗流水线来说,价值巨大。9 s, ?, E& Q1 }3 O
迈向真正的多模态统一. t  f# @, Z/ G. G2 T! t
DeepSeek在论文最后提到,DeepSeek-OCR2通过DeepEncoder V2验证了「LLM作为视觉编码器」的可行性。
1 m0 s7 B4 ?5 B8 P* p这不仅是一个OCR模型的升级,更是迈向原生多模态(Native Multimodality)的重要一步。; g! U1 d+ V$ e, Q! C4 ?
未来,同一个编码器只要配备不同的模态查询嵌入(Query Embeddings),就能处理文本、图片、音频等多种模态的数据,真正实现万物皆可Token,万物皆可因果推理。( K) k, ~! Z8 N# i3 x! P1 f  z/ ?; |
DeepSeek表示,虽然目前光学文本识别(OCR)是LLM时代最实用的视觉任务之一,但这只是视觉理解宏大图景的一小部分。& N$ N" j" c  I. m/ X7 C
DeepSeek将继续探索,向着更通用的多模态智能进发。
集群智慧云科服专利申请服务

30

主题

440

回帖

1420

积分

等待验证会员

积分
1420
发表于 2026-2-15 23:06:34 | 显示全部楼层
DeepSeek总能不断给我们惊喜!
集群智慧云科服SCI/SSCI/EI期刊发表服务

30

主题

440

回帖

1420

积分

等待验证会员

积分
1420
发表于 2026-2-15 23:36:40 | 显示全部楼层
好样的,DeepSeek!
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则


快速回复 返回顶部 返回列表