当前位置:首页 > Deepseek最新资讯 > 正文内容

DeepSeek又拿第一!首创「因果流」视觉推理,超越Gemini

7个月前 (01-27)Deepseek最新资讯98

  【新智元导读】DeepSeek开源DeepSeek-OCR2,引入了全新的DeepEncoder V2视觉编码器deepseek。该架构打破了传统模型按固定顺序(从左上到右下)扫描图像的限制,转而模仿人类视觉的「因果流(Causal Flow)」逻辑。

  这一次,DeepSeek更进一步,对视觉编码器下手了,提出了一种全新的DeepEncoder V2架构,实现了视觉编码从「固定扫描」向「语义推理」的范式转变!

  DeepSeek-OCR2不仅能像人类一样按逻辑顺序阅读复杂文档,还在多项基准测试中刷新了SOTA。

  这就像是给机器装上了「人类的阅读逻辑」,让AI不再只是死板地从左上到右下扫描图像,而是能根据内容语义灵活调整阅读顺序。

  DeepSeek在论文中指出,传统的视觉语言模型(VLM)通常采用光栅扫描(Raster-Scan)顺序处理图像,即固定地从左到右、从上到下。

  人类在看图或阅读文档时,目光是随着逻辑流动的:先看标题,再看正文,遇到表格会按列或按行扫视,遇到分栏会自动跳跃。

  它最大的特点是用一个轻量级的大语言模型(Qwen2-0.5B)替换了原本的CLIP编码器,并设计了一种独特的「因果流查询」(Causal Flow Query)机制。

  它不仅处理视觉Token,还引入了一组可学习的「查询Token」(Query Tokens)。

  编码器通过可学习的查询对视觉Token进行语义重排,随后的LLM解码器则在这个有序序列上进行自回归推理。

  这意味着,DeepSeek-OCR2在编码阶段就已经把图像里的信息「理顺」了,而不是一股脑地扔给解码器。

  DeepSeek披露,在处理在线用户日志图像时,OCR结果的重复率从6.25%降到了4.17%;在PDF数据生产场景中,重复率从3.69%降到了2.88%。

  这不仅是一个OCR模型的升级,更是迈向原生多模态(Native Multimodality)的重要一步。

  未来,同一个编码器只要配备不同的模态查询嵌入(Query Embeddings),就能处理文本、图片、音频等多种模态的数据,真正实现万物皆可Token,万物皆可因果推理。

  DeepSeek表示,虽然目前光学文本识别(OCR)是LLM时代最实用的视觉任务之一,但这只是视觉理解宏大图景的一小部分。原文出处:DeepSeek又拿第一!首创「因果流」视觉推理,超越Gemini,感谢原作者,侵权必删!

标签: deepseek

“DeepSeek又拿第一!首创「因果流」视觉推理,超越Gemini” 的相关文章

Deepseek推荐全国旅游百强区第12名:贵州贵阳市南明区

Deepseek推荐全国旅游百强区第12名:贵州贵阳市南明区

  日前,全国县镇发展研究课题组、天和经济研究所县镇发展研究院联合发布了2024《全国县镇发展报告》,报告评价篇对全国县市以及包含乡村人口的市辖区旅游发展水平进行了综合评价,并发布了天和2...

记忆张量 × 商汤大装置:国产 GPGPU 推理成本反超 A100!

记忆张量 × 商汤大装置:国产 GPGPU 推理成本反超 A100!

  群。相比传统仅依赖硬件隔离的方案,本次落地将PD分离与记忆张量旗下核心产品MemOS(以下简称 MemOS)的激活记忆体系深度耦合,使Prefill批量化可调度、Decode前台低抖动...

DeepSeek回应变冷淡,技术升级与用户需求调整所致

DeepSeek回应变冷淡,技术升级与用户需求调整所致

  【#DeepSeek回应被指冷淡#】#DeepSeek变冷淡系多种原因造成# 2月13日,国产AI助手DeepSeek因技术升级被用户吐槽“变冷淡”,相关话题#Deepseek被指变冷...

斯基拉:切尔西签下哈维-西蒙斯,双方签约7+1年

斯基拉:切尔西签下哈维-西蒙斯,双方签约7+1年

  北京时间7月31日,记者斯基拉报道,切尔西签下荷兰中场哈维-西蒙斯。斯基拉表示这是独家消息:交易已经达成,莱比锡中场哈维-西蒙斯加盟切尔西,双方签约至2032年,附带一年续约选项。哈维...

DeepSeek预测:巴列卡诺vs马德里竞技!床单军团客场碾压?德弗鲁托斯能否单

DeepSeek预测:巴列卡诺vs马德里竞技!床单军团客场碾压?德弗鲁托斯能否单

  西甲第24轮即将上演一场冰与火的对决——排名18的巴列卡诺主场迎战高居第3的马德里竞技。主队深陷降级区(积分22),而客队正与比利亚雷亚尔(同积45分)激烈争夺欧冠直通名额。从联赛数据...

讲个鬼故事:霍伊伦加盟曼联就进过1粒头球,而塞斯科同期进了8粒!

讲个鬼故事:霍伊伦加盟曼联就进过1粒头球,而塞斯科同期进了8粒!

  除了几个很抽象的单刀 我觉得抢点还可以 射门有时候超神有时候抽象 他有练好头球的条件 但是意愿强不强不知道   除了几个很抽象的单刀 我觉得抢点还可以 射门有时候超神...