费曼来信:聊聊 MinerU2.5 的解耦之道
费曼来信:你是想拿“放大镜”看全景,还是拿“显微镜”看细节?——聊聊 MinerU2.5 的解耦之道
费曼来信:你是想拿“放大镜”看全景,还是拿“显微镜”看细节?——聊聊 MinerU2.5 的解耦之道
读完关于 MinerU2.5 处理高分辨率文档解析的论文,我感觉困扰了 AI 届多年的“长文档近视眼”问题终于被治好了。 为了让你明白为什么 AI 看个 PDF 总是会把字看漏,咱们来聊聊“焦距”这件事。1. 现状:那个被“分辨率”逼疯的近视眼
目前的视觉语言模型(VLM)在看一张超高清的文档(比如两柱密密麻麻的财报)时,表现得就像是一个重度近视眼。- 痛点:因为模型的“注意力窗口”是有限的。如果它想看清全局(版面结构),它就得把图缩小,结果字糊了;如果它想看清字(放大),它就看不见整张图的排版,容易把第二段和第三段弄串。这叫 “全局视野与局部精度的物理排斥”。
2. MinerU2.5:那个自带“宏观雷达与微观探针”的解耦大师
这篇论文的思路非常绝:既然一个镜头无法同时顾及宏观和微观,那我就给你两套系统。- 物理图像(粗到细的解耦策略):它不强求一个庞大的视觉编码器干完所有的活。它把它拆了。
- 宏观雷达(Coarse):第一套系统用极低的算力快速扫一眼全图,只负责搞清楚哪里是标题、哪里是表格、哪里是正文。这相当于先画一张军事地图。
- 微观探针(Fine):第二套系统根据这张地图,直接把那些切碎的“高清小块”送进语言模型,精准地识别每一个字母。
- 1.2B 的四两拨千斤:通过这种极其聪明的物理分工,它仅仅用了 1.2B(12 亿)的微小参数量,在长文档解析的准确率上,直接干翻了那些几百亿参数的庞然大物。