ARTICLE DETAIL

资讯详情

深耕郑州网站建设与运营推广的一线实战洞察。

MinerU PDF解析:把120页采购合同变成可检索Markdown只要3分钟

MinerU PDF解析:把120页采购合同变成可检索Markdown只要3分钟 MinerU PDF解析把120页采购合同变成可检索Markdown只要3分钟【免费下载链接】MinerUTransforms complex documents like PDFs and Office docs into LLM-ready markdown/JSON for your Agentic workflows.项目地址: https://gitcode.com/GitHub_Trending/mi/MinerU一份120页的采购合同把价格清单手敲进表格要多久我的同事敲了两页就放弃了数字对不齐表线还断了。换成MinerU做PDF解析这个过程缩成一条命令它接收PDF、DOCX、PPTX、XLSX和图片输出结构化Markdown和JSON表格保留成HTML表格公式变成LaTeX阅读顺序跟人的眼睛一致拿到手就能喂给RAG或者检索系统。 装一次跑一条命令拿到第一份Markdown安装环境、喂路径、等结果三步之内就能到第一个可用输出安装pip install -U mineru[all]这个带后缀的包名装的是全功能依赖Windows、Linux、macOS都能跑。运行mineru -p ./demo/pdfs -o ./output传一个文件或者整个目录都行首次会自动下载所需模型如果网络访问不了默认模型源设置环境变量MINERU_MODEL_SOURCEmodelscope切到国内镜像。检查输出目录下生成Markdown主文件旁边还有提取出的图片、表格和一份布局可视化文件方便你核对结果。上图是整个流程的内部管线PDF文档先经过模型解析层再进入管线处理最后验证结果才算输出每个环节都有落盘产物可以回查。跑通这一步之后值得花两分钟看看它到底在哪几处下过功夫。 看它怎么把表格、公式和版面变成结构化内容不需要关心内部结构因为它把解析拆成了三件看得见的事整体架构是预处理、模型、管线、输出、质检五层的分工上图是这套架构的总览落到实际收益上主要是三条它先把每页内容分类成标题、段落、表格、公式等区块再按阅读顺序重组所以双栏、混排的合同和文献读起来不会乱序条款编号不会跳行。它检测表格结构并转成HTML还支持跨页表格合并所以合同里的价格清单、条款对比表在Markdown里是一张完整表而不是断成两截的碎片。它识别公式并输出LaTeX文本所以技术文档里的公式段落可以直接在Markdown和知识库里渲染不用手动修乱码。这三件事做对的前提是输入别太差下面说说它什么时候好用、什么时候会拉胯。⚠️ 判断你的机器和文档适不适合它先坦白边界高精度的hybrid和vlm后端需要GPU显存建议8GB起步纯CPU机器只能跑pipeline后端兼容性最好但精度会降一档官方评测约从95分降到86分。另外手写体和很糊的复印件扫描件照样会出错批量跑之前建议先抽一两页验证效果。两个来自真实使用的细节扫描件先调300dpi再跑源文件模糊到什么解析器都救不回来重扫一遍比调参数有效。每次跑完打开结果旁边的{文件名}_layout.pdf色块是检测出的内容区块数字是阅读顺序哪里漏读、乱序一眼就能定位。上图就是一份布局可视化质检文件不同颜色区分段落、表格和公式区块右上角的数字标出阅读顺序用它排查比翻Markdown快得多。确认解析质量之后最后一个问题是它和你现在的路径差在哪。 和转Word再复制的路线对比很多人的习惯是PDF先转Word再手动复制到Markdown。这条路线和MinerU直接输出的差别集中在结构信息上传统转换再复制MinerU直接输出表格表线丢失、列错位HTML表格跨页自动合并公式乱码或截图LaTeX文本页眉页脚页码手动删自动去除如果目标是搭合同知识库解析结果还能直接进DataFlow这类平台当语料条款从此可检索、可对比上图是DataFlow智能数据平台的知识库上传入口解析好的文档入库后合同条款就能被检索和引用。想完整走一遍流程打开快速入门指南跟着跑一遍仓库里的demo样例docs/zh/quick_start/。生成文件的含义可以查输出文件说明解析逻辑的源码在mineru/backend/想改行为时知道该从哪里下手。【免费下载链接】MinerUTransforms complex documents like PDFs and Office docs into LLM-ready markdown/JSON for your Agentic workflows.项目地址: https://gitcode.com/GitHub_Trending/mi/MinerU创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考
返回列表