命令跑通 MinerU:PDF 轉(zhuǎn)換實(shí)戰(zhàn)筆記)
一個(gè)命令跑通 MinerUPDF 轉(zhuǎn)換實(shí)戰(zhàn)筆記【免費(fèi)下載鏈接】MinerUTransforms complex documents like PDFs and Office docs into LLM-ready markdown/JSON for your Agentic workflows.項(xiàng)目地址: https://gitcode.com/GitHub_Trending/mi/MinerU手里有份 200 頁的掃描 PDF要轉(zhuǎn)成能編輯的 Markdown手動(dòng)復(fù)制行不通。MinerU 把 PDF、圖片和 Office 文檔解析成 LLM 能直接用的 Markdown 與 JSON。按你的硬件和場景選一條路裝完就能轉(zhuǎn)。裝 core 就能跑MinerU 第一份 PDF 怎么轉(zhuǎn)裝完你手里多了一個(gè)mineru命令行工具輸入 PDF、圖片或 docx/pptx/xlsx輸出 Markdown 和 JSON。core 模塊把解析所需的全部依賴一次裝齊模型首次運(yùn)行時(shí)自動(dòng)下載需要聯(lián)網(wǎng)。uv pip install mineru[core] mineru -p input.pdf -o output/第二行跑通后output/下按頁生成 Markdown。默認(rèn)走 hybrid-engine 后端換 pipeline、vlm-engine 或調(diào)解析參數(shù)見 CLI 參數(shù)文檔。有顯卡才走這條路MinerU vllm 加速與顯存配置門檻先說清Turing 架構(gòu)及以上、顯存 ≥8G不滿足直接跳過本節(jié)。uv pip install mineru[all]在 Linux 上mineru[all]等價(jià)于 core vllm s3 合并安裝一條命令到位。裝完設(shè)兩個(gè)環(huán)境變量export MINERU_DEVICE_MODEcuda export MINERU_VIRTUAL_VRAM_SIZE16 # 按實(shí)際顯存改加速原理只記結(jié)論vllm 用 PagedAttention 管理 KV 緩存減少顯存浪費(fèi)批量推理比默認(rèn)引擎快 3~5 倍。服務(wù)端實(shí)現(xiàn)在mineru/model/vlm/想摳細(xì)節(jié)再看。 本機(jī)算力不夠輕量客戶端連遠(yuǎn)程推理服務(wù)三種情況適用本機(jī)沒顯卡、不想裝重依賴、只想連遠(yuǎn)程 vllm-server。服務(wù)端跑mineru-vllm-server客戶端只裝基礎(chǔ)包體積 50MBuv pip install mineru mineru -p input.pdf -o output/ --backend vlm-http-client --url http://127.0.0.1:30000客戶端把頁面通過 HTTP 發(fā)給遠(yuǎn)端做推理本地只處理返回結(jié)果跑 200 頁掃描件也不吃本機(jī)顯存。整體架構(gòu)與數(shù)據(jù)流見下圖。這幾個(gè)環(huán)境變量開關(guān)最常用默認(rèn)配置能覆蓋大多數(shù)文檔想換模型下載源、限定顯存上限、關(guān)掉公式或表格識別來省時(shí)間時(shí)才需要?jiǎng)酉旅孢@些開關(guān)。變量名干什么的常見取值MINERU_MODEL_SOURCE模型下載源modelscope / localMINERU_DEVICE_MODE設(shè)備模式cuda / cpuMINERU_VIRTUAL_VRAM_SIZE推理顯存上限8 / 16MINERU_FORMULA_ENABLE公式解析開關(guān)true / falseMINERU_TABLE_ENABLE表格識別開關(guān)true / false完整列表在 CLI 參數(shù)文檔 里。裝不上、跑不對時(shí)先查這幾種癥狀vllm 安裝反復(fù)失敗大概率是本地依賴版本沖突。別跟依賴死磕換預(yù)構(gòu)建鏡像看 Docker 部署指南。中文輸出亂碼文檔語言沒判對。跑轉(zhuǎn)換時(shí)加-l ch指定語言O(shè)CR 準(zhǔn)確率會(huì)直接上來。大文檔顯存溢出推理批量開大了。先把MINERU_VIRTUAL_VRAM_SIZE調(diào)小再用-s/-e分段轉(zhuǎn)頁面。都解決不了先翻 FAQ再不到去倉庫 issue 區(qū)提單。個(gè)人日常轉(zhuǎn)換core 加遠(yuǎn)程客戶端就夠批量任務(wù)或精度要求高走 vllm 那條路。想讀源碼git clone https://gitcode.com/GitHub_Trending/mi/MinerU【免費(fèi)下載鏈接】MinerUTransforms complex documents like PDFs and Office docs into LLM-ready markdown/JSON for your Agentic workflows.項(xiàng)目地址: https://gitcode.com/GitHub_Trending/mi/MinerU創(chuàng)作聲明:本文部分內(nèi)容由AI輔助生成(AIGC),僅供參考