生产级 RAG 文档入库设计:解析、清洗、分块与 Embedding 工程化

聚焦生产级 RAG 的文档入库链路,设计 MinerU、MarkItDown 与内置解析器的路由,清洗 Pipeline、结构化分块,以及 Embedding 的批处理、并发、限流和版本发布。

大模型

MinerU 部署调研报告:NVIDIA 与海光 DCU 双路径

在 NVIDIA GPU 与海光 DCU K100 上部署 MinerU 3.4 的完整调研,覆盖 API、格式、OCR、扫描件、多卡路由,以及国产卡上 VLM 后端精度退化的踩坑记录。

部署实践