{"repo":"magicyuan876/mineru-tianshu","free":true,"listed":false,"github":"https://github.com/magicyuan876/mineru-tianshu","clone":"git clone https://github.com/magicyuan876/mineru-tianshu.git","description":"天枢 - 企业级 AI 一站式数据预处理平台 | PDF/Office转Markdown | 支持MCP协议AI助手集成 | Vue3+FastAPI全栈方案 | 文档解析 | 多模态信息提取","language":"Python","stars":759,"topics":["markitdown","mcp-server","mineru","pdf-converter","deepseek-ocr","paddleocr-vl"],"license":"Apache-2.0","category":"mcp-servers","readme_excerpt":"Tianshu 天枢 企业级 AI 数据预处理平台 支持文档、图片、音频等多模态数据处理 GPU 加速 MCP 协议 结合 Vue 3 前端 + FastAPI 后端 + LitServe GPU负载均衡 English 简体中文 如果这个项目对你有帮助，请点击右上角 ⭐ Star 支持一下，这是对开发者最大的鼓励！ --- 📝 最新更新 2026-04-12 🔧 MinerU 3.0.9 升级 & Office 格式增强 - ✅ MinerU 3.0.9 升级 - 核心依赖同步： transformers==4.57.6 、 albumentations =1.4.11 - 配置格式迁移： magic-pdf.json （扁平）→ mineru.json （嵌套 models-dir 结构） - 模型路径适配 3.0 新结构（ unimernet hf small 2503 、 pp formulanet plus m ） - ✅ DOCX 原生解析 ： .docx 文件路由至 MinerU 3.0 原生解析器（ office docx analyze ），解析精度优于 MarkItDown - ✅ 旧版 Office 格式支持 ： .doc 、 .xls 、 .ppt 经 LibreOffice 自动转换为新格式后，再交由 MinerU 或 MarkItDown 处理，不再报错 - ✅ 前端引擎信息面板 ：仪表盘新增引擎状态卡片，实时展示各引擎版本号、GPU/CUDA 环境及关键包版本 2025-12-10 ⚡ 大文件并行处理 - ✅ PDF 自动拆分功能 ：超过阈值（默认 500 页）的 PDF 自动拆分为多个子任务并行处理 - 可配置的分块大小（默认 500 页/块），显著提升大文件处理速度 - 实现父子任务系统：自动管理子任务状态并在完成后合并结果 - 智能结果合并：保留原始页码信息，按序合并 Markdown 和 JSON 输出 - 处理时间可缩短 40-60%（取决于硬件配置） - 异步拆分 ：拆分操作在 Worker 中进行，API 接口秒级响应 - ✅ PDF 拆分配置 （ .env 新增） - PDF SPLIT ENABLED : 是否启用自动拆分（默认 true ） - PDF SPLIT THRESHOLD PAGES : 拆分阈值页数（默认 500 ） - PDF SPLIT CHUNK SIZE : 每个子任务处理页数（默认 500 ） - ✅ Worker 内存管理 - WORKER MEMORY LIMIT : 容器硬内存限制（默认 16G ） - WORKER MEMORY RESERVATION : 内存软限制/预留（默认 8G ） 2025-12-05 🗄️ RustFS 对象存储集成 - ✅ RustFS 对象存储 ：所有解析结果的图片自动上传到对象存储 - S3 兼容 API，基于 minio-py 实现 - 批量上传图片，自动生成公开访问 URL - 短且唯一的文件名生成（时间戳 Base62 + NanoID） - 按日期自动分组（YYYYMMDD/文件名.ext） - Markdown/JSON 中的图片路径自动替换为对象存储 URL - Docker Compose 一键部署 RustFS 服务 - 需配置 RUSTFS PUBLIC URL 环境变量（外部可访问地址） - ✅ 输出标准化优化 ：改进图片路径处理，统一使用对象存储 URL - ✅ 配置简化 ：精简 .env.example","default_branch":null,"files":null,"tree":[],"storefront":"/r/magicyuan876","claimed":false,"request_supported":{"post":"https://gitbuyer.com/r/magicyuan876/mineru-tianshu/request-supported","requests":0},"note":"indexed from public GitHub; nothing is for sale on this page. Clone it from GitHub. Paid listings live at /search."}