【MinerU】可本地部署的PDF解析器
文章目录
- 安装
- 简单测试
把pdf转换为markdown
安装
github官网
linux版安装
安装环境：
conda create -n MinerU python=3.10
conda activate MinerU
pip install -U magic-pdf[full] --extra-index-url https://wheels.myhloli.com -i https://mirrors.aliyun.com/pypi/simple
从hugginface下载模型
插播：
snapshot_download会有一个默认下载位置。如果要修改，请参考修改默认下载位置
export HF_HOME=“目标地址”
export MODELSCOPE_CACHE=“目标地址”
pip install huggingface_hub
wget https://gcore.jsdelivr.net/gh/opendatalab/MinerU@master/scripts/download_models_hf.py -O download_models_hf.py
python download_models_hf.py
下载模型成功后会输出配置路径：/home/ztshao/magic-pdf.json
简单测试
wget https://gcore.jsdelivr.net/gh/opendatalab/MinerU@master/demo/small_ocr.pdf
magic-pdf -p small_ocr.pdf -o ./output