transformers 使用bert中文模型

pytorch 下载

gpu版
pip install torch===1.5.0 torchvision===0.6.0 -f https://download.pytorch.org/whl/torch_stable.html

cpu版
pip install torch==1.5.0+cpu torchvision==0.6.0+cpu -f https://download.pytorch.org/whl/torch_stable.html

离线安装

或者将whl文件放到localpath目录下 运行 pip install --no-index --find-links=/localpath torch torchvision

清华镜像下载（解压，将对应文件复制到python安装目录下的Lib/site-packages 和Scripts，再安装 python依赖包：pyyaml mkl cmake cffi 否则会报错）

 

从源码编译

1.4版本加载模型出错segmentation fault，官方的1.5版本不支持cuda10.0，公司的环境只能用cuda10.0所以自己编译了一遍

注意：一定要完全按照git文档的命令行去操作，不能跳过，否则会报错。

 

中文bert-wwm 模型 下载

中文ber