MindNLP是一个基于MindSpore深度学习框架开发的开源自然语言处理(NLP)库。它为解决各种NLP任务提供了一个强大的平台,包含了许多常用的NLP方法和模型。
MindNLP 官网:https://mindnlp.cqu.ai/
Github仓库地址: https://github.com/mindspore-lab/mindnlp.git
官网上的Tutorials中的示例和代码的版本比较旧,存在部分因错误而不可运行的代码;这里提供中文文档的基础部分,包含各示例代码及其运行结果(基于mindnlp0.4.1的daily版本,版本为2024.11.26),部分内容在原官方英文教程基础上加入了一些额外的说明。
Tutorials:https://mindnlp.cqu.ai/tutorials/quick_start/
注:通过git 下载mindnlp最新版:pip install git+https://github.com/mindspore-lab/mindnlp.git
基础教程的中文文档(含示例运行结果)的文件(.ipynb)已上传至N思大模型平台:https://xihe.mindspore.cn/projects/Helloyouth2024/MindNLP_documents/tree
MindNLP_document 仓库文件说明:N思大模型平台偶尔由于平台问题无法对外显示.ipynb文件,但下载到本地之后是可见的;文件包含:dataset_train2val.py, README.md, 使用Trainer.ipynb, 使用镜像.ipynb, 参数高效微调(PEFT).ipynb,快速开始.ipynb, 数据预处理.ipynb.
可通过git clone下载文件到本地机器查看: