书生大模型训练营第四期—L0G4000学习记录

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档

---

任务

1. 使用魔搭社区平台和魔乐社区平台下载模型

---

完成过程

1.ModelScape

使用pip，安装必要的依赖库

pip install modelscope -t /root/env/maas
pip install numpy==1.26.0  -t /root/env/maas
pip install packaging -t /root/env/maas

安装后，更改环境变量

export PATH=$PATH:/root/env/maas/bin
export PYTHONPATH=/root/env/maas:$PYTHONPATH

更改环境变量后，即可使用modelscape命令进行模型下载

modelscope download \
    --model 'Shanghai_AI_Laboratory/internlm2_5-1_8b-chat' \
    tokenizer.json config.json model.safetensors.index.json \
    --local_dir '/root/ms_demo'

下载完成

2. Modelers

在Modelers平台下载模型更加简单，使用git命令即可：

# 确保安装git-lfs 保证大文件的正常下载
apt-get install git-lfs
git lfs install
# clone 仓库
git clone https://modelers.cn/Intern/internlm2_5-1_8b-chat.git