XTuner复现

https://github.com/InternLM/tutorial/blob/main/xtuner/README.mdhttps://github.com/InternLM/tutorial/blob/main/xtuner/README.md

1.XTuner简介

一个大语言模型微调工具箱，由上海人工智能实验室开发。支持的开源LLM (2023.11.01),详情见哔哩哔哩公众号

2.实验过程

在算力平台上进行搭建（InternStudio，该平台是活动期间免费提供使用）

2.1系统安装

# 如果你是在 InternStudio 平台，则从本地 clone 一个已有 pytorch 2.0.1 的环境：
/root/share/install_conda_env_internlm_base.sh xtuner0.1.9
# 如果你是在其他平台：
conda create --name xtuner0.1.9 python=3.10 -y

# 激活环境
conda activate xtuner0.1.9
# 进入家目录 （~的意思是 “当前用户的home路径”）
cd ~
# 创建版本文件夹并进入，以跟随本教程
mkdir xtuner019 && cd xtuner019


# 拉取 0.1.9 的版本源码
git clone -b v0.1.9  https://github.com/InternLM/xtuner
# 无法访问github的用户请从 gitee 拉取:
# git clone -b v0.1.9 https://gitee.com/Internlm/xtuner

# 进入源码目录
cd xtu