ch4-XTuner大模型单卡低成本微调实战
主要内容
- 视频网址:https://www.bilibili.com/video/BV1yK4y1B75J/?vd_source=b96c7e6e6d1a48e73edafa36a36f1697
- 课程文档:https://github.com/internLM/tutorial
本节课主要介绍了XTuner的基本功能和入门使用,XTuner是一个大语言模型微调工具箱,由MMRazor和MMDeploy联合开发。
- 🤓 傻瓜化: 以 配置文件 的形式封装了大部分微调场景,0基础的非专业人员也能一键开始微调。
- 🍃 轻量级: 对于 7B 参数量的LLM,微调所需的最小显存仅为 8GB : 消费级显卡✅,colab✅
课程主要内容如下: