【微调】案例及数据集

对话数据集

• NLP领域中文对话系统数据集总结（有下载地址）
  

BERT电影评论分类: 使用imdb 数据集

• 如何微调（Fine-tuning）大语言模型？ 大神给出了微调的概念：

• 大神的意思是 调整的是参数，结果是原来的知识都保留，但是某些层被新的数据训练后，优化了其对新任务的执行

• 微调是基于一个已经训练好的神经网络模型，通过对其参数进行细微调整，使其更好地适应特定的任务或数据。通过在新的小规模数据集上继续训练模型的部分或全部层，模型能够在保留原有知识的基础上，针对新任务进行优化，从而提升在特定领域的表现。
  - 根据微调的范围，可以分为全模型微调和部分微调

LoRA微调

-