XTuner 微调个人小助手实践学习笔记(2)

最新推荐文章于 2025-06-13 19:04:42 发布

YZBshanshan

最新推荐文章于 2025-06-13 19:04:42 发布

阅读量498

点赞数 4

分类专栏：书生浦语大模型实战营第三期文章标签：学习笔记

本文链接：https://blog.youkuaiyun.com/yizhiboshanshan/article/details/141032225

版权

参考教程

由于之后想自己微调一个角色扮演的小助手，于是先试着微调一下公开数据集，练练手，后续再自己准备数据集。

1. 处理数据

先根据地址在OpenDatalab社区下载弱智吧数据集：数据集-OpenDataLab

原始数据格式为：

{
    "instruction": "天下没有不散的筵席，那么我们相聚的意义又是什么",
    "input": "",
    "output": "尽管我们相聚的时光有限，但是相聚的意义在于创造美好的回忆和珍贵的关系。相聚让我们感受到彼此的关怀、支持和友情。我们可以一起分享喜悦、快乐和困难，互相支持和激励。相聚也可以是一个机会，让我们相互了解、学习和成长。最重要的是，相聚能够带给我们真实的人际交往和情感交流，让我们感受到生活的丰富和美好。所以，即使相聚的时间有限，我们仍然要珍惜这份意义和与彼此相聚的时光。",
    "task_type": {
        "major": [
            "问答"
        ],
        "minor": [
            "逻辑问答",
            "隐喻理解"