趋吉避凶的博客

作者在微调Qwen时遇到的一些坑以及一点经验 作者在微调Qwen时遇到的一些坑以及一点经验。

文章目录前言一、环境搭建二、使用步骤1.引入库2.数据展示3.读入数据4.连接图数据库5.创建知识图谱6.知识图谱展示总结前言使用Python读取CSV数据生成简易的知识图谱一、环境搭建pandas==1.1.5py2neo==2021.0.1若py2neo安装失败请升级pip二、使用步骤1.引入库import pandas as pdfrom py2neo import Graph, Node, Relationship2.数据展示事故灾害的一些数据：博主提供一百条数

文章目录前言一、数据标注数据未标注数据二、算法有监督学习（supervised learning）无监督学习（unsupervised learning）半监督学习（semi-supervised learning）三、模型总结前言一个人工智能项目，当中最重要的究竟是数据、算法、模型呢？当然是三者缺一不可，数据是构建的基础也是坚实的后盾，算法与模型是使效果更理想的方法。一、数据数据是起点，因为它是非常有用的资产。数据分为两种：标注数据与未标注数据标注数据标注的数据通常采用一组未标注的.

文章目录准备工作一、处理数据集二、构建分类任务1.引入库2.配置参数3.读取处理数据4.加载Albert预训练模型5.开始训练6.验证模型总结参考文献准备工作预训练模型下载地址：Albert_Large_zh数据集下载地址：事故灾害多分类数据集（数据集由爬虫获取，如有错误请多多指教）一、处理数据集将预训练模型放入pretraining_model文件夹下。将数据集分成训练集，测试集与验证集，分别为train.txt，test.txt，dev.txt三个，比例一般为7：2：1，放入datase.