Bert Chinese-Text-Classification-Pytorch 遇到的问题汇总

最新推荐文章于 2024-05-21 17:57:22 发布

原创最新推荐文章于 2024-05-21 17:57:22 发布 · 1.4k 阅读

7 ·

CC 4.0 BY-SA版权

文章标签：

#python #nlp #深度学习 #pytorch

NLP文本专栏收录该内容

2 篇文章

订阅专栏

本文介绍了一个基于Bert的中文文本分类预训练模型，并解决了在实现过程中遇到的几个常见问题，包括vocab.txt文件的正确下载方式、如何指定模型参数以及解决THUCNews文件夹中缺失文件的问题。

部署运行你感兴趣的模型镜像

基于Bert的中文文本分类预训练模型
地址：Chinese-Text-Classification-Pytorch

问题1：上面给的vocab.txt地址无法下载
下载地址：vocab.txt
选择下图这个就好，下载后改名为vocab.txt

问题2：运行run.py报错未指定model
使用pycharm带参数运行如图：
在这里插入图片描述
利用spder的话先将运行地址确定至run.py的地址，如下图右上角，再在console中输入：run run.py --model bert ,回车即可

问题3：有一个报错显示缺少一个在 THUCNews/文件夹的文件
需要事先在此目录下建立一个名叫：saved_dict 的文件夹如图
在这里插入图片描述

您可能感兴趣的与本文相关的镜像

PyTorch 2.9

PyTorch

Cuda

PyTorch 是一个开源的 Python 机器学习库，基于 Torch 库，底层由 C++ 实现，应用于人工智能领域，如计算机视觉和自然语言处理

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

Die Young?

关注关注

8
点赞
踩
7

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

Bert-Chinese-Text-Classification-Pytorch-master指标学习(自用待补充)

yansl072516的博客

06-29

804

Bert-Chinese-Text-Classification-Pytorch-master指标学习

调试运行 Bert-Chinese-Text-Classification-Pytorch

qq_40671063的博客

09-20

1017

调试运行 Bert-Chinese-Text-Classification-Pytorch

参与评论您还未登录，请先登录后发表或查看评论

Bert-Chinese-Text-Classification-Pytorch-master.zip.zip

12-27

完整的bert模型源代码，对代码做了很多注释和精简，以中文文本分类为例的一个deom，可以拿来就用，把代码稍微改改就可用在你的任务中。

Bert-Chinese-Text-Classification-Pytorch:使用Bert，ERNIE，进行中文文本分类

05-11

Bert-Chinese-Text-Classification-Pytorch 中文文本分类，Bert，ERNIE，基于pytorch，开箱即用。介绍模型介绍、数据流动过程：还没写完，写好之后再贴博客地址。工作忙，懒得写了，类似文章有很多。机器：一块2080Ti ，训练时间：30分钟。环境 python 3.7 pytorch 1.1 tqdm sklearn tensorboardX pytorch_pretrained_bert(预训练代码也上传了, 不需要这个库了) 中文数据集我从中抽取了20万条新闻标题，已上传至github，文本长度在20到30之间。一共10个类别，每类2万条。数据以字为单位输入模型。类别：财经、房产、股票、教育、科技、社会、时政、体育、游戏、娱乐。数据集划分：数据集数据量训练集 18万验证集 1万测试集 1万更换自己的数据集按照

自己的思路-套Bert-Chinese-Text-Classification-Pytorch-master语料处理流程

yansl072516的博客

06-09

608

数据预处理阶段

bert_chinese_pytorch:伯特中文文本分类

05-10

bert_chinese_pytorch 参考代码：优快云博文（施工中）：

Bert-Chinese-Text-Classification-Pytorch-master-副本-副本

最新发布

02-21

BERT-Chinese-Text-Classification-Pytorch是一个使用PyTorch框架实现的项目，它的主要目的是利用BERT模型来处理中文文本分类任务。中文文本分类是将给定的中文文本分配到一个或多个预定义类别的过程。在中文文本...

Chinese-Text-Classification-Pytorch-mas

09-20

Chinese-Text-Classification-Pytorch-master。数据齐全，说明文档详细。点击即用！ # 训练并测试： # TextCNN python run.py --model TextCNN # TextRNN python run.py --model TextRNN # TextRNN_Att python ...

Chinese-Text-Classification，用卷积神经网络基于 Tensorflow 实现的中文文本分类。

weixin_30691871的博客

11-10

211

用卷积神经网络基于 Tensorflow 实现的中文文本分类项目地址： https://github.com/fendouai/Chinese-Text-Classification 欢迎提问：http://tensorflow123.com/ 这个项目是基于以下项目改写： cnn-text-classification-tf 主要的改动：兼容 tensorflow 1.2 以上增加了中文...

chinese_text_classification:通过一个中文文本分类问题系统实现了各种分类方法

03-11

chinese_text_classification 通过一个中文文本分类问题系统实现了各种分类方法数据来源数据搜狗新闻类别有汽车，娱乐，军事，体育，技术五种类别。原始数据比较大，没有上传，分词，去除重组词之后的数据放在processed_data文件夹下。分类算法主要实现了以下分类算法： NB（朴素贝叶斯）支持向量机快速文本 text_CNN text_RNN text_RCNN text_Bi_LSTM text_Attention_Bi_LSTM HAN（分层注意网络）埃尔莫分类准确率分类准确率都在90％附近，没有进行过多预处理，只为熟悉算法的使用。依赖库基于tensorflow2.0实现，可以在win和linux下运行。觉得有用的点个赞，谢谢。

Python-PyTorch实现的BERT多标签文本分类

08-10

This repo contains a PyTorch implementation of a pretrained BERT model for multi-label text classification.

Bert-TextClassification-master.zip

04-06

bert 做文本分类bert

BERT 中文里面的 vocab.txt

11-22

BERT vocab.txt

Bert-Chinese-Text-Classification-Pytorch: 基于PyTorch的BERT中文文本分类器

gitblog_00011的博客

03-22

823

Bert-Chinese-Text-Classification-Pytorch: 基于PyTorch的BERT中文文本分类器去发现同类优质开源项目:https://gitcode.com/ 项目简介是一个开源项目，它提供了一个使用PyTorch实现的BERT模型，用于中文文本分类任务。BERT（Bidirectional Encoder Representations from Transf...

Bert-Chinese-Text-Classification-Pytorch项目测试函数编写

qq_43728463的博客

05-21

374

在这个git项目给了训练函数但是未提供测试函数，然后我根据自己的需求改了一下输入的模式。

模型代码学习-CLS文本分类-Bert-Chinese-Text-Classification-Pytorch代码学习-模型结构

CuriousLiu的博客

11-20

3707

Reference：https://github.com/649453932/Bert-Chinese-Text-Classification-Pytorch 模型代码学习-CLS文本分类-Bert-Chinese-Text-Classification-Pytorch代码学习-模型结构 baseDir：Bert-Chinese-Text-Classification-Pytorch/models/ 目录 ./models/bert.py学习 ./models/bert.py学习这里的文本分.

模型代码学习-CLS文本分类-Bert-Chinese-Text-Classification-Pytorch代码学习-构建数据，数据Iter类

CuriousLiu的博客

11-20

4028

Reference：https://github.com/649453932/Bert-Chinese-Text-Classification-Pytorch 模型代码学习-CLS文本分类-Bert-Chinese-Text-Classification-Pytorch代码学习-构建数据集类 baseDir：Bert-Chinese-Text-Classification-Pytorch/utils.py 目录 ./utils.py学习 ./utils.py学习 utils.py中主要是..

gitblog_00027的博客

04-22

371

bert-chinese-text-classification-pytorch

06-28

bert-chinese-text-classification-pytorch是一个基于PyTorch的中文文本分类模型，使用预训练的BERT模型进行特征抽取和分类。该模型可以应用于各种中文文本分类任务，如情感分析、文本分类等。