BERT-base 模型关于tensorflow版本不匹配问题

最新推荐文章于 2024-09-14 11:21:13 发布

cangming1

最新推荐文章于 2024-09-14 11:21:13 发布

阅读量806

点赞数

分类专栏：机器学习深度学习 nlp 文章标签： tensorflow 深度学习人工智能 bert 自然语言处理

本文链接：https://blog.youkuaiyun.com/cangming1/article/details/124901323

版权

机器学习同时被 3 个专栏收录

4 篇文章

订阅专栏

深度学习

3 篇文章

订阅专栏

nlp

2 篇文章

订阅专栏

tensorflow高版本适配低版本解决方法

IDE: PyCharm
tf版本: 2.9

运行bert模型

出现报错module 'tensorflow._api.v2.train' has no attribute 'Optimizer'

根本原因是tensorflow 1的版本与2不适配

将class AdamWeightDecayOptimizer(tf.train.Optimizer)

改为

module 'tensorflow._api.v2.train' has no attribute 'Optimizer'

当前来看适用于一切tensorflow 1的版本与2不适配的问题

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

cangming1

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
1
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

基于BERT模型的文本分类研究 TensorFlow2实现（内附源码）【自然语言处理NLP-100例】

“365天深度学习训练营”报名进行中～

03-21

1881

🔗 运行环境：python3 🚩 作者：K同学啊 🥇 精选专栏：《深度学习100例》 🔥 推荐专栏：《新手入门深度学习》 📚 选自专栏：《Matplotlib教程》 🧿 优秀专栏：《Python入门100题》大家好，我是K同学啊！在上一篇文章中讲解了BERT是什么，这一篇文章中我应用BERT进行一个文本分类的实战，使用的是THUCTC数据集，实现了财经、房产、股票、教育、科技、社会、时政、体育、游戏、娱乐等10类文本的高效分类，最后的分类准确率达到了83.3%，项目情况如下： 自然语言处理100.

Bert基础(七)--Bert实战之理解Bert模型结构

Andy_shenzl的博客

03-26

1490

在篇我们将详细学习如何使用预训练的BERT模型。首先，我们将了解谷歌对外公开的预训练的BERT模型的不同配置。然后，我们将学习如何使用预训练的BERT模型作为特征提取器。此外，我们还将探究Hugging Face的Transformers库，学习如何使用Transformers库从预训练的BERT模型中提取嵌入。接着，我们将了解如何从BERT的编码器层中提取嵌入，并学习如何为下游任务微调预训练的BERT模型。

1 条评论您还未登录，请先登录后发表或查看评论

Bert-二分类(包括py3.8版本情况下tensorflow降为1.X的情况,包括安装虚拟环境)

weixin_53056212的博客

04-29

2017

Bert-二分类前话代码微调设置参数Run 前话 1.作为一名小白最近在做中文文本二分类的实战，用到Google的Bert模型。 2.将数据清洗好后，包括去除不必要的内容，去除停用词。由于Bert为监督模型(确实监督效果更好)，将数据集人工分类标注为“0”“1”后再分为训练集(70%)、验证集(10%)、测试集(20%)(最好新建一个文件夹专门放数据集，此文件夹放在bert-master下)。 3.从github上下载好中文预训练模型(用人家已经预训练好的，普通machine跑不了)以及bert-maste

bert中文微调tensorflow降版本过程

233彭于晏的博客

08-20

7132

简述 bert是谷歌提出的自然语言处理领域的大杀器，个人感觉相当于重新定义了自然语言处理领域各个任务的效果上限，就拿文本分类来说，目前竭尽全力调试模型和清洗数据等等trick操作，上了bert之后，一般都会比之前的效果要好上几个点，所以对于时效性要求不高的方向，比如离线需求，别浪费力气了，all in bert吧；对于时效性要求高的方向，比如在线服务接口，可以对bert进行剪枝，在精度损失较小的...

Tensorflow之环境版本匹配问题

ZONGXP的博客

07-13

1万+

相信很多同学在用tensorflow的时候，都被环境折磨得不要不要的…只要有某一个包不匹配，就会出现运行错误……版本高了低了都可能出现问题……（真的是恶心）万幸，有人把环境做了一个系统的整理，只需要找到你安装的tensorflow版本，就可以看到你需要匹配的其它包的版本信息链接是：https://docs.floydhub.com/guides/tensorflow/ 比如你要安装tensorflow-1.14，你可以看到其它python包的版本信息如下 absl-py==0.8.0 anno

pycharm运行模型时怎么设置权重?_使用transformers和tensorflow2.0跑bert模型

weixin_39604276的博客

11-21

445

BERT 模型提出已经有接近两年的时间了，学术界和工业界也都在不断迭代。想要深入掌握的话，不仅要知道原理，更要懂得源码细节，以及亲手实战 BERT 精调，了解这两年来一系列模型的发展脉络。想要全面地学习这些知识点的话，可以学习 bienlearn 上的 BERT 专栏。这个 BERT 专栏由自然语言处理领域的 KOL——「夕小瑶的卖萌屋」作者团主笔，帮助新手以及有一定基础的同学快速上手 BERT，...

Transformers实践-谷歌-BERT-概览

最新发布

深度安全实验室

09-14

692

Transformers实践-谷歌-BERT-概览

语义匹配（一）【NLP论文复现】Sentence-BERT 句子语义匹配模型的tensorflow实现以及训练Trick

weixin_45839693的博客

11-03

6484

Sentence-BERT 句子语义匹配模型的tensorflow实现以及训练trick论文模型回顾建模与训练模型代码部分数据处理训练模型训练Tricktrick1 warm up代码实现：trick2 focal loss代码实现：总结与思考论文模型回顾论文链接：https://arxiv.org/abs/1908.10084 文章在已有的语义匹配模型的基础上提出了基于Bert的句义匹配孪生网络模型介绍：将两个句子通过Bert（注意：在对句子相似度建模时，两个句子经过的Bert层应该是共享权重.

win10利用tensorflow serving(docker安装)部署Bert文本分类模型(tf keras)

wang_rui_j_ie的博客

01-25

2371

利用Tensorflow serving部署tf keras的模型

RoBERTa中文预训练模型.zip

07-01

Roberta_l24_zh_base TensorFlow版本，Bert 直接加载 24层base版训练数据：10G文本，包含新闻、社区问答、多个百科数据等什么是RoBERTa: 一种强大的用于预训练自然语言处理（NLP）系统的优化方法，改进了...

基于Tensorflow 2.x手动复现BERT

cmd233333的博客

03-27

2191

基于Tensorflow 2.x手动复现BERT What’s I can’t create, I don’t understand. —— Richard Feynman 这次来造一个NLP领域的大轮子——BERT。当然，以我的硬件条件（GTX1660Ti）并不允许完完全全的“复刻”谷歌的模型，所以这边下调了模型和词嵌入的维度。并且使用了网友们喜闻乐见的英雄联盟语料库来训练。所以我给自己复现的模型起名叫：LOL-BERT-Tiny。代码可见： https://github.com/cmd23333/BE

使用bert源码中遇到的问题

m0_57950360的博客

12-14

121

1、Tensorflow2.x版本与Tensorflow1.x版本代码转换。

BERT

hkz0704的博客

05-14

412

bert模型常见问题 bert模型是现在机器学习里边一个非常经典的模型，多用于nip方向的模型处理首先我们在GitHub上下载google已经训练好的模型，一定要下载完整的代码和数据集。由于数据集较大，可能不太好下载，大家可以在B站找视频，视频下的评论区会有大神分享数据集。视频课链接：https://www.bilibili.com/video/BV1NJ411o7u3?p=14&spm_id_from=pageDriver 评论区大神云集，相信会有方法解决你的数据集问题。然后就是在

tensorflow2引入bert_谷歌重磅发布TensorFlow 2.0正式版，高度集成Keras，大量性能改进...

weixin_39740737的博客

01-26

835

今年 3 月份，谷歌在加州举办的 TensorFlow 开发者峰会（TensorFlow Dev Summit）上正式发布了 Tensorflow 2.0 Alpha 版。今天，谷歌推出 TensorFlow 2.0 正式版，真乃开发者社区的一大盛事。机器之心报道，作者：杜伟、一鸣。TensorFlow 2.0 安装指南：https://www.tensorflow.org/installTens...

AttributeError: module ‘tensorflow._api.v2.train‘ has no attribute ‘Optimizer‘

吉米_王

04-25

1809

我直接将TensorFlow从2.8降到了1.14。2、不降版本，直接改api–这个我没兴趣，真懒；版本迭代，相关方法被移除；

module 'tensorflow_core._api.v2.train' has no attribute 'Optimizer'解决办法