- 博客(10)
- 收藏
- 关注
RSS订阅原创 【无标题】
allenNLP在window下无法运行带有local加载模型的 jsonnet配置文件，导致无法加载HuggingFace预训练模型
2023-02-27 17:03:33
236
原创 transformers下载模型到本地（tensorflow2.0）
tensorflow2.0环境，下载transformers模型到本地要点： GPT2LMHeadModel.from_pretrained的参数需要额外加入from_tf=True。首先打开网址：https://huggingface.co/models 这个网址是huggingface/transformers支持的所有模型，目前大约一千多个。搜索gpt2（其他的模型类似，比如bert-base-uncased等），并点击进去。通常我们需要保存的是三个文件及一些额外的文件，第一个是配置文件；con
2020-12-23 00:37:26
4165
1
原创 transformers 加载模型时报错
transformers加载模型时报错安装transformers后，拿下面的代码测试：from transformers import AutoTokenizer, TFAutoModeltokenizer = AutoTokenizer.from_pretrained("bert-base-uncased")model = TFAutoModel.from_pretrained("bert-base-uncased")inputs = tokenizer("Hello world!", ret
2020-12-18 17:31:38
8863
3
原创 tf.keras.models.load_model模型加载时报错
tf.keras.models.load_model模型加载时报错File “h5py_objects.pyx”, line 54, in h5py._objects.with_phil.wrapper File “h5py_objects.pyx”, line 55, in h5py._objects.with_phil.wrapper File “h5py\h5f.pyx”, line 156, in h5py.h5f.is_hdf5 OSError保存模型model.save('./data/m
2020-12-17 15:57:46
6097
2
原创 tensorflow.python.framework.errors_impl.InvalidArgumentError: indices[8,1] = 1000001 is not in [0,
基于TF2.0的keras BiLSTM-CRF模型报错在加载数据进入模型训练时报如下错误tensorflow.python.framework.errors_impl.InvalidArgumentError:tensorflow.python.framework.errors_impl.InvalidArgumentError: indices[8,1] = 1000001 is not in [0, 1502) [[node sequential/embedding/embedding_l
2020-11-19 18:42:17
1164
原创 基于tensorflow2.0实现BiLSTM-CRF，调用tensorflow-addons CRF层失败 # from crf import CRF
基于tensorflow2.0实现BiLSTM-CRF，调用tensorflow-addons CRF层失败# from crf import CRFfrom tensorflow_addons.layers.crf import CRFimport tensorflow as tffrom tensorflow.keras.models import SequentialmaxLen = 10vocabSize = 20model=Sequential()model.add(tf.ker
2020-11-18 20:10:23
2827
7
原创 python调用方法，获取当前模块路径和代码行
python调用方法，获取当前模块路径和代码行这种调用在写日志模块时，非常有用！！！被调用的方法所在的模块 demo01.pyimport sysdef func(): #该方法被调用时，获取所在的模块名 modulePath = sys._getframe().f_back.f_code.co_filename #该方法被调用时，获取所在的代码行 lineNo = sys._getframe().f_back.f_lineno return modulePa
2020-08-20 11:05:21
855
原创 python连phoenix遇到很多坑
python连phoenix遇到很多坑根据网上代码import jaydebeapijdbc_driver = "org.apache.phoenix.jdbc.PhoenixDriver"jdbc_url="jdbc:phoenix1:xxx,xxx2,xxx3:2181"phoenix_client_jar="/home/xxx/AI_check/phoenix-4.14.3-HBa...
2020-05-08 16:15:25
653
原创 jupyter notebook OSError: [Errno 13] Permission denied: '/run/user/1000/jupyter'
不同用户因为权限问题，不同用户之间不能使用另一个用户的jupyter notebook会报OSError: [Errno 13] Permission denied: ‘/run/user/1000/jupyter’，解决方法OSError: [Errno 13] Permission denied: ‘/run/user/1000/jupyter’在.bashrc加入export XDG...
2019-07-03 16:38:20
1638
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人