
深度学习
文章平均质量分 82
码世界-
这个作者很懒,什么都没留下…
展开
-
tensorflow [saved_model,.pb]模型生成及处理以及多模型合并到上线服务请求从0到1
多模型合并:在模型上线时,我们训练的多个模型往往功能相似或相近或有某种联系,在请求模型的返回结果时,如果一个接一个的去请求,会严重影响程序的效率。并发请求虽然能够缓解这种现象,理论上甚至可以达到与单个模型相同的请求时间,但是实际操作与理论还是有很大差距的。很明显,这种将模型串联起来的方式不够科学。如果把这些模型并联起来,分别接受相同或不同的输入,效果会大大不同,其运行效率与单个模型相差无几。接...原创 2019-12-03 17:56:55 · 2843 阅读 · 1 评论 -
ResourceExhaustedError解决方法
最近经常碰到这个问题,搞得有点怀疑人生了……首先恭喜你,你遇到了一个比较玄的问题…………………………ResourceExhaustedError (see above for traceback): OOM when allocating tensor with shape[154,800]…………………………训练过程中,模型跑得好好的,结果'喀’,蹦出这么个错误,不能愉快的玩耍了都。这个错误一出...原创 2017-11-13 10:20:47 · 60385 阅读 · 19 评论 -
使用预训练的word2vec词向量
以谷歌开源google news(bin)为例。下载地址:https://code.google.com/p/word2vec更多模型下载地址:https://github.com/xgli/word2vec-api之前被这个问题困扰了挺长时间,一直找不到有效的方法,可能是我太菜……在网上找资料也只找到了一种把bin转换成txt 文件的方式,但是效率出奇的低,无法想象,本地一运行程序就死机,服务器...原创 2017-12-02 16:22:52 · 25848 阅读 · 11 评论 -
【TEACH-NLP】词向量预处理-抽取词向量
词向量训练完成之后,并不能直接使用,还需要做进一步的处理——抽取词表中对应的词向量。并不是所有的词向量都是有用的,我们仅用到词表中的词向量,将抽取出来的词向量保存成一个新的文件,以备后续使用。【提要】一、这里我们要用到之前的两个文件:vocab.txt #词表vec.bin #词向量表二、还要生成一个新的文件来保存抽取出来的词向量:select_vocab.txt #抽取出...原创 2019-09-29 11:27:41 · 488 阅读 · 0 评论