大家好,我是爱编程的喵喵。双985硕士毕业,现担任全栈工程师一职,热衷于将数据思维应用到工作与生活中。从事机器学习以及相关的前后端开发工作。曾在阿里云、科大讯飞、CCF等比赛获得多次Top名次。现为优快云博客专家、人工智能领域优质创作者。喜欢通过博客创作的方式对所学的知识进行总结与归纳,不仅形成深入且独到的理解,而且能够帮助新手快速入门。
本文主要介绍了基于TensorFlow和Pytorch的Elmo实战,希望能对学习elmo的同学们有所帮助。
1. 基于tensorflow的实现
利用tensorflow hub加载已经训练好的elmo模型
本案例使用train_2kmZucJ.csv、test_oJQbWVk.csv数据集,可搜索下载数据。开始为数据预处理模块,可以忽略不看(最后给出了预处理后的结果)
import pandas as pd
import numpy as np
import spacy
from tqdm import