《Same Representation,Different Attentions:Shareable Sentence Representation》阅读笔记
之后会不定期分享论文笔记。摘要不同的任务句子表示不同,而且句子表示受限于不多的训练数据。论文提出一个橘子表示的模型可以用于多种任务。所有任务分享相同的句子表示,每个任务可以从共享的句子表示中利用attention机制抽取任务特定的信息。每个任务注意力机制的问题向量可以是静态的参数也可以是动态的。论文在16个不同的文本分类任务中做实验,并取得了很好的效果。背景词向量在多个任务中已经有...
原创
2018-12-26 14:36:37 ·
620 阅读 ·
0 评论