[论文笔记]Aspect-based Sentiment Analysis withType-aware Graph Convolutional Networks and Layer Ensemble

文章提出了一种新的图卷积网络模型T-GCN,它利用依赖类型的注意力机制来区分词与词的关系,并通过注意力层集成学习不同层次的信息。T-GCN旨在解决传统GCN忽视依赖类型信息和单一使用最后一层输出的问题,尤其在情感分析任务(ABSA)中,能更准确地捕捉关键关系。

题目、作者

 一、Abstract

1. 以往基于神经图的研究大多只利用依赖关系,而没有考虑依赖关系的类型,并且缺乏有效的机制来区分重要关系(见后面“词与词的关系”)以及从不同层次的图模型中学习。

2. 为了解决上述问题,本文提出T-GCN。

T-GCN:一种显式地利用依赖类型的基于类型感知的图卷积网络,T-GCN使用注意力机制来区分图中不同的边(关系),并提出注意力层集成(ensemble)来综合学习T-GCN的不同层。

二、Introduction

1. GCN:对上下文信息编码的进一步增强,通常从基于由输入文本的依赖分析(dependency
parse)结果构成的图中学习远距离字词的关系

2. 以往研究使用的GCN的缺点:

1) 忽略了依赖类型中携带的信息,并且对图中的所有词与词的关系(详见图一下方)一视同仁,可能无法区分不重要的关系(比如det、compound类型就是对于ABSA任务来说的不重要的关系),从而误导ABSA。

2) 虽然使用多层GCN,但只使用最后一层GCN的输出,忽略了中间层的编码信息,这可能导致丢失一些必要的信息。

词与词的关系:如图一所示,依赖弧上方的英文字母便是两个词之间的关系。可以看到"menu"分别与"The"、"drink"和"limited"相连接,但由于"menu"与"limited"的依存关系是"nsubj"(名词主语),这表明它们两个词之间的关系可能是最重要的,这有力的指导了对于方面词"menu"的情感分析

更多依存关系含义详见:NLP工具——Stanza依存关系含义详解_常鸿宇的博客-优快云博客_依存关系

3. 研究步骤:

① 通过现成的工具包获得输入文本的依赖分析结果</

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值