跨语言论文阅读笔记———第一篇

跨语言命名实体识别
本文介绍了一种无需平行语料库的跨语言命名实体识别器转移方法,并详细解释了布朗聚类这一词汇聚类技术。布朗聚类通过分析词汇前后出现的上下文,将相似的词归为一类。

Cross-lingual Transfer of Named Entity Recognizers
without Parallel Corpora

1.布朗聚类:

布朗聚类是一种针对词汇的聚类方法,Input是一系列的文章或者句子,Output有两种:
      第一种是:一系列的词组,具体多少个类看你之前的设定:
     第二种是:每个词都有一长串的二进制码,用类似霍夫曼编码的方式对每个词进行编码
    
 可以显而易见的是,前缀相似度更高的词就越相近
        什么样的词汇相似呢?一个直觉的想法就是:相似的词出现在相似的位置。
        更精确的说法就是:相似词的前驱词和后继词的分布相似,也就是它前面的词和后面的词出现得是相似的。

转载于:https://www.cnblogs.com/maowuyu-xb/p/6701345.html

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值