【极简】实体识别和消歧

最新推荐文章于 2024-05-16 03:00:13 发布

小基基o_O

最新推荐文章于 2024-05-16 03:00:13 发布

阅读量1.4k

点赞数 2

CC 4.0 BY-SA版权

本文链接：https://blog.youkuaiyun.com/Yellow_python/article/details/97821734

自然语言处理-应用级专栏收录该内容

15 篇文章 ¥9.90 ¥99.00

订阅专栏

超级会员免费看

本文探讨了命名实体识别和消歧的重要技术，包括使用TF-IDF句向量进行有监督学习，利用词周边特征和词向量解决无监督问题。还介绍了基于规则的内联修改权重方法，特别针对地名消歧，以及如何运用正则表达式和DAG内嵌入正则来识别量词和时间等复杂实体。

文章目录

命名实体识别
消除歧义

命名实体识别

import jieba

# 语料
sentences = '''
刚才煮粥的时候，我的小米手机突然响了，是楼下卖鸡蛋的阿姨打来的。
广州街坊邱先生报料称，自己前几天在工厂上班时，放在裤袋里的苹果手机突然出现冒烟。
苹果易购APP可以买水果，价格超实惠，买了一箱苹果，非常新鲜，还送了一袋小米。
'''.strip().split('\n')

# 待识别的实体
entities =