基于CRF++的中文名实体识别程序

最新推荐文章于 2020-11-05 15:37:50 发布

原创最新推荐文章于 2020-11-05 15:37:50 发布 · 234 阅读

0 ·

CC 4.0 BY-SA版权

本文介绍如何使用 CRF++-0.58 在 Win10 和 Python3.7.0 环境下实现条件随机场 (CRF)。条件随机场是一种用于序列标注和预测的概率模型。

1 实验环境

win10
Python 3.7.0
CRF++-0.58

2 程序主要算法

条件随机场（CRF）：

条件随机场定义:令 G = ( V , E ) 表示一个无向图, 任意一个节点v对应一个随机变量Y，因此Y = (v ∈ V) , Y中元素与无向图 G中的顶点一一对应。当在条件 Χ 下,随机变量 Y v 的条件概率分布服从图的马尔可夫属性:p ( | Χ , , w ≠ v ) = p ( | Χ , , w ~ v ) ,其中 w ~ v 表示 ( w , v) 是无向图 G 的边。这时我们称 ( Χ , Y ) 是一个条件随机场。