未知人士的博客

按照人民日报的分词标准训练 参照： a 形容词 b 区别词 d 副词 f 方位词 g 语素词 i 成语 j 简略词 k 后接成分 l 习用语 m 数词 n 名词 o 拟声词 p 介词 q 量词 r 代词 s 处所词 t 时间词 u 助词 v 动词 w 标点符号 x 非语素词 y 语气词 z 状态词 c 连词 e 叹词 h 前接成分 标记 解释 a 形容词 b 区别词 c 连...

一、自动分词 1、自动分词就是让计算机在某汉字串中的词与词之间加上空格或者在每个词后加上特殊的边界标记。 2、交集型切分歧义：原汉字串abc中ab、bc都为词，b称为交集串，交集串的集合称为交集串链。集合中的元素个数称为链长。 3、组合型切分歧义：原汉字串ab中 a、b、ab同为词。 4、多义组合型切分歧义：在符合组合型切分歧义的条件下，在某一个上下文语境下，a、b单独在语法和语义上都成立。 5、...