ictclas，ansj，结巴分词，StanfordNLP中文分词以及所用词性标注集

NLPIR(ICTCLAS)，参见java实现NLPIR（ICTCLAS）分词：http://www.bubuko.com/infodetail-665665.html，词性标注使用北大词性标注集。在Linux系统中的使用方法：http://jingyan.baidu.com/article/9158e0004251b4a2541228e5.html

ansj分词，非常好用，ansj-seg把分词、词性标注、新词发现、关键词提取这些功能的接口，都抽取出来了，方便我们选择其中一部分使用，这点尤其在处理大数据量的时候至关重要。使用新版的北大词性标注集，略有不同。ansj的源码地

址：http://nlpchina.github.io/ansj_seg/。ansj分词器的配置：http://blog.youkuaiyun.com/zhongkeli/article/details/17722065(可直接在eclipse中使用)。

StanfordNLP中文分词使用CTB（Chinese Tree Bank）中文树库标注词性；结巴分词用北大词性标注集

 

转载于:https://www.cnblogs.com/luoyuzhong/p/4905905.html