Gatherfly 的博客

自然 言的处理的第一步是分词。近期使用了中科院分词系统NLPIR/ICTCLAS 2016。在2014版本以及之前称为ICTCLAS，之后的版本都更名为NLPIR。 新版简介如下：       词法分析是自然语言处理的基础与关键。 张华平博士在多年研究工作积累的基础上， 研制出了 NLPIR 分词系统， 主要功能包括中文分词； 英文分词； 词性标注； 命名实体识别；

近期考虑使用Google研发的一款基于Deep Learning的开源的学习工具——word2vec，这是首款面向大众的Deep Learning学习工具。word2vec（word to vector）是一个将单词转换成向量形式的工具。通过转换，把对文本内容的处理简化为向量空间中的向量运算，计算出向量空间上的相似度，来表示文本语义上的相似度。      word2vec为计算向量词提供了一种