.net环境下使用jieba进行分词操作

最新推荐文章于 2025-03-18 14:50:24 发布

weixin_30235225

最新推荐文章于 2025-03-18 14:50:24 发布

阅读量485

点赞数

文章标签：人工智能大数据

原文链接：http://www.cnblogs.com/lyj153/p/10559568.html

版权

本文介绍在VS里新建项目后，通过nuget添加jieba组件进行开发。jieba提供语句分词方法，默认分词无法识别“云计算”等词，需手动添加字典或放入分词对象。不过，jieba对时间和地点的分词结果不理想，后续会更新处理方式。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

在VS里新建项目后通过nuget添加jieba的组件，如图:

添加完成后进行开发。

jieba提供对语句的分词方法，例如：

JiebaSegmenter segmenter=new JiebaSegmenter();

 PosSegmenter posSegmenter=new PosSegmenter(segmenter);

 string text="小明最近在学习机器学习、自然语言处理、云计算和大数据";

IEnumerable<string> wordList=posSegmenter.Cut(text);

默认的分词方法无法把“云计算”当成一个词语，这时候需要手动添加字典或把这个词放进分词JiebaSegmenter 对象里。

 JiebaSegmenter seg = new JiebaSegmenter();
            seg.AddWord("自然语言处理",1000,"n");
            seg.AddWord("机器学习", 1000, "n");
            seg.AddWord("云计算", 1000, "n");
            seg.AddWord("大数据", 1000, "n");

            PosSegmenter posSegmenter = new PosSegmenter(seg);
            string text = "小明最近在学习机器学习、自然语言处理、云计算和大数据";
            var wordList = posSegmenter.Cut(text);