.NET使用Lucene.Net和盘古分词类库实现中文分词

最新推荐文章于 2019-11-23 14:20:48 发布

lijun7788

最新推荐文章于 2019-11-23 14:20:48 发布

阅读量1.4w

点赞数 1

分类专栏： Asp.NET 文章标签： .net string java null 语言工具

本文链接：https://blog.youkuaiyun.com/Lijun7788/article/details/7719439

版权

Asp.NET 专栏收录该内容

7 篇文章

订阅专栏

本文介绍了如何利用Lucene.Net.dll和PanGu分词工具包在.NET环境中实现中文分词，并提供了示例代码，演示了分词过程及结果。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

.NET中文分词实现http://http://

使用

Lucene.Net.dll http://www.apache.org/dist/incubator/lucene.net/binaries/2.9.4g-incubating/

PanGu.dll http://pangusegment.codeplex.com/releases/view/50811

PanGu.Lucene.Analyzer.dll

和字典文件 http://pangusegment.codeplex.com/releases/view/31531

示例代码:

using System;
using System.Collections.Generic;
using System.Linq;
using System.Text;
using Lucene.Net.Analysis;
using Lucene.Net.Analysis.PanGu;
using System.IO;
using System.Collections;
namespace FcCApp {
      	class Program     {
               static void Main(string[] args){
 			String text = "基于java语言开发的轻量级的中文分词工具包";
 			Analyzer anal = new PanGuAnalyzer();//使用盘古分词
 			StringReader sb = new StringReader(text);
 			TokenStream ts= anal.ReusableTokenStream("", sb);
 			Token t = null;
 			while ((t=ts.Next())!=null){
 			          Console.Write(t.TermText()+"|"); 
			}
 		}
 	}
 }

结果:

基于|java|语言|开发|的|轻量级|的|中文|分词|工具包|

示例下载地址:

http://download.youkuaiyun.com/detail/lijun7788/4412762