IKAnalyzer分词例子

最新推荐文章于 2025-08-02 12:01:09 发布

weixin_34146805

最新推荐文章于 2025-08-02 12:01:09 发布

阅读量107

点赞数

CC 4.0 BY-SA版权

文章标签： java

原文链接：http://www.cnblogs.com/xyd51cto/p/7727672.html

本文介绍了一个使用Lucene结合IKAnalyzer进行文本分词的例子。通过Java代码演示了如何初始化Analyzer对象，并利用它对指定字符串进行分词处理。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

package lucene;
import org.apache.lucene.analysis.Analyzer;
import org.apache.lucene.analysis.TokenStream;
import org.apache.lucene.analysis.tokenattributes.CharTermAttribute;
import org.wltea.analyzer.lucene.IKAnalyzer;
public class MyAnalyzer {
public static void main(String[] args) throws Exception {
String en="Java Hollo";
Analyzer analyzer=new IKAnalyzer();
TokenStream tokenStream= analyzer.tokenStream("word",en);
tokenStream.reset();
CharTermAttribute charTermAttribute=tokenStream.addAttribute(CharTermAttribute.class);
while(tokenStream.incrementToken()){
System.out.println(charTermAttribute.toString());
}
}
}