lucene5.1 fst源码分析(fst接口方法写入和读取测试)

最新推荐文章于 2022-01-16 00:21:55 发布

bigdatar

最新推荐文章于 2022-01-16 00:21:55 发布

阅读量2.4k

点赞数

CC 4.0 BY-SA版权

分类专栏：搜索引擎lucene 文章标签： lucene

本文链接：https://blog.youkuaiyun.com/sinat_27545249/article/details/70446962

本文介绍了有限状态机（FST）的基本概念，特别是节点和弧的角色。接着详细探讨了Lucene中的FST测试代码，并深入源码层面，分析了`util.get`方法、`FST.findTargetArc`方法，包括其方法原型和实现细节，以及`readFirstRealTargetArc`和`readNextRealArc`方法。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1 fst基本概念
- 1-1 节点node和弧arc
2 lucene中的fst测试代码
3 源码分析

.1 fst基本概念

有限状态机

.1-1 节点(node)和弧(arc)

node包含了进入该node的0个或者多个arc，也包含了从该node走出的0个或者多个arc

.2 lucene中的fst测试代码

import java.io.File;
import java.io.FileInputStream;
import java.io.IOException;
import java.io.StringReader;
import java.nio.file.Path;
import java.nio.file.Paths;
import java.util.ArrayList;
import java.util.HashMap;
import java.util.List;
import java.util.Map;

import org.apache.lucene.analysis.TokenStream;
import org.apache.lucene.analysis.core.WhitespaceTokenizer;
import org.apache.lucene.analysis.synonym.SynonymFilterFactory;
import org.apache.lucene.analysis.tokenattributes.CharTermAttribute;
import org.apache.lucene.analysis.util.FilesystemResourceLoader;
import org.apache.lucene.store.DataInput;
import org.apache.lucene.store.InputStreamDataInput;
import org.apache.lucene.util.BytesRef;
import org.apache.lucene.util.BytesRefBuilder;
import org.apache.lucene.util.CharsRef;
import org.apache.lucene.util.IntsRef;
import org.apache.lucene.util.IntsRefBuilder;
import org.apache