Lucene搜索过程解析

最新推荐文章于 2020-03-03 14:09:13 发布
原创 最新推荐文章于 2020-03-03 14:09:13 发布 · 1.9k 阅读 · 3 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#lucene #2010 #代码分析 #全文检索 #merge

该系列文章详尽解析了Lucene的搜索过程，涵盖了从Lucene 2.9到3.0的索引和搜索原理。作者分享了对分词器、QueryParser和查询执行的见解，并提供了多个部分的深入分析，包括索引构建、段合并和打分公式。文章还包含了对全文检索基本原理和Lucene架构的探讨。

 

本系列文章将详细描述几乎最新版本的Lucene的基本原理和代码分析。

其中总体架构和索引文件格式是Lucene 2.9的，索引过程分析是Lucene 3.0的。

鉴于索引文件格式没有太大变化，因而原文没有更新，原理和架构的文章中引用了前辈的一些图，可能属于早期的Lucene，但不影响对原理和架构的理解。

本系列文章尚在撰写之中，将会有分词器，QueryParser，查询语句与查询对象等章节。

提前给大家分享，希望大家批评指正。 

 

Lucene学习总结之七：Lucene搜索过程解析(1)

http://blog.youkuaiyun.com/forfuture1978/archive/2010/04/04/5449930.aspx

Lucene学习总结之七：Lucene搜索过程解析(2) 

http://blog.youkuaiyun.com/forfuture1978/archive/2010/04/04/5449933.aspx

Lucene学习总结之七：Lucene搜索过程解析(3) 

http://blog.youkuaiyun.com/forfuture1978/archive/2010/04/04/5449939.aspx

Lucene学习总结之七：Lucene搜索过程解析(4)

http://blog.youkuaiyun.com/forfuture1978/archive/2010/04/04/5449943.aspx

Lucene学习总结之七：Lucene搜索过程解析(5)

http://blog.youkuaiyun.com/forfuture1978/ar

最低0.47元/天 解锁文章
Lucene学习总结之七：Lucene搜索过程解析(4)
forfuture1978的专栏
04-04 2634
 2.4、搜索查询对象 2.4.1.2、创建Weight对象树BooleanQuery.createWeight(Searcher) 最终返回return new BooleanWeight(searcher)，BooleanWeight构造函数的具体实现如下：public BooleanWeight(Searcher searcher) {  this.s
lucene搜索原理讲解
my201110lc的博客
12-19 2616
文档内容分为两部分： 1.索引过程； 2.搜索过程； 注：涉及到实现部分打算在另外一篇文章单独写； 索引过程： 简单的讲，索引过程分为创建索引节点，构建schema，原数据采集，分词，构建doc，提交索引； 打个比方，我们现在有一个用户表，定义为： id int name varchar address varchar 现在，要
Lucene学习总结之七：Lucene搜索过程解析
forfuture1978的专栏
04-04 173
  本系列文章将详细描述几乎最新版本的Lucene的基本原理和代码分析。 其中总体架构和索引文件格式是Lucene 2.9的，索引过程分析是Lucene 3.0的。 鉴于索引文件格式没有太大变化，因而原文没有更新，原理和架构的文章中引用了前辈的一些图，可能属于早期的Lucene，但不影响对原理和架构的理解。 本系列文章尚在撰写之中，将会有分词器，QueryParser，查询语句与查询对象等...
Lucene学习总结之七：Lucene搜索过程解析(1)
diebiaosang4496的博客
04-04 517
一、Lucene搜索过程总论 搜索的过程总的来说就是将词典及倒排表信息从索引中读出来，根据用户输入的查询语句合并倒排表，得到结果文档集并对文档进行打分的过程。 其可用如下图示： 总共包括以下几个过程： IndexReader打开索引文件，读取并打开指向索引文件的流。 用户输入查询语句 将查询语句转换为查询对象Query对象树 构造Weight对象树，用于计算词的权重Term ...
lucene搜索过程详解
wuda0112的专栏
12-04 1378
这篇文章的查询以最简单的TermQuery为例，从searcher.search()方法为入口： 1.为各个查询的term计算权重。createNormalizedWeight(Query query)；具体是在new TermWeight()完成权重计算 2.loadTerms()方法用于从索引文件中加载terms到内存，并且缓存。比如我这里用的codec是SimpleTextCod
lucene4.5源码分析系列：搜索过程
笨狐狸
10-23 4956
IndexSearcher是搜索的入口，主要提供的api都是关于search的。   大致上，前两个search属于简单搜索一类的，接下来两个api是带Collector的，最后三个api是带排序的 public TopDocs search(Query query, int n) throws IOException; public TopDocs search(Query query,
Lucene搜索过程UML时序图解析与源码分析
3. Lucene搜索过程中的加权操作 - 在执行查询时，首先需要根据查询条件生成一个权重（Weight）。权重是对查询条件的一个重要度值，它决定了查询条件在最终评分中的比重。 - 例如，如果查询条件是查找标题（title）...
Lucene搜索源码深度解析：Score树揭秘
“Lucene 搜索过程源码解析 - Score树” 在Lucene这个高性能、全文检索库中，搜索过程是其核心功能之一。本文将深入探讨Lucene的搜索过程，特别是与Score树相关的源码解析。 首先，搜索操作始于`IndexSearcher....
lucene-搜索过程源码解析-Score树
07-26
标题与描述均聚焦于“Lucene搜索过程源码解析—Score树”，这表明文章将深入探讨Lucene这一流行的信息检索库在实现搜索功能时的核心机制之一：Score树。Lucene是一个开源的全文检索引擎工具包，它提供了创建索引、...
Lucene学习总结之一：全文检索的基本原理
热门推荐
forfuture1978的专栏
10-22 6万+
一、总论根据http://lucene.apache.org/java/docs/index.html 定义：Lucene 是一个高效的，基于Java 的全文检索库。 所以在了解Lucene之前要费一番工夫了解一下全文检索。那么什么叫做全文检索呢？这要从我们生活中的数据说起。我们生活中的数据总体分为两种：结构化数据 和非结构化数据 。结构化数据：
Lucene系列六：Lucene搜索详解（Lucene搜索流程详解、搜索核心API详解、基本查询详解、QueryParser详解）
HelloWorld搬运工
03-03 1564
一、搜索流程详解 1. 先看一下Lucene的架构图 由图可知搜索的过程如下： 　　用户输入搜索的关键字、对关键字进行分词、根据分词结果去索引库里面找到对应的文章id、根据文章id找到对应的文章 2. Lucene搜索API 图示 3.Lucene搜索代码示例 先在pom.xml里面引入查询分析器模块 <!-- lucene-queryparser 查...
Lucene学习总结之七：Lucene搜索过程解析(7)
forfuture1978的专栏
04-04 277
2.4、搜索查询对象   2.4.3.2、并集DisjunctionSumScorer(A OR B) DisjunctionSumScorer中有成员变量List&lt;Scorer&gt; subScorers，是一个Scorer的链表，每一项代表一个倒排表，DisjunctionSumScorer就是对这些倒排表取并集，然后将并集中的文档号在nextDoc()函数中依次返回。 ...
Lucene学习总结之七：Lucene搜索过程解析(3)
diebiaosang4496的博客
04-04 222
2.3、QueryParser解析查询语句生成查询对象 代码为： QueryParser parser = new QueryParser(Version.LUCENE_CURRENT, "contents", new StandardAnalyzer(Version.LUCENE_CURRENT)); Query query = parser.parse("+(...
Lucene学习总结之二：Lucene的总体架构
forfuture1978的专栏
10-30 1万+
Lucene总的来说是： 一个高效的，可扩展的，全文检索库。 全部用Java实现，无须配置。 仅支持纯文本文件的索引(Indexing)和搜索(Search)。 不负责由其他格式的文件抽取纯文本文件，或从网络中抓取文件的过程。 在Lucene in action中，Lucene 的构架和过程如下图， 说明Lucene是有索引和搜索的两个过程，包
Lucene学习总结之三：Lucene的索引文件格式(1)
forfuture1978的专栏
12-10 1万+
Lucene的索引里面存了些什么，如何存放的，也即Lucene的索引文件格式，是读懂Lucene源代码的一把钥匙。当我们真正进入到Lucene源代码之中的时候，我们会发现:Lucene的索引过程，就是按照全文检索的基本过程，将倒排表写成此文件格式的过程。 Lucene的搜索过程，就是按照此文件格式将索引进去的信息读出来，然后计算每篇文档打分(score)的过程。 本文详细解
Lucene 原理与代码分析完整版
forfuture1978的专栏
06-13 9860
<br /> <br />Lucene 原理与代码分析系列文章已经基本告一段落，可能问题篇还会有新的更新。<br /> <br />完整版pdf可在下面的链接下载。<br /> <br />http://download.youkuaiyun.com/source/2452992<br /> <br />目录如下：<br /> <br /> <br />目录<br />第一篇：原理篇<br />第一章：全文检索的基本原理<br />一、总论<br />二、索引里面究竟存些什么<br />三、如何创建索引<br />第一
Lucene学习总结之五：Lucene段合并(merge)过程分析
forfuture1978的专栏
03-06 7563
一、段合并过程总论IndexWriter中与段合并有关的成员变量有：HashSet mergingSegments = new HashSet(); //保存正在合并的段，以防止合并期间再次选中被合并。 MergePolicy mergePolicy = new LogByteSizeMergePolicy(this);//合并策略，也即选取哪些段来进行合并。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值