Elasticsearch源码解读四：搜索过程详解

最新推荐文章于 2024-11-19 11:02:04 发布
最新推荐文章于 2024-11-19 11:02:04 发布
阅读量354 收藏
点赞数
分类专栏： ElasticSearch详解 文章标签： elasticsearch 搜索引擎
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/rlanffy/article/details/104679882
版权
本文深入探讨Elasticsearch的搜索过程，从客户端请求到服务端的处理，包括搜索策略、查询缓存、QueryPhase执行及Fetch阶段的数据获取。通过对每个分片的遍历和文档得分计算，揭示了ES搜索性能与分片数量之间的关系，为实际应用提供优化参考。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

文章目录

前言

说明：本文章使用的ES版本是：6.7.0

在上一篇文章Elasticsearch源码解读三：创建索引过程详解中，介绍了ES写入文档，创建索引的过程。

接下来我们具体的看一下ES中，搜索过程是怎样的

在ES中搜索

按照前面几篇文章的步骤，我们直接开始debug搜索的过程。上一篇文章中我们写入了如下的数据

{
   
    "id":6,
    "title"
了解本专栏 订阅专栏 解锁全文 超级会员免费看
ElasticSearch源码解读二：启动过程详解
RLanffy
03-10 580
上一篇文章说了ES的源码编译以及如何在本地编译。这一篇文章主要说明ES的启动过程。 环境准备 参考ElasticSearch源码编译和Debug。 说明：本文章使用的ES版本是：6.7.0 启动函数：org.elasticsearch.bootstrap.ElasticSearch 设置如下断点： 启动在上一篇文章中介绍的Debug模式中的一种，这里我用的远程Debug模式。 ElasticSe...
Elasticsearch源码解读五：搜索相关性排序算法详解
RLanffy
03-12 940
前言 说明：本文章使用的ES版本是：6.2.4 在上一篇文章Elasticsearch搜索过程详解中，介绍了ES的搜索过程。 接下来我们具体的看一下ES搜索时，是如何计算文档相关性得分并用于排序的。 TF-IDF 在介绍ES计算文档得分之前，先来看一下TF-IDF算法。 TF-IDF（Term Frequency–Inverse Document Frequency）是一种用于信息检索与文本挖掘的...
Elasticsearch搜索流程解析
qq_27639777的博客
04-22 1294
文章目录背景协调节点流程Query阶段Fetch阶段数据节点流程响应Query请求响应Fetch请求 背景 ES的读取分为GET和Search两种操作，这两种读取操作有较大的差异，GET/MGET必须指定三元组：_index、_type、_id。也就是说，根据文档id从正排索引中获取内容。而Search不指定_id，根据关键词从倒排索引中获取内容。 可接收客户端请求的节点称为协调节点。在协调节点，搜索任务被执行成一个两阶段过程，即query then fetch。真正执行搜索任务的节点称为数据节点。当搜索任
详细描述一下Elasticsearch搜索的过程
张俊杰 的博客
02-15 3716
详细描述一下Elasticsearch搜索的过程 我们都知道es是一个分布式的存储和检索系统，在存储的时候默认是根据每条记录的_id字段做路由分发的，这意味着es服务端是准确知道每个document分布在那个shard上的。 相对比于CURD上操作，search一个比较复杂的执行模式，因为我们不知道那些document会被匹配到，任何一个shard上都有可能，所以一个search请求必须查询一个索引或多个索引里面的所有shard才能完整的查询到我们想要的结果。 找到所有匹配的结果是查询的第一步，来自多个sh
Elasticsearch 搜索的过程
siyuanwai的博客
07-23 287
搜索拆解为“ query then fetch” 两个阶段。 query 阶段的目的：定位到位置，但不取。 步骤拆解如下： 1、假设一个索引数据有5 主+1 副本共10 分片，一次请求会命中（主或者副本分片中） 的一个。 2、每个分片在本地进行查询，结果返回到本地有序的优先队列中。 3、第2步骤的结果发送到协调节点， 协调节点产生一个全局的排序列表。 fetch 阶段的目的：取数据。 由节点获取所有文档，返回给客户端。 ...
elasticsearch 搜索过程
qingqingdianshui的博客
02-02 501
https://www.elastic.co/guide/en/elasticsearch/reference/5.6/search-request-search-type.html#dfs-query-then-fetch 查询类型(参数search_type指定)：  （一）        query_then_fetch  分为两个阶段：  1）        协调节点将请求发送到与
Elasticsearch 搜索的过程？
程序猿老白~的博客
01-09 503
Elasticsearch 是一个开源的分布式搜索和分析引擎，它基于 Apache Lucene 构建而成。
Elasticsearch源码解读六：ES中的倒排索引
RLanffy
01-07 560
文章目录前言分词单词-文档矩阵倒排索引单词词典倒排列表举例倒排索引的搜索过程系列文章 前言 再Elasticsearch系列三：创建索引过程详解一文中，介绍了ES创建索引的流程。再流程中是调用Lucene的接口来创建索引的。本篇文章主要介绍ES中的索引——倒排索引 分词 在创建索引之前，会对文档中的字符串进行分词。ES中字符串有两种类型，keyword和text。 keyword类型的字符串不会被分词，搜索时全匹配查询 text类型的字符串会被分词，搜索时是包含查询 不同的分词器对相同字符串分词的结果大
ElasticSearch源码解读一：源码编译和Debug环境搭建
RLanffy
03-10 647
环境准备 说明：本文章使用的ES版本是：6.7.0 JDK Elastisearch 6.7.0编译需要JDK版本10.0及以上，我直接安装了JDK12.JDK下载地址：https://www.oracle.com/technetwork/java/javase/downloads/index.html Gradle brew install gradle Elastisearch源码 git c...
Elasticsearch 更新和删除文档的过程，以及搜索的过程
siyuanwai的博客
07-23 917
更新和删除文档的过程 1、删除和更新也都是写操作，但是Elasticsearch 中的文档是不可变的， 因此不能被删除或者改动以展示其变更； 2、磁盘上的每个段都有一个相应的.del 文件。当删除请求发送后，文档并没有真的被删除，而是在.del 文件中被标记为删除。该文档依然能匹配查询，但是会在结果中被过滤掉。当段合并时，在.del 文件中被标记为删除的文档将不会被写入新段。 3、在新的文档被创建时，Elasticsearch 会为该文档指定一个版本号，当执行更新时，旧版本的文档在.del 文件中被标记为删
elasticsearch-7.2.1：elasticsearch 7.2.1源码阅读
02-13
弹性搜索 分布式RESTful搜索引擎 Elasticsearch是为云构建的分布式RESTful搜索引擎。 功能包括： 分布式且高度可用的搜索引擎。 每个索引均使用可配置数量的分片进行完全分片。 每个分片可以具有一个或多个副本。 对任何副本分片执行的读取/搜索操作。 多租户。 支持多个索引。 索引级别配置（分片数，索引存储等）。 各种API HTTP RESTful API 本机Java API 。 所有API都会执行自动的节点操作重新路由。 面向文件 无需前期架构定义。 可以定义架构以定制索引过程。 可靠的异步写入功能可长期保持持久性。 （附近）实时搜索。 建立在Lucene之上 每个分片都是功能齐全的Lucene索引 Lucene的所有功能都可以通过简单的配置/插件轻松展现。 每次操作的一致性 单文档级操作是原子的，一致的，隔离的和持久的。 入门
Elasticsearch Search流程
勿忘初心
04-11 2301
GET操作只能对单个文档进行处理，由_index、_type和_id三元组来确定唯一文档。但搜索需要一种更复杂的模型，因为不知道查询会命中哪些文档。 找到匹配文档仅仅完成了搜索流程的一半，因为多分片中的结果必须组合成单个排序列表。集群的任意节点都可以接收搜索请求，接收客户端请求的节点称为协调节点。在协调节点，搜索任务被执行成一个两阶段过程，即query then fetch。真正执行搜索任务的...
elasticsearch搜索过程分析
ok0011的博客
08-29 4873
（一）通过HTTP请求调用搜索服务 示例： GET http://localhost:9200/index_test/_search { "query": { "query_string": { "default_field": "title", "query":
详细描述一下 Elasticsearch 搜索的过程？
qq_33240556的博客
02-02 427
这个过程中涉及到的数据结构优化、缓存利用、并行执行等多个方面，确保了Elasticsearch能够高效地处理大规模的搜索请求。同时，Elasticsearch还支持分布式处理、容错机制和实时更新，使得系统具有高可用性和近实时搜索能力。
【elasticsearch】搜索过程详解
m0_56069948的博客
03-20 2953
Python微信订餐小程序课程视频 https://edu.youkuaiyun.com/course/detail/36074 Python实战量化交易理财系统 https://edu.youkuaiyun.com/course/detail/35475作者：https://blog.youkuaiyun.com/w1570631036/p/16028174.html 目录 SearchType搜索入口：3.1 query阶段3.2 Fetch阶段3.2.1 FetchSearchPhase（对应上面的1）3.2.2 ExpandSea
详细描述一下Elasticsearch搜索的过程？
最新发布
java1234的博客
11-19 1318
详细描述一下Elasticsearch搜索的过程？
Elasticsearch 基础：数据搜索流程
weixin_40601534的博客
02-17 673
ES 数据搜索流程 ES 的数据召回是一个比较复杂的流程，因为绝大多数的 ES 都是以集群形式存在的，同时由于存储结构等方面的因素，数据在进行召回打分时需要经历很长的链路才能最终返回。 主线流程 接受请求 路由与寻址 分片选择和请求转发 执行搜索计划 搜索的后处理 返回结果 接受请求 ES 集群中的所有节点理论上都可以接受搜索请求，其中无论是通过普通的 _search 接口还是 url 等方式只是程序的入口不同，中间的 query 解析的部分会有些许差别，后台对 query 的解析和处理逻辑是一致的。事
elasticsearch全文检索流程
qq_45264366的博客
01-06 1762
这里写目录标题elasticsearch全文检索流程索引过程创建索引获得原始文档创建文档对象分析文档创建索引查询索引 elasticsearch全文检索流程 索引过程 索引过程，对要搜索的原始内容进行索引构建一个索引库，索引过程包括：确定原始内容即要搜索的内容→采集文档→创建文档→分析文档→索引文档。 搜索过程，从索引库中搜索内容，搜索过程包括：用户通过搜索界面→创建查询→执行搜索，从索引库搜索→渲染搜索结果。 索引 从关系数据库中、互联网上、文件系统采集源数据(要搜索的目标信息)，源数据的来源是很广
深入解读安卓源码：系统原理与开发重点
资源摘要信息: "安卓Android源码——系统原理与开发要点详解_培训课件.zip" 安卓Android源码课程主要围绕Android系统原理及开发重点进行详细讲解，尤其适合对Android系统底层和应用开发有进一步学习需求的开发者。...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值