elasticsearch分页查询的Result window is too large问题

本文介绍在Elasticsearch中进行分页查询时遇到的问题及解决方法,当页数过大时,查询结果集超出默认限制导致异常。通过调整index.max_result_window参数,可以有效解决该问题。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

一、问题

最近做项目,在elasticsearch中进行分页查询时,遇到这样一个问题,页码刚开始时,es正常返回结果,

可一旦页数增大,返回结果就抛异常,出错了。异常信息如下:

org.elasticsearch.search.query.QueryPhaseExecutionException: Result window is too large, from + size must be less than or equal to: [10000] but was [31350]. See the scroll api for a more efficient way to request large data sets. This limit can be set by changing the [index.max_result_window] index level parameter.

二、问题分析

仔细阅读异常信息,其实已经说的很明白。

es的index索引中,查询时,默认结果集最大长度为10000,超过则会抛异常。

这和mysql查询类似,分页查询时,其实获取的是查询条件的所有数据,然后根据页码,忽略指定页码之前的数据,

只返回指定页码后的指定大小的数据集。

因此即只查询几条数据,只要页码过大,查询时的初始结果集依然很大,也就抛错了。

三、问题解决

解决方案异常信息其实也说的很明白。修改es指定index索引的结果集大小。这里以将结果集大小多10000

调整为500000,使用http api修改为例,如下:

curl -XPUT "$host:$port/test_index/_settings" -d '{ "index" : { "max_result_window" : 500000 } }'

查看修改结果:

curl -XGET "$host:$port/test_index/_settings?pretty"

此到,问题解决。

 

 

 

 

 

这是一个 Elasticsearch 查询结果过大的错误。Elasticsearch 默认限制返回结果的数量为 10000。如果查询结果超过了这个数量,就会出现 "Result window is too large" 错误。 要解决这个问题,你可以通过以下两种方式之一来解决: 1. 通过增加 `size` 参数来限制返回结果的数量。例如,你可以将 `size` 设置为 1000,这样每次只返回前 1000 个结果,可以避免过大的结果窗口问题。示例代码如下: ```java SearchRequest searchRequest = new SearchRequest(index); SearchSourceBuilder searchSourceBuilder = new SearchSourceBuilder(); searchSourceBuilder.size(1000); // 设置查询条件等等 searchRequest.source(searchSourceBuilder); SearchResponse searchResponse = restHighLevelClient.search(searchRequest, RequestOptions.DEFAULT); ``` 2. 通过增加 `max_result_window` 参数来增加 Elasticsearch 返回结果的最大数量。例如,你可以将 `max_result_window` 设置为 100000,这样每次最多返回 100000 个结果。示例代码如下: ```java UpdateSettingsRequest request = new UpdateSettingsRequest(index); request.settings(Settings.builder() .put("index.max_result_window", 100000)); AcknowledgedResponse response = restHighLevelClient.indices().putSettings(request, RequestOptions.DEFAULT); ``` 需要注意的是,增加 `max_result_window` 参数可能会导致 Elasticsearch 的性能下降,因为它需要在内存中保存更多的结果。因此,你需要根据实际情况来调整这个参数。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值