elasticsearch游标查询所有数据

最新推荐文章于 2025-06-09 09:01:46 发布

系统汪汪队

最新推荐文章于 2025-06-09 09:01:46 发布

阅读量1k

点赞数

CC 4.0 BY-SA版权

分类专栏： elasticsearch 文章标签： elasticsearch 游标

本文链接：https://blog.youkuaiyun.com/donlian/article/details/84469247

elasticsearch 专栏收录该内容

30 篇文章

订阅专栏

本文详细介绍了如何使用Elasticsearch的滚动接口实现索引复制过程，包括初始化设置、获取数据和持续迭代。通过设置扫描类型、大小和滚动时间，实现了高效的数据迁移。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

在Elasticsearch中找一个复制索引的接口真难。现在官方唯一推荐的方法是使用游标获得被复制索引的所有document，然后使用bulkIndex新建立一个索引。

这个接口也很奇怪，第一次search竟然不返回数据。

import org.elasticsearch.action.search.SearchResponse;
import org.elasticsearch.action.search.SearchType;
import org.elasticsearch.client.Client;
import org.elasticsearch.common.unit.TimeValue;
import org.elasticsearch.search.SearchHit;

import donlian.es.ESUtils;
/** 
 * 使用scroll方法实现复制索引
 * @author donlianli@126.com
 */
public class ScrollTest {
	public static void main(String[] args) {
		Client esClient = ESUtils.getClient();
		SearchResponse searchResponse = esClient.prepareSearch(ESUtils.getIndexName())
		//加上这个据说可以提高性能，但第一次却不返回结果
		.setSearchType(SearchType.SCAN)
		//实际返回的数量为5*index的主分片格式
        .setSize(5)
        //这个游标维持多长时间
        .setScroll(TimeValue.timeValueMinutes(8))
        .execute().actionGet();
		//第一次查询，只返回数量和一个scrollId
		System.out.println(searchResponse.getHits().getTotalHits());
		System.out.println(searchResponse.getHits().hits().length);
		//第一次运行没有结果
		for (SearchHit hit : searchResponse.getHits()) {
		    System.out.println(hit.getSourceAsString());
		}
		System.out.println("------------------------------");
		//使用上次的scrollId继续访问
		searchResponse = esClient.prepareSearchScroll(searchResponse.getScrollId())
        .setScroll(TimeValue.timeValueMinutes(8))
        .execute().actionGet();
		System.out.println(searchResponse.getHits().getTotalHits());
		System.out.println(searchResponse.getHits().hits().length);
		for (SearchHit hit : searchResponse.getHits()) {
		    System.out.println(hit.getSourceAsString());
		}
	}

}

对这类话题感兴趣？欢迎发送邮件至 donlianli@126.com

关于我：邯郸人，擅长Java，Javascript，Extjs，oracle sql。

更多我之前的文章，可以访问我的空间