谈谈在Elasticsearch遇到建index的坑

最新推荐文章于 2025-05-24 16:33:56 发布

viewsite

最新推荐文章于 2025-05-24 16:33:56 发布

阅读量3.7k

点赞数

CC 4.0 BY-SA版权

分类专栏： Linux 文章标签： elasticsearch 脚本

本文链接：https://blog.youkuaiyun.com/viewsite/article/details/78736891

Linux 专栏收录该内容

1 篇文章

订阅专栏

针对Elasticsearch在建立大量索引时效率降低的问题，本文分析了其内部机制中导致性能瓶颈的原因，并提供了一种有效关闭diskrelocation设置的方法，显著提升了建index的速度。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

简要提纲：

es在建index超过一定数量时，会遇到建index特别慢的问题，建一个index需要好几分钟，分析源码后发现建index过程中，有一个遍历所有shard的过程 disk relocation ，包含两层for循环，非常的耗时，把这个设置关闭后，建index变得迅速起来

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

viewsite

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

Elasticsearch 使用过程中有哪些坑？教你避开这些坑

wenyusuran的专栏

01-03

1563

0、题记 Elastic中文社区和各种Elastic爱好者交流群中会遇到形形色色的问题。来自运维球友讨论的真实线上吐槽问题总结：问题1：开发不规范。我们这边es 都是我们在推,很多开发不会用或者用的不规范！问题2：不管性能，用起来再说！场景1：我们这边开发只要work，管他wildcard，能模糊就好，管他内存，windows size死命地设，不管多...

BAT 大厂Java 面试题集锦之核心篇附参考答案

AI天才研究院

11-05

1万+

核心篇数据结构与算法网路:TCP/IP,HTTP操作系统, 文件, shell, CPU, IO, epoll, 非阻塞IO,进程/线程/协程,锁HashMap, Co...

参与评论您还未登录，请先登录后发表或查看评论

ElasticsearchRestTemplate创建索引映射Geo失败问题

weixin_43057381的博客

08-02

1844

原文地址：Spring boot Elasticsearch: Geo Point not creating correct mapping. Fails on searching - Stack Overflow spring-data-elasticsearch 4.0以上版本使用ElasticsearchRestTemplate的时候没有使用正确姿势映射到ES，导致geo字段类型为float。度娘个遍也没有解决问题。最后在stack overflow上解决了问题，故发出我的第一篇文章，希望能够

【Elasticsearch面试必知】Elasticsearch索引（Index）深度解析：与数据库表的本质区别

最新发布

IT成长日记的博客

05-24

853

理解Elasticsearch索引的特殊性是掌握其分布式能力的基石。Elasticsearch索引。单索引多类型（逐渐废弃）内置全文检索和复杂聚合。半结构化JSON文档。垂直扩展（硬件升级）可能产生意外字段类型。

elasticsearch使用总结以及使用过程中的坑

weixin_37970049的博客

07-10

2805

who:谁发明了它就是下面这位大哥 Shay Banon What:elasticsearch是什么 elasticsearch开源并且免费(很关键)的全文检索和分析的引擎，可以快速存储，搜索数据，还可以科学的分析数据然额，elasticsearch本质上就是一个分布式的数据库，允许多台服务器协同工作，每台服务器可以运行多个elasticsearch实例,单个的elasticsea...

elasticsearch索引问题解决记录

upupup_every的博客

04-14

3645

问题： DEV UAT环境es重启后无法提供服务，如图：排查过程： 1、进入容器内查看整体健康信息如上图，集群健康状态为yellow，其中unassigned_shards指标，代表已经在集群状态中存在的分片，但是实际在集群里找不到的，应当进入集群查看索引及分片信息 2、进入容器后查看索引健康信息 es问题索引健康状态显示为yellow: ｛"status" : "yellow"｝问题索引，由于测试环境es为单节点，副本数应当...

【ElasticSearch】ElasticSearch的索引操作

Blank的博客

03-13

435

目录一、参考资料二、索引（Index） 1. 创建索引 2. 获取索引 3. 删除索引三、映射（Mappings） 1. 设置映射 2. 获取映射一、参考资料参考文档：https://www.elastic.co/guide/en/elasticsearch/reference/current/index.html 这里建议入门之后，看看官方文档，因版本号不同，有些地方与自己学习的资料有所出入。本文内容，基于ElasticSearch7.11版本。二、索引..

如果项目很大，部署之后首页加载时白屏时间过长，针对这一问题谈谈你的思路和优化方法

02-19

可能是前端开发者，或者是项目负责人，遇到了性能问题。他们可能已经尝试过一些基本优化，但效果不明显，所以需要更深入的解决方案。用户的问题核心是白屏时间过长，这可能涉及多个方面，比如资源加载、代码执行...

Java高频面试基础问题与知识点整理

热门推荐

张彦峰的博客

11-04

171万+

Java高频面试知识点总结：覆盖高频基础知识考点+高频集合知识点深入分析+高频多线程与并发编程面试题汇总+其他扩展考察等。

记录遇到的web前端开发面试题（八股文）

qq_41347964的博客

04-20

1万+

使用 ClickHouse 构建通用日志系统

u010580750的博客

08-31

2521

ClickHouse 是一款常用于大数据分析的数据库，因为其压缩存储，高性能，丰富的函数等特性，近期有很多尝试 ClickHouse 做日志系统的案例。本文将分享如何用 ClickHouse 做出好用的通用日志系统。

ELK（三）Elasticsearch Index名称动态生成规则

ying_521125的博客

04-22

645

ELK（三）Elasticsearch Index名称动态生成规则使用环境在 Java Spring 环境中 SPEL 动态生成 Index 使用目的：对于数据量大的需要按天分 index ,因此需要采用动态生成 Index 1、生成 Index 规则 @Component("indexNameGenerator") public class IndexNameGenerator { public String testIndex() { //根据日期生成index

Elasticsearch使用Index（）方法刷新数据的一些小坑

逝水流年染轻尘的博客

11-20

4006

问题我们在使用spring-data-elasticsearch中的ElasticsearchTemplate类中的index方法去更新 elasticsearch数据库中的同样数据的时候，如果你发现了index()方法之后发现数据是增加了，而不是更新了数据库中原来的那条数据，而是多了一条数据，原来的老数据还在，那么你可以看下你的es实体类中是否设置了id,version,如果设置了，那就...

开始使用Elasticsearch (1): 如何创建index，添加、删除、更新文档

aben_sky的专栏

05-22

1704

本文内容来自 https://blog.youkuaiyun.com/UbuntuTouch/article/details/99481016 ，有删减和文字修正。 ...

elasticsearch中手动创建索引失败

weixin_44162861的博客

10-27

4131

想通过kibana的dev tool工具或者cerebro工具的rest来手动创建索引。

elasticsearch创建索引失败报错代码提示400

weixin_44162861的博客

10-27

3695

elasticsearch创建索引失败报错代码提示400。

elasticsearch创建索引报错

claireliu(Java)

04-27

4716

Q：安装ik分词器1.2.9 后，使用head插件创建索引报错{ "error": "IndexCreationException[[email] failed to create index]; nested: NoClassDefFoundError[org/apache/http/client/ClientProtocolException]; nested: ClassNotFoun

Elasticsearch性能优化官方建议

杨春建的博客

04-12

4228

原文地址：http://www.cnblogs.com/cutd/p/5800795.html 如何提高ES的性能不要返回较大的结果集 ES是设计成一个搜索引擎的，只擅长返回匹配查询较少文档，如果需要返回非常多的文档需要使用Scroll。避免稀疏因为ES是基于Lucene来索引和存储数据的，所以对稠密的数据更有效。Lucene能够有效的确定文档是通过一个

使用SpringBoot+ElasticsearchTemplate的坑

lalala323的博客

12-01

1万+

想在项目中使用ES进行搜索引擎的使用，然后在网上找了很多Springboot整合ES的方法。可百度自行搜索，我选择的是使用spring-data-es 一添加依赖 <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-start...

如何在 Python 中使用 Elasticsearch 获取index的详情

05-16

使用 Python Elasticsearch 客户端可以轻松地获取 Elasticsearch index 的详情。以下是一个简单的代码示例： ```python from elasticsearch import Elasticsearch # 创建 Elasticsearch 客户端 es = Elasticsearch...