记录Elasticsearch 分片恢复问题

问题描述:

ES在重启只有健康状态变为yellow,有几个分片未分配成功
在这里插入图片描述
查看原因:是因为集群恢复导致的
在这里插入图片描述
常见的几种未分配原因如下:
ALLOCATION_FAILED:由于分片分配失败而未分配。
CLUSTER_RECOVERED:由于集群恢复而未分配。
DANGLING_INDEX_IMPORTED:由于导入了悬空索引导致未分配。
EXISTING_INDEX_RESTORED:由于恢复为已关闭的索引导致未分配。
INDEX_CREATED:由于API创建索引而未分配。
INDEX_REOPENED:由于打开已关闭索引而未分配。
NEW_INDEX_RESTORED:由于恢复到新索引而未分配。
NODE_LEFT:由于托管的节点离开集群而未分配。
REALLOCATED_REPLICA:确定了更好的副本位置,并导致现有副本分配被取消。
REINITIALIZED:当分片从开始移动回初始化,导致未分配。
REPLICA_ADDED:由于显式添加副本而未分配。
REROUTE_CANCELLED:由于显式取消重新路由命令而未分配。

问题解决:

1、查看集群分片分配开关是否打开

如果没打开可以通过以下参数开启,正常集群会自动分配。

curl -H "Content-Type: application/json" -XPUT http://host:9200/_cluster/settings -d '{"transient" : {"cluster.routing.allocation.enable" : "all"}}'
2、改变对应索引副本数。

此索引有1个副本,由于有问题的分片都是从分片,可以将副本数改为0,只保留主分片,可以解决此问题。

curl -H "Content-Type: application/json" -XPUT  host:9200/jdfw_md/_settings -d '{ "index": {"number_of_replicas": "1"}}'

执行后集群状态恢复
在这里插入图片描述
为安全起见再将副本数调整为1,集群会自动生成对应的副本,但是耗时比较长,需要等待一段时间,本次恢复花费了近三个小时,如图:
调整为1后健康状态为yellow,此时还在恢复中
在这里插入图片描述
恢复后存储大小提升一倍
在这里插入图片描述
对应时间段内,集群整体负载会有所提高
在这里插入图片描述

### 解决 Elasticsearch 集群中分片未分配 (unassigned) 的方法 当遇到Elasticsearch集群中的分片处于未分配状态时,可以采取多种措施来解决问题。通常情况下,这可能是由于节点间的通信问题、磁盘空间不足或是配置不当等原因造成的。 #### 检查集群健康状况 为了诊断具体原因,可以通过API请求获取当前集群的状态信息: ```bash curl -X GET "http://localhost:9200/_cluster/health?pretty" ``` 这条命令会返回有关整个集群健康的详情,包括活动的主分片数、副本数量以及是否有任何未分配的分片等重要指标[^2]。 #### 查看详细的分片分配情况 进一步了解哪些具体的索引或分片存在问题,可执行如下查询: ```bash curl -X GET "http://localhost:9200/_cat/shards?v=true&h=index,shard,prirep,state,node" ``` 此操作能够展示每一个分片的位置及其状态(例如`STARTED`, `UNASSIGNED`),从而帮助定位确切的问题所在。 #### 常见解决方案 - **重启相关节点**:如果某个数据节点突然离线,则可能导致其上的某些分片无法被重新分配给其他存活的数据节点;尝试重启该节点并观察恢复效果。 - **调整集群设置参数**: - 修改`cluster.routing.allocation.disk.watermark.low` 和 `high` 参数以适应实际可用存储容量; - 设置合理的`index.number_of_replicas`值确保有足够的副本来维持高可用性; - 调整`cluster.info.update.interval`使元数据更新更加频繁以便更快响应变化。 - **手动强制分配分片**:对于那些因为策略限制而未能自动迁移的情况,管理员可以选择通过特定指令来进行干预,比如使用以下RESTful API调用来指定目标节点完成分片的手动重置工作: ```json POST /_cluster/reroute { "commands": [ { "allocate_stale_primary": { "index": "your_index_name", "shard": 0, "node": "target_node_id_or_name", "accept_data_loss": true } } ] } ``` 注意,在这里设置了`accept_data_loss:true`意味着接受可能存在的数据丢失风险,请谨慎评估后再做决定[^1]。 #### 日志分析 最后但同样重要的一步是审查日志文件,特别是位于`logs/`目录下的`.log`记录,它们往往包含了最直接有价值的线索用于排查故障根源。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值