23、Elasticsearch 索引生命周期管理与文本分析全解析

Elasticsearch 索引生命周期管理与文本分析全解析

1. 索引生命周期管理（ILM）简介

在使用 Elasticsearch 时，随着时间推移，数据不断涌入，索引大小会逐渐增长。有时索引写入过于频繁，底层分片会耗尽内存；而有时大部分分片可能填充稀疏。对于时间序列数据，如每日写入文件的日志，每天都需要滚动索引。为解决这些问题，Elastic 推出了索引生命周期管理（ILM）功能。

ILM 基于生命周期策略管理索引，策略定义了一些规则，当规则条件满足时，引擎会执行相应操作。例如，可根据以下条件将当前索引滚动到新索引：
- 索引达到特定大小（如 40GB）
- 索引中的文档数量超过一定值（如 10,000）
- 日期滚动

2. 索引的生命周期阶段

索引有五个生命周期阶段：热（Hot）、温（Warm）、冷（Cold）、冻结（Frozen）和删除（Delete），各阶段特点如下表所示：
| 阶段 | 描述 |
| — | — |
| 热（Hot） | 索引处于全操作模式，可进行读写，支持索引和查询操作。 |
| 温（Warm） | 索引处于只读模式，关闭索引功能，但可进行查询，仍能处理搜索和聚合查询。 |
| 冷（Cold） | 索引处于只读模式，与温阶段类似，关闭索引功能，可进行查询，但查询频率较低，搜索查询响应时间可能较慢。 |
| 冻结（Frozen） | 与冷阶段类似，关闭索引功能，允许查询，但查询频率更低甚至罕见，用户查询响应时间更长。 |
| 删除（Delete） | 索引的最终阶段，索引被永久删除，数据被擦除，资源被释放。通常建议在删除前对索引