Elasticsearch集群规划及节点角色规划最佳实践

少林码僧

已于 2023-12-23 20:52:50 修改

阅读量10w+

点赞数 1

CC 4.0 BY-SA版权

分类专栏：百亿级elasticsearch实践指南文章标签： elasticsearch 分布式搜索引擎

于 2021-11-25 20:58:06 首次发布

本文链接：https://blog.youkuaiyun.com/yonggeit/article/details/120760894

百亿级elasticsearch实践指南专栏收录该内容

68 篇文章 ¥19.90 ¥99.00

订阅专栏

超级会员免费看

本文深入探讨了Elasticsearch集群的内存配置，指出堆内存应分配为总内存的50%，留出另一半给Lucene文件缓存。CPU的选择应考虑查询类型和写入策略。分片数量和副本数量的设定是复杂问题，需要综合考虑数据量、查询性能和高可用需求。此外，介绍了冷热集群架构，以及主节点、数据节点和协调节点的角色划分，强调了节点配置对性能的影响。最后，提供了故障排除提示，如监控堆内存、非堆内存和磁盘IO，以确保集群健康运行。

ES集群规划及节点角色规划最佳实践

- 1、内存

下表列出各节点角色资源占用情况

节点角色	功能	资源占用程度
Data	提供数据索引，存储和搜索	磁盘IO消耗极高，内存和CPU消耗高，网络消耗一般
Master	管理集群状态	磁盘，内存，CPU和网络消耗低
Ingest	索引预处理（pipeline）	磁盘IO消耗低，内存和CPU消耗极高，网络消耗一般
Coordinator	代理转发请求，合并搜索结果
Machine Learning	处理机器学习模型	io消耗低，内存和CPU消耗极高，网络消耗一般