Elasticsearch基本概念：集群、节点、分片和副本

最新推荐文章于 2024-04-19 06:39:33 发布
最新推荐文章于 2024-04-19 06:39:33 发布
阅读量468 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： Java 文章标签： java 分布式 大数据 hadoop elasticsearch
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/stone_tmp/article/details/118305994
本文介绍了Elasticsearch的分布式架构，包括节点的类型如Master-eligible节点、Master节点、Data节点和Coordinating节点，强调了Master节点在集群状态维护中的作用。同时，讨论了分片和副本的概念，以及如何配置和调整副本分片以确保数据高可用性和读吞吐量。最后提到了查看集群健康状态的方法。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

架构

  • 高可用

    • 服务可用性 - 允许部分节点停止服务
    • 数据可用性 - 部分节点丢失数据，整个系统不会丢失数据

  • 可扩展性

    • 请求量的上升、数据不断增长（将数据分布到所有节点上）

Elasticsearch分布式架构的好处

  • 储存水平扩容
  • 系统的高可用性，部分节点停止服务，整个集群服务不受影响

Elasticsearch的分布式架构

cluster.name=${clusterName}

节点

  • 节点就是一个Elasticsearch实例
    • 本质上是一个java进程
    • 一台机器上可以多个Elasticsearch实例，在生产环境中，一般一台机器运行一个Elasticsearch实例
  • 每个节点都有自己的名字，可以在配置文件中配置，也可以在启动命令中通过 -E node.name=${nodeName} 指定
  • 每个节点启动之后，系统会分配一个全局唯一的uid，保存在data目录下。

Master-eligible节点和Master节点

  • 每个节点启动后，默认就是一个Master-eligible节点，但可通过 node:master = false 来禁止

  • Master-eligible节点可参加选主流程，有机会成为Master节点

  • 当第一个节点启动的时候，它会将自己选举成为Master节点

  • 每个节点都会保

最低0.47元/天 解锁文章
ElasticSearch（2）—— ElasticSearch的集群、节点、索引、分片和副本
shangjg3的博客
11-08 2333
默认情况下，Elasticsearch中的每个索引被分片1个主分片和1个复制，这意味着，如果你的集群中至少有两个节点，你的索引将会有1个主分片和另外1个复制分片（1个完全拷贝），这样的话每个索引总共就有2个分片，我们需要根据索引需要确定分片个数。默认情况下，Elasticsearch中的每个索引被分片1个主分片和1个复制，这意味着，如果你的集群中至少有两个节点，你的索引将会有1个主分片和另外1个复制分片（1个完全拷贝），这样的话每个索引总共就有2个分片，我们需要根据索引需要确定分片个数。
优化 Elasticsearch 集群性能：解决节点压力不均衡问题及分片策略调整
最新发布
TechEnthusiast的博客
09-13 729
在管理 Elasticsearch 集群时，我们经常会遇到节点间压力不均衡的问题，这通常是由不合理的分片策略导致的。本文将分享一个真实案例的解决过程，以及如何优化分片策略来提升集群整体性能。
Elasticsearch节点，集群，分片及副本详解
爱死亡机器人
11-01 2577
elasticsearch 特点 分布式系统的可用性与扩展性 高可用性 服务可用性-允许有节点停止服务 数据可用性-部分节点丢失，不会丢失数据 可扩展性 请求量提升/数据的不断增长（将数据分布到所有节点上） 分布式特性 elasticsearch的分布式架构好处 存储的水平扩容 提高系统的可用性，部分节停止服务，整个集群的服务不受影响 ElasticSearch的分布式架构 不同的集群通过不同的名字来区分，默认名字”elasticsearch“ 通过配置文件修改，或者在命令行中 -E clus
Elasticsearch核心技术与实战学习笔记 第三章10 基本概念：节点，集群，分片及副本
bohu83的博客
05-10 471
一 序 本文属于极客时间Elasticsearch核心技术与实战学习笔记系列。 本节继续介绍es的基本概念。因为pdf没有下载，所以就是对着码字，或者视频截个图。 二 分布式 elasticsearch其实就是一个分布式系统，需要满足分布式系统具备的高可用性和可扩展性 2.1分布式系统的可用性与扩展性 高可用性 服务可用性-允许有节点停止服务 数据可用性-部分节点丢失，不会丢失数据 可扩展性 请求量提升/数据的不断增长（将数据分布到所有节点上） 2.2 分布式特...
Elasticsearch的集群与节点管理
AI天才研究院
01-28 1047
1.背景介绍 1. 背景介绍 Elasticsearch是一个分布式、实时的搜索和分析引擎，它可以处理大量数据并提供快速、准确的搜索结果。在大规模数据处理和搜索场景中，Elasticsearch的集群和节点管理是非常重要的。本文将深入探讨Elasticsearch的集群与节点管理，涵盖其核心概念、算法原理、最佳实践、实际应用场景和工具推荐。 2. 核心概念与联系 在Elasticsearc...
elasticsearch - 节点、集群分片及副本、CRUD
stark张宇
05-24 442
对elasticsearch节点、集群分片及副本概念的基本陈述、编写CRUD、文档的批量操作的使用文档。
Elasticsearch 的节点、集群、分片和副本 全面解析
专注于数据库技术分享，包含但不限于Oracle，MySQL，PostgreSQL，ElasticSearch及国产数据库等
04-19 2017
每个节点都是一个独立的工作单元，负责存储数据、参与数据处理（如索引、搜索、聚合等）以及参与集群的协调工作。一个索引由多个主分片和对应的副本分片组成。例如，若一个索引配置了 5 个主分片和每个主分片有 1 个副本，则该索引总共有 10 个分片（5 个主分片 + 5 个副本分片）。集群是由一个或多个节点组成的 Elasticsearch 实例集合，它们协同工作，对外表现为单一的搜索和索引服务。每个索引可以被划分为多个分片，每个分片都是一个完整的 Lucene 索引，包含索引的一部分数据。
Elasticsearch入门2 - 基本概念：节点、集群、分片和副本
DoloresOOO的博客
06-21 376
基本概念：节点、集群、分片和副本 节点 节点是一个Elasticsearch的实例 本质上就是一个jAVA进程 一台机器上可以运行多个Elasticsearch进程，但是生产环境一般建议一台机器只运行一个 每一个节点都有名字，通过配置文件配置，或者启动的时候添加环境变量：node.name=node1指定 每一个节点在启动之后，会分配一个UID，保存在data目录下 Master-eligible nodes和Master Node 每个节点启动后，默认就是一个Master-eligible n
Elasticsearch基本概念----集群，节点，分片，副本
程序猿二大爷的博客
08-03 282
1、分布式系统的可用性与扩展性 2、分布式特性 3、节点 4、Master-eligible nodes和Master Node 5、Data Node& Coordinating Node 6、其他节点类型 7、配置节点类型 8、分片 9、分片的设定 10、查看集群健康状况 ...
Elasticsearch节点，集群，分片及副本
SocaintC的博客
09-17 1103
文章目录分布式系统的可用性与扩展性分布式特性节点Master-eligible nodes和Master NodeData Node & Coordinate Node其他的节点类型配置节点类型分片（Primary Shard & Replica Shard)分片的设定查看集群的健康状况安装cerebro操作示例相关阅读 elasticsearch其实就是一个分布式系统，需要满足分...
elasticsearch 集群主节点与子节点配置文件
03-05
http.cors.enabled: true http.cors.allow-origin: "*" # 集群的名称 cluster.name: rick # 节点名称 node.name: rick node.master: true node.data: false network.bind_host: 192.168.1.24 network.host: 192.168.1.25 http.port: 9200 transport.tcp.port: 9300 discovery.zen.ping.unicast.hosts: ["192.168.1.24","192.168.1.44","192.168.1.62","192.168.1.19"]
MySQL集群节点、节点组、数据副本、以及分区
SimonXiaoZhou的专栏
07-12 7429
MySQL集群节点、节点组、数据副本、以及分区 本文仅为官方文件之翻译 这个部分讨论MySQL集群划分和冗余数据的手段。 下面几段内容的话题集中讨论了这个问题。 （数据）节点。是一个ndbd进程，存储着一个数据副本，也是一个指到节点组中节点的分区的拷贝（下面会提到）。 每个数据节点应该部署在独立的计算机上。虽然也可以在一个机器上跑多个数据节点，但是这个不被推荐。 提到ndbd进程时，节
ES--节点、分片、副本--概念与原理
IT利刃出鞘的博客
09-05 719
本文介绍ElasticSearch的节点、分片、副本的概念与原理。
ElasticSearch节点
marylgao技术专栏
09-22 417
基本介绍 任何时候我们说启动一个ElasticSearch（简称ES，后续所说的ES就是指ElasticSearch）服务其实就是启动一个ES节点，而不同的节点可以构成一个ES集群，当你启动一个单节点的时候，我们可以认为是启动一个只有一个ES节点的简单集群。 节点，集群, 分片, 索引的关系 引用官网的一张图，下图是一个由3个节点NODE1， NODE2和NODE3构成的集群，每个节点就是一个ES实例，即一个JAVA进程。即集群是由一个或多个节点组成的，而每个节点上可以有1个或多个分片（如下图的P1，P2,
Elasticsearch节点类型(数据节点、候选节点)、主节点选举过程
星光之子的博客
11-06 3412
节点类型、分片、路由节点类型(数据节点、候选节点)分片和路由分片如何使用？(和数据写入过程有关) 节点类型(数据节点、候选节点) 在Elasticsearch中，每个节点可以有多个角色，节点既可以是候选主节点，也可以是数据节点 节点的角色配置在配置文件/config/elasticsearch.yml中设置即可，配置参数如下所示 在Elasticsearch中，默认都为true 数据节点 负责 数据的存储相关的操作，如对数据进行增、删、改、查和聚合等 数据节点 往往 对服务器的配置要求比较高，特别是对CP
elasticsearch之模块【节点】
山鬼谣的专栏
07-06 1248
环境虚拟机：centos7 操作系统：win7 elasticsearch：5.4.3node任何时候 你要启动一个elasticsearch实例，你得先启动一个节点。 连接节点的集合叫做集群。如果你运行一个节点，那么你将拥有一个单节点集群。集群中的每个节点都可以在默认的情况下处理HTTP和传输流量。 传输层是专门为Java 传输客户端（TransportClient）和节点进行通信的。
Elasticsearch节点介绍
Ezra1991的博客
03-22 2765
Node Any time that you start an instance of Elasticsearch, you are starting a node. A collection of connected nodes is called a cluster. If you are running a single node of Elasticsearch, then you ha...
Elasticsearch核心原理之集群与分片
wat1r的博客
04-30 2074
集群 空集群 启动一个单独的节点，里面不包含任何的数据和索引，集群看起来就是一个上图一样的包含空内容节点的集群。 一个运行中的 Elasticsearch 实例称为一个节点，而集群是由一个或者多个拥有相同 cluster.name 配置的节点组成， 它们共同承担数据和负载的压力。当有节点加入集群中或者从集群中移除节点时，集群将会重新平均分布所有的数据。 当一个节点被选举成为主节点时， 它将负责管理集群范围内的所有变更，例如增加、删除索引，或者增加、删除节点等。 而主节点并不需要涉及到文档级别的变更和搜索等
elasticsearch 7.6 添加数据节点
一名数据库爱好者的专栏
08-04 2003
os: centos 7.6 es: 7.6 现有集群包含节点 n1、n2、n3(master + data)，可以通过添加 n4 节点(data)，来实现数据的打散。 版本 # cat /etc/centos-release CentOS Linux release 7.6.1810 (Core) # yum list installed |grep -i elasticsearch elasticsearch.x86_64 7.6.2-1
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值