ZK集群搭建

最新推荐文章于 2024-10-17 11:55:26 发布
最新推荐文章于 2024-10-17 11:55:26 发布
阅读量457 收藏
点赞数
分类专栏： 基础服务
本文介绍了Zookeeper节点操作的两种方式。GUI方式可使用zooinspecotr工具，但速度不理想；命令行方式涵盖找到zk安装路径、连接zk server、查看节点、获取节点信息、删除节点及大节点处理、节点迁移等操作，还给出了相关命令和解决大节点删除报错的办法。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

参考资料：

  1. zookeeper下载地址: http://www.apache.org/dyn/closer.cgi/zookeeper/
  2. Zookeeper搭建步骤: http://blog.youkuaiyun.com/chengwenyao18/article/details/23611995
  3. Zookeeper可视化工具：https://issues.apache.org/jira/secure/attachment/12436620/ZooInspector.zip

GUI方式：

如果用GUI工具查看zk集群信息也行，但速度不理想。一定要用的话推荐用zooinspecotr: https://github.com/zzhang5/zooinspector

命令行方式：

找到zk安装路径

ps -ef | grep zookeeper

用zk client连接zk server

  1. zk client 在zk安装目录的bin下有zkCli.sh
  2. ./zkCli.sh -server serveraddress:port

查看节点

ls /

ls /FDG/CLIENT

获取节点详细信息

get /nodename/subnodename

删除节点（建议用rmr：递归删除）

rmr /nodename/subnodename

删除大节点

问题：如果删除有很多子节点的节点时，超过1M数据大小的时候会报错，类似：Exception in thread "main" org.apache.zookeeper.KeeperException$ConnectionLossException: KeeperError

Code = ConnectionLoss for /ROOT_LOCK/MSR

办法：zkCli.sh里加入-Djute.maxbuffer=40960000，这里只是个举例，实际操作下来如果删除有150万个子节点的节点时，需要设置的更大，比如81920000.

zk节点迁移

利用zkcopy：https://github.com/ksprojects/zkcopy

迁移节点：java -jar target/zkcopy.jar --source ip:port /nodename/subnodename --target ip:port /nodename/subnodename

zookeeper集群搭建Windows 7
svygh123的专栏
08-09 452
在 Windows 7 操作系统上搭建 ZooKeeper 集群是可行的，但是由于 Windows 7 是一个较旧的操作系统，可能缺少某些现代的功能或者安全性更新。尽管如此，你仍然可以在 Windows 7 上搭建一个 ZooKeeper 单服务器三节点集群用于测试和学习目的。
docker 搭建zk 集群
qq_27061805的博客
04-12 628
Docker默认提供了3种网络模式，生成容器时不指定网络模式下默认使用bridge桥接模式。每次容器启动时ip会发生变更，无法达到我们集群的效果。创建自定义网络模式，指定网段。
ZK锦集：Zookeeper的下载和安装 | 真/伪集群的快速搭建| 总结的很详细
血煞长虹 的专栏
12-08 6180
本文主要介绍zk的安装及部署，文章力求：通俗易懂、图文并茂、系统全面，语言精练，主要介绍以下知识点： 1.zk基础知识铺路，做到屋里有粮，心中不慌 2.zk的下载、安装、核心参数配置、节点参数释义 3.zk集群快速搭建的两种方式 ​ zk相关命令请参考： zookeeper常规命令 | Watch | ACL权限操作 | nc四字命令详解...
zk的集群搭建
健康平安的活着的专栏
02-06 4153
一 集群规划描述 192.168.152.128 master 192.168.152.129 slaver01 192.168.152.130 slaver02 安装包存放的目录：/ bigdata-software 安装程序存放的目录：/export/servers 三台机器执行以下命令创建统一文件目录 mkdir -p /export/servers mkdir -p /export/ bigdata-soft...
zk 集群搭建
qq_39512671的博客
03-14 473
先装奇数台zk，修改配置文件中的 data存放目录，新建 mkdir zkData 文件夹 在zkData文件夹中新建一个myid的文件，使用vim来操作，保证不会乱码 在myid文件中添加server对应的编号，不能相同，最好不要从0开始 配置zoo.cfg文件，增加如下配置： ##########cluster######### server.11=ip地址:2888:3888...
zk集群搭建搭建
sparkjvm的专栏
01-04 1779
zk集群搭建 http://apache.fayea.com/apache-mirror/zookeeper/ 1、解压 tar -zxvf zookeeper-3.4.6.tar.gz  2、复制示例文件 cp /usr/local/zookeeper-3.4.6/conf/zoo_sample.cfg /usr/local/zookeeper-3.4.6/conf/zoo.c
zk集群搭建
qq_61565654的博客
07-04 452
zk集群在搭建部署的时候，通常选择奇数台。底层 Paxos 算法支持（过半成功）。zk部署之前，保证服务器基础环境正常、JDK成功安装。服务器基础环境。
ZooKeeper实战篇之zk集群搭建、zkCli.sh操作、权限控制ACL、ZooKeeper JavaAPI使用
雷恩Layne
03-14 2132
在看了史上最全的Zookeeper原理详解(万字长文)，了解Zookeeper的原理后，你是不是蠢蠢欲动想着手实践呢？这篇文章将手把手教你在Linux上搭建ZooKeeper集群，并调用相关API实现自己的Zookeeper应用。 文章目录1. Linux上搭建ZooKeeper集群1.1 多台服务器之间免密登录1.2 ZooKeeper集群搭建2. zkCli.sh客户端操作2.1 打开客户端2.2 创建节点2.3 读取节点2.4 更新节点2.5 删除节点3. Zookeeper 权限控制 ACL3.1
zookeeper windows 伪集群搭建
厉兵秣码
01-13 1375
zookeeper windows 伪集群搭建
搭建ZK集群
qq_28783701的博客
07-20 504
环境准备： 1.VMware里面搞三台centos 7的虚拟机 2.下载JDK，ZK的tar包。JDK下载    jdk-xxx-linux-x64.rpm   的那个 3.如果是在windows物理主机上下的话，用WinSCP分别连接到三台虚拟机，传输过去，解压到任意文件夹下。 接下来就开始玩了： 运行命令： rpm -ivh jdk-xxx-linux-x64.rpm  (xxx)...
ZK集群搭建和配置
02-15 348
1. 克隆三台空虚拟机（含有jdk和lrzsz），修改网络ip，并关闭虚拟机的防火墙 临时关闭：service iptables stop 永久关闭：chkconfig iptables off 2. 安装和配置jdk(克隆的母机中安装配置过jdk，此步可省) 3. 安装和配置zookeeper cd /usr/soft 使用rz命令将zooke...
ZK集群搭建：详细步骤与注意事项
运维那点事
10-17 1816
本文详细介绍了ZooKeeper集群的搭建过程，包括准备工作（硬件与软件准备、网络配置）、安装JDK、下载并安装ZooKeeper、配置ZooKeeper（包括编辑配置文件和创建myid文件）、部署ZooKeeper集群到其他服务器、启动服务以及验证集群状态。同时，还提醒了防火墙配置、日志管理、监控与报警和版本兼容性等注意事项。通过本文的指导，读者可以掌握ZooKeeper集群搭建的基本步骤，为构建稳定、高效的分布式系统打下基础。
构建高可用ZooKeeper集群
weixin_30846599的博客
06-30 182
ZooKeeper 是 Apache 的一个顶级项目，为分布式应用提供高效、高可用的分布式协调服务，提供了诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知和分布式锁等分布式基 础服务。由于 ZooKeeper 便捷的使用方式、卓越的性能和良好的稳定性，被广泛地应用于诸如 Hadoop、HBase、Kafka 和 Dubbo 等大型分布式系统中。 　　本文的目标读者是对 ZooKeeper...
ZK集群搭建-其实很简单
青牛
03-23 2688
本ZK集群教程使用CenterOS7系统 准备工作：在虚拟机上安装三台CenterOS7系统虚拟机 本人安装的三台机器ip地址为 192.168.67.147 192.168.67.148 192.168.67.149 1、三台虚拟机均使用root用户操作 su root 2、下载zk包 wget http://mirror.bit.edu.cn/apache/zoo...
如何搭建Zookeeper集群
weixin_34217773的博客
09-08 243
　　ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件，提供的功能包括：配置维护、域名服务、分布式同步、组服务等。其部署方式有单机部署和集群部署，单机部署意义不大，下面主要介绍集群部署。 　　因硬件环境的限制，本次搭建Zookeeper集群是在Window...
zk集群搭建（下载并解压缩zookeeper）
wangxiaoyun987的专栏
03-20 378
zk集群搭建（下载并解压缩zookeeper） 1.设置zoo.cfg dataDir=/var/data/zookeeper ##原有zoo.cfg中增加 server.1=zookeeper-1:2881:3881 server.2=zookeeper-2:2881:3881 server.3=zookeeper-3:2881:3881 2.设置host vi /etc/hots ##增加配置： 192.168.43.110 zookeeper-1 192.168.43.111 zookee
zk集群
最新发布
04-16
### Zookeeper 集群配置与使用 #### 一、Zookeeper 集群概述 Zookeeper 是一种分布式协调服务，用于维护配置信息、命名、提供分布式同步以及组服务等功能。它通过一个简单的协议来实现这些功能，并支持高可用性和一致性。 为了构建一个可靠的 Zookeeper 集群，通常需要至少三个节点（奇数个更佳），以便在部分节点失效的情况下仍能正常工作[^1]。 --- #### 二、安装与部署流程 ##### 1. 下载并解压软件包 从官方站点下载已编译好的版本（带有 `bin` 的压缩包）。以下是具体操作命令： ```bash wget https://dlcdn.apache.org/zookeeper/zookeeper-3.5.10/apache-zookeeper-3.5.10-bin.tar.gz tar -zxvf apache-zookeeper-3.5.10-bin.tar.gz ``` 完成解压后，进入解压后的目录，该目录即为 Zookeeper 安装路径[^2]。 --- ##### 2. 创建数据存储目录 创建用于保存持久化数据的目录，例如 `/soft/data/tmp/zookeeper/` 或其他自定义位置。如果未指定磁盘分区，默认会基于当前运行环境所在的根目录创建子文件夹。 ```bash mkdir -p /soft/data/tmp/zookeeper/ ``` 此步骤中的路径可以调整至适合实际需求的位置，但需确保各服务器间的一致性[^3]。 --- ##### 3. 复制并修改配置文件 将示例配置文件复制到正式使用的名称下： ```bash cp zoo_sample.cfg zoo.cfg ``` 随后编辑 `zoo.cfg` 文件，在其中设置必要的参数，比如： - **tickTime**: 基本时间单位，通常是 2000ms； - **initLimit**: 跟随者初始化连接的时间限制； - **syncLimit**: 跟随者与领导者之间的同步时间上限； - **dataDir**: 数据存储的具体路径； - **server.x**: 每台机器对应的 ID 和地址列表。 样例如下： ```properties tickTime=2000 initLimit=10 syncLimit=5 dataDir=/soft/data/tmp/zookeeper clientPort=2181 server.1=hadoop102:2888:3888 server.2=hadoop103:2888:3888 server.3=hadoop104:2888:3888 ``` 上述配置中，每台主机都需要分配唯一的编号作为其身份标识[^2]。 --- ##### 4. 同步配置文件至其他节点 利用 SCP 工具把本地更改过的配置分发给其余成员节点： ```bash scp -r zoo.cfg root@hadoop103:/opt/zookeeper/conf/zoo.cfg scp -r zoo.cfg root@hadoop104:/opt/zookeeper/conf/zoo.cfg ``` 这一步骤保证所有参与方拥有相同的设定值集合。 --- ##### 5. 初始化 myid 文件 在之前定义的数据目录里新建名为 `myid` 的纯文本档案，写入对应于当前实例的身份号码。例如对于 hadoop102 来说就是 “1”，以此类推。 ```bash echo "1" > /soft/data/tmp/zookeeper/myid ssh hadoop103 'echo "2" > /soft/data/tmp/zookeeper/myid' ssh hadoop104 'echo "3" > /soft/data/tmp/zookeeper/myid' ``` 这是区分不同集群组件的关键标志之一。 --- #### 三、启动与验证 依次开启各个节点上的服务进程： ```bash ./zkServer.sh start ``` 确认状态是否健康可执行如下指令查看汇总情况： ```bash ./zkCli.sh -server localhost:2181 ls / ``` 若返回预期的结果集，则表明搭建成功。 --- ### 相关问题
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值