电商数仓zookeeper

最新推荐文章于 2025-03-22 00:12:00 发布

原创最新推荐文章于 2025-03-22 00:12:00 发布 · 2.3k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#zookeeper #hadoop

大数据专栏收录该内容

24 篇文章

订阅专栏

本文详细介绍了如何在三台服务器(h102, h103, h104)上安装和配置Zookeeper集群。步骤包括解压安装包、设置服务器编号、配置zoo.cfg文件、创建启动停止脚本等。在每个服务器上创建myid文件并指定服务器编号，通过集群配置实现服务器间的通信。最后，提供了启动、停止和检查Zookeeper状态的集群操作脚本。

1、安装zookeeper

1.1、解压安装

解压zookeeper安装包到/opt/module/目录下

tar -zxvf zookeeper-3.5.7.tar.gz -C /opt/module/

修改/opt/module/apache-zookeeper-3.5.7-bin名称为zookeeper-3.5.7

mv apache-zookeeper-3.5.7-bin/ zookeeper-3.5.7

1.2、配置服务器编号

在/opt/module/zookeeper-3.5.7/这个目录下创建zkData

mkdir zkData

在/opt/module/zookeeper-3.5.7/zkData目录下创建一个myid的文件

vim myid

在文件中添加与server对应的编号。

同步/opt/module/zookeeper-3.5.7目录内容到h103、h104

xsync zookeeper-3.5.7/

同步完成后，分别在h103、h104上修改myid文件中内容为3、4

1.3、配置zoo.cfg文件

重命名/opt/module/zookeeper-3.5.7/conf这个目录下的zoo_sample.cfg为zoo.cfg

mv zoo_sample.cfg zoo.cfg

打开zoo.cfg文件

vim zoo.cfg

修改数据存储路径配置

dataDir=/opt/module/zookeeper-3.5.7/zkData

增加如下配置

#######################cluster##########################
server.2=h102:2888:3888
server.3=h103:2888:3888
server.4=h104:2888:3888

同步zoo.cfg配置文件

xsync zoo.cfg

配置参数解读

server.A=B:C:D

A是一个数字，表示这个是第几号服务器；

集群模式下配置一个文件myid，这个文件在dataDir目录下，这个文件里面有一个数据就是A的值，Zookeeper启动时读取此文件，拿到里面的数据与zoo.cfg里面的配置信息比较从而判断到底是哪个server。

B是这个服务器的地址；

C是这个服务器Follower与集群中的Leader服务器交换信息的端口；

D是万一集群中的Leader服务器挂了，需要一个端口来重新进行选举，选出一个新的Leader，而这个端口就是用来执行选举时服务器相互通信的端口。

1.4、集群操作

在三台服务器上分别启动zookeeper

bin/zkServer.sh start

查看状态

bin/zkServer.sh status

2、集群启动停止脚本

在h102的/home/atguigu/bin目录下创建脚本

vim zk.sh

在脚本中编写如下内容

#!/bin/bash

case $1 in
"start"){
	for i in h102 h103 h104
	do
        echo ---------- zookeeper $i 启动 ------------
		ssh $i "/opt/module/zookeeper-3.5.7/bin/zkServer.sh start"
	done
};;
"stop"){
	for i in h102 h103 h104
	do
        echo ---------- zookeeper $i 停止 ------------    
		ssh $i "/opt/module/zookeeper-3.5.7/bin/zkServer.sh stop"
	done
};;
"status"){
	for i in h102 h103 h104
	do
        echo ---------- zookeeper $i 状态 ------------    
		ssh $i "/opt/module/zookeeper-3.5.7/bin/zkServer.sh status"
	done
};;
esac

增加脚本执行权限

chmod +x zk.sh