zookeeper笔记

zookeeper

[!TIP]

本篇文章是自己的学习笔记，方便以后查阅，内容不一定正确

zookeeper常用命令

# 启动 Zookeeper
bin/zkServer.sh start
# 查看状态 Zookeeper
bin/zkServer.sh status
# 停止 Zookeeper
bin/zkServer.sh stop

# 启动客户端
bin/zkCli.sh
# 集群启动客户端
bin/zkCli.sh -server 192.168.64.102:2181,192.168.64.103:2181,192.168.64.104:2181
# 退出客户端
quit

zookeeper 常用参数

# Zookeeper中的配置文件zoo.cfg中参数含义解读如下
1.tickTime = 2000：通信心跳时间，Zookeeper服务器与客户端心跳时间，单位毫秒
2.initLimit = 10：LF初始通信时限
  Leader和Follower初始连接时能容忍的最多心跳数（tickTime的数量）
3.syncLimit = 5：LF同步通信时限
  Leader和Follower之间通信时间如果超过syncLimit * tickTime，Leader认为Follwer死掉，从服务器列表中删除Follwer。
4.dataDir：保存Zookeeper中的数据
  注意：默认的tmp目录，容易被Linux系统定期删除，所以一般不用默认的tmp目录
5.clientPort = 2181：客户端连接端口，通常不做修改。

zookeeper 配置zoo.cfg文件

#重命名/opt/module/zookeeper-3.5.7/conf 这个目录下的 zoo_sample.cfg 为 zoo.cfg
mv zoo_sample.cfg zoo.cfg
#修改数据存储路径配置
dataDir=/opt/module/zookeeper-3.5.7/zkData
# 增加如下配置
#######################cluster##########################
server.2=hadoop102:2888:3888
server.3=hadoop103:2888:3888
server.4=hadoop104:2888:3888
# 配置参数解读 server.A=B:C:D
# A 是一个数字，表示这个是第几号服务器
#   集群模式下配置一个文件 myid，这个文件在 dataDir 目录下，这个文件里面有一个数据就是 A 的值，Zookeeper 启动时读取此文件，拿到里面的数据与 zoo.cfg 里#   面的配置信息比较从而判断到底是哪个 server
# B 是这个服务器的地址
# C 是这个服务器 Follower 与集群中的 Leader 服务器交换信息的端口
# D 是万一集群中的 Leader 服务器挂了，需要一个端口来重新进行选举，选出一个新的Leader，而这个端口就是用来执行选举时服务器相互通信的端口。

zookeeper客户端命令行操作

# 连接客户端
bin/zkCli.sh -server hadoop102:2181
# 删除节点
delete /sanguo/jin
# 递归删除节点
deleteall /sanguo/shuguo

zookeeper 集群操作

# 连接客户端
bin/zkCli.sh -server hadoop102:2181,hadoop103:2181,hadoop104:2181
# 显示可用命令列表
help
# 1：创建普通节点,保存内容为hello
create /app1 hello
# 2: 创建顺序节点
create -s /app2 world
# 3:创建临时节点
create -e /tempnode world
# 4:创建顺序的临时节点
create -s -e /tempnode2 aaa
# 5:获取节点数据
get  /app1
# 6:修改节点数据
set /app1  hadoop
# 7:删除节点
delete  /app1 删除的节点不能有子节点
# listquota命令用于显示配额
listquota /app1
# setquota命令用于设置节点个数以及数据长度的配额
setquota -n 3 -b 100 /app1
setquota –n 4 /zookeeper/node 设置/zookeeper/node子节点个数最大为4
setquota –b 100 /zookeeper/node 设置/zookeeper/node节点长度最大为100
# delquota命令用于删除配额
delquota -n /app1
delquota -b /app1
delquota /app1
# 
java -Djava.ext.dirs=lib/ -cp lib/zookeeper-3.7.1.jar org.apache.zookeeper.server.auth.DigestAuthenticationProvider jiyongze:123456
setAcl /app2 digest:jiyongze:9Bggj1PXw/Rxt9EtykH7c3wK1OA=:cdrwa
addauth digest jiyongze:123456
 getAcl /app2
# 仅获取节点元数据。
stat /app2
# 强制与Leader同步
sync /

shell脚本

#!/bin/bash
# 连接zookeeper,并输出目录
ZK_SERVERS="hadoop102:2181,hadoop103:2181,hadoop104:2181"
ZK_PATH="/"

tmp_file=$(mktemp)
echo "ls $ZK_PATH" | /opt/module/zookeeper-3.7.1/bin/zkCli.sh -server "$ZK_SERVERS" > "$tmp_file" 2>&1

awk -v zk_servers="$ZK_SERVERS" -v path="$ZK_PATH" '
    BEGIN {pattern = "^\\[zk: " zk_servers ".*\\] ls " path}
    $0 ~ pattern {start=1; next}
    $0 ~ "^\\[zk: " zk_servers ".*\\] " {start=0; next}
    start && !/^WATCHER:/ && !/^JLine:/ && !/^$/ {print}
' "$tmp_file" | sed 's/^\[.*\] //' | sed 's/^\[//; s/\]$//'

rm -f "$tmp_file"