Linux协调集群-ZooKeeper搭建

本文档详细介绍了如何在Linux环境中搭建ZooKeeper集群。首先,需要停止原有的NameNode服务,然后按照步骤依次启动JournalNode、格式化NameNode和ZooKeeper。ZooKeeper作为分布式协调服务,采用主从模型,需要在四台虚拟机上部署。配置包括设置环境变量、修改配置文件、创建数据目录、分配节点ID,并确保至少过半数节点启动以确保集群正常运行。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

ZooKeeper

注意:1.需要停下原有的NN

思路: 先启动JN,因为格式化NN需要依赖JN,

​ 格式化NN

​ 启动zookeeper,因为格式化zkfc依赖zookeeper

​ 格式化zkfc

​ 启动

1,搭建zookeeper

​ --分布式协调,主从模型

​ 在格式化zkfc之前搭建完成,需要4台虚拟机,搭建在sxt002,sxt003,sxt004

​ a.将zookeeper解压,并移动到指定目录下

​ tar xf zookeeper-3.4.6.tar.gz

​ mv zookeeper-3.4.6 /opt/sxt

​ b.配置环境变量并加载
​ vi ~/.bash_profile

​ export ZOOKEEPER_HOME=/opt/sxt/zookeeper-3.4.6

​ export PATH=:$ZOOKEEPER_HOME/bin

​ . .bash_profile

​ c.查看虚拟机按 table 是否可用自动弹出

​ d.进入zookeeper-3.4.6目录下的conf目录,配置文件

​ d.拷贝zoo_sample.cfg文件到当前目录下,编辑zoo.cfg

​ cp zoo_sample.cfg zoo_cfg

​ e.将存储数据的目录dataDir= 改为 =/var/sxt/hadoop/zk 留意客户端端口号,默认2181

​ f.在文件最后添加信息并保存退出

​ --前面的数字(事务ID)大谁就是leader,若相同比(serverID)仙童推选出来,非争抢

​ --过半机制

​ server.1=192.168.125.101:2888:3888

​ server.2=192.168.125.102:2888:3888

​ server.3=192.168.125.103:2888:3888

​ g.创建配置文件中dataDir目录,并追加

​ mkdir -p /var/sxt/hadoop/zk

​ echo > 1 /var/sxt/hadoop/zk/myid

​ h.分发到sxt003,004虚拟机相同目录下

​ scp -r ./zookeeper-3.4.6/ sxt003:pwd

​ i.在sxt003和sxt004虚拟机上分别创建文件并追加

​ sxt003虚拟机 mkdir -p /var/sxt/hadoop/zk

​ echo > 2 /var/sxt/hadoop/zk/myid

​ sxt004虚拟机 mkdir -p /var/sxt/hadoop/zk

​ echo > 3 /var/sxt/hadoop/zk/myid

​ j.在sxt003和sxt004上做环境变量配置

​ vi ~/.bash_profile

​ export ZOOKEEPER_HOME=/opt/sxt/zookeeper-3.4.6

​ export PATH=:$ZOOKEEPER_HOME/bin

​ . .bash_profile

​ i.启动3台

​ --后来的永远没有先来的数据多

​ --只要启动过半的ZK,谁的ID大谁就是leader

​ zkServer.start​

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值