zk集群搭建搭建

zk集群搭建
http://apache.fayea.com/apache-mirror/zookeeper/
1、解压
tar -zxvf zookeeper-3.4.6.tar.gz 


2、复制示例文件
cp /usr/local/zookeeper-3.4.6/conf/zoo_sample.cfg /usr/local/zookeeper-3.4.6/conf/zoo.cfg


3、修改zoo.cfg
修改数据存放目录:dataDir=/usr/local/zookeeper-3.4.6/data
配置三台zk服务器
server.1=itr-mastertest01:2888:3888
server.2=itr-mastertest02:2888:3888
server.3=itr-nodetest01:2888:3888


4、创建data文件夹
mkdir /usr/local/zookeeper-3.4.6/data


5、进入data目录
vi myid -->内容为1
有表示符1,代表第server.1台server


6、scp zookeeper
scp -rq zookeeper-3.4.6 itr-mastertest02:/usr/local/
scp -rq zookeeper-3.4.6 itr-nodetest01:/usr/local/


7、修改myid文件
[root@itr-mastertest02 data]# vi myid  [值为2] 或者echo 2 > /usr/local/zookeeper-3.4.6/data/myid
[root@itr-nodetest01 data]# vi myid [值为3]


8、启动执行zk
[root@itr-mastertest01 local]# zk zookeeper-3.4.6/bin/zkServer.sh start
[root@itr-mastertest02 local]# zk zookeeper-3.4.6/bin/zkServer.sh start
[root@itr-nodetest01 local]# zookeeper-3.4.6/bin/zkServer.sh start
9、查看zk状态
[root@itr-mastertest01 local]# zookeeper-3.4.6/bin/zkServer.sh status
10、进入zk客户端
[root@itr-mastertest01 local]# zookeeper-3.4.6/bin/zkCli.sh 

[zk: localhost:2181(CONNECTED) 3] get /zookeeper/quota [代表节点,每个节点存放数据信息]

大数据讨论群:288396468

### HBase 集群搭建教程 #### 安装准备 在开始搭建 HBase 集群之前,需要确保所有节点的操作系统版本一致,并完成必要的软件安装。例如,在 CentOS 9 上可以使用解压方式进行安装[^1]。 ```bash tar -zxvf /software/hbase-2.5.8-bin.tar.gz -C /opt ``` 为了方便管理,建议将 HBase 添加到系统的环境变量中。 #### 环境配置 对于完全分布式的 HBase 集群,需特别注意 Java 的路径设置以及 ZooKeeper 的管理模式。以下是具体的配置步骤: ##### 配置 `hbase-env.sh` 文件 进入 HBase 的 `conf` 目录并编辑 `hbase-env.sh` 文件,指定 JDK 路径和禁用内置 ZooKeeper 实例[^2]。 ```bash export JAVA_HOME=/home/hd/software/jdk1.8.0_144 export HBASE_MANAGES_ZK=false ``` 上述命令明确了外部 ZooKeeper 的使用需求,从而提升集群的稳定性和性能。 #### 核心文件配置 除了基础环境外,还需要调整多个核心配置文件来适配分布式场景的需求。 ##### 编辑 `hbase-site.xml` 此文件定义了 HBase 运行的关键参数,包括存储位置、ZooKeeper 地址等。以下是一个典型的配置示例[^3]: ```xml <configuration> <property> <name>hbase.rootdir</name> <value>hdfs://namenode:8020/hbase</value> </property> <property> <name>hbase.cluster.distributed</name> <value>true</value> </property> <property> <name>zookeeper.znode.parent</name> <value>/hbase-unsecure</value> </property> <property> <name>hbase.zookeeper.quorum</name> <value>zk1,zk2,zk3</value> </property> </configuration> ``` 以上配置指定了 HDFS 存储路径、启用分布式模式以及连接至特定的 ZooKeeper 集群。 #### 硬件资源规划 硬件资源配置也是成功部署的重要因素之一。通常情况下,Master 节点应具备较高的内存容量(如 24GB),以便支持 NameNode 和 ResourceManager 的高效运作[^4]。 --- ### 总结 通过合理分配角色、优化网络通信及充分考虑软硬件条件,能够显著提高 HBase 集群的整体表现。具体实施过程中还需依据实际业务负载进一步调优各项参数。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值