完全分布式zookeeper及Hbase安装部署（详细步骤）

已于 2025-03-21 17:48:46 修改
阅读量773 收藏 20
点赞数 13
文章标签： 分布式 zookeeper hbase
于 2025-03-21 17:36:13 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/weixin_74982308/article/details/146423774
版权

目录

文章目录

前言

一、资源准备

二、zookeeper安装部署

1.集群部署

2.上传解压zookeeper安装包

3.配置相关文件

1.将解压好的zookeeper重名为zookeeper-3.5.7（保留版本号）

2.配置环境变量

1.先进入root模式下，编辑 /etc/profile ;在profile文件里添加以下：

2.通过scp命令远程分发另外两个节点（一定要在root模式下，不然没权限）

3.在zookeeper的安装目录下（~/bigdatasoftware/zookeeper-3.5.7/）创建zkData文件(在文件中写入“1”）

4.配置zoo.cfg

1.进入zook的安装目录下的conf目录，将目录下的zoo_sample.cfg重命名为zoo.cfg

2.编辑zoo.cfg文件，修改数据存储路径为刚刚创建的zkData；

3.再在zoo.cfg文件中添加

5.远程分发zookeeper包给另外两个节点

6.集群操作

1.分别启动

2.查看进程

3.查看状态

三.Hbase的安装部署

1.上传解压hbase安装包

2.配置环境变量（root模式下）

3.配置hbase-env.sh文件

4.配置hbase-site.xml文件

5.配置regionservers文件

6.软连接Hadoop的配置文件到Hbase

(1).软连接Hadoop的core-site.xml文件到hbase的conf目录下

(2)软连接Hadoop的hdfs-site.xml文件到hbase的conf目录下

7.配置完成远程分发hbase给另外两个节点

8.启动Hbase

（1）因为hbase是依赖zookeeper和Hadoop的，因此启动hbase前，需要先启动zookeeper和Hadoop集群。

（2）启动方式

第一种：[hadoop@HadoopMaster hbase-2.4.6]$ bin/hbase-daemon.sh start master

第二种：[hadoop@HadoopMaster hbase-2.4.6]$ bin/start-hbase.sh

（3）停止服务

9.验证

1.jps进程验证

2.网页验证

总结

前言

在大数据时代，海量数据的存储、管理和分析成为企业面临的重大挑战。分布式数据库 HBase 凭借其高可靠性、高性能和可扩展性，成为处理海量结构化数据的理想选择。而 Zookeeper 作为分布式协调服务，为 HBase 提供了可靠的元数据管理、集群状态监控和分布式锁等服务，是 HBase 稳定运行的基石。

一、资源准备

  1. 资源版本：zookeeper-3.7.5、hbase-2.4.6
  2. 虚拟机：HadoopMaster、HadoopSlave01、HadoopSlave02
  3. 资源获取链接

链接:https://pan.baidu.com/s/1dkTwGrKwqDsCxSQCMrxnXw?pwd=trv7 

提取码: trv7

二、zookeeper安装部署

1.集群部署

在HadoopMaster和HadoopSlave01、HadoopSlave02三个节点上部署zookeeper

2.上传解压zookeeper安装包

代码如下（示例）：

tar -zxvf apache-zookeeper-3.5.7-bin.tar.gz

3.配置相关文件

1.将解压好的zookeeper重名为zookeeper-3.5.7（保留版本号）

mv apache-zookeeper-3.5.7-bin zookeeper-3.5.7

2.配置环境变量

1.先进入root模式下，编辑 /etc/profile ;在profile文件里添加以下：
#zookeeper

export  ZK_HOME=/home/hadoop/bigdatasoftware/zookeeper-3.5.7

export  PATH=$PATH:$ZK_HOME/bin

配置完成记得source以下文件，使其环境变量生效

source /etc/profile
2.通过scp命令远程分发另外两个节点（一定要在root模式下，不然没权限）

3.在zookeeper的安装目录下（~/bigdatasoftware/zookeeper-3.5.7/）创建zkData文件(在文件中写入“1”）

vim myid

4.配置zoo.cfg

1.进入zook的安装目录下的conf目录，将目录下的zoo_sample.cfg重命名为zoo.cfg
2.编辑zoo.cfg文件，修改数据存储路径为刚刚创建的zkData；
vim zoo.cfg

3.再在zoo.cfg文件中添加
server.1=HadoopMaster:2888:3888
server.2=HadoopSlave01:2888:3888
server.3=HadoopSlave02:2888:3888

5.远程分发zookeeper包给另外两个节点

scp -r ~/bigdatasoftware/zookeeper-3.5.7 hadoop@HadoopSlave01:~/software

发送完成后，将HadoopSlave01和HadoopSlave02中zookeeper-3.5.7/zkData/myid中内容改为2（对应HadoopSlave01）和3（对应HadoopSlave2）。

6.集群操作

1.分别启动

[hadoop@HadoopMaster zookeeper-3.5.7]$ bin/zkServer.sh start

[hadoop@HadoopSlave01 zookeeper-3.5.7]$ bin/zkServer.sh start

[hadoop@HadoopSlave02 zookeeper-3.5.7]$ bin/zkServer.sh start

2.查看进程

3.查看状态

[hadoop@HadoopMaster zookeeper-3.5.7]bin/zkServer.sh status

[hadoop@HadoopMaster zookeeper-3.5.7]$ bin/zkServer.sh status

ZooKeeper JMX enabled by default

Using config: /home/hadoop/bigdatasoftware/zookeeper-3.5.7/bin/../conf/zoo.cfg

Client port found: 2181. Client address: localhost.

Mode: follower

[hadoop@HadoopSlave01 zookeeper-3.5.7]$ bin/zkServer.sh status

ZooKeeper JMX enabled by default

Using config: /home/hadoop/bigdatasoftware/zookeeper-3.5.7/bin/../conf/zoo.cfg

Client port found: 2181. Client address: localhost.

Mode: leader

[hadoop@HadoopSlave02 zookeeper-3.5.7]$ bin/zkServer.sh status

ZooKeeper JMX enabled by default

Using config: /home/hadoop/bigdatasoftware/zookeeper-3.5.7/bin/../conf/zoo.cfg

Client port found: 2181. Client address: localhost.

Mode: follower

成功！！！

三.Hbase的安装部署

1.上传解压hbase安装包

tar -zxvf hbase-2.4.6-bin.tar.gz

2.配置环境变量（root模式下）

添加以下内容

export HBASE_HOME=/home/hadoop/bigdatasoftware/hbase-2.4.6

export PATH=$PATH:$HBASE_HOME/bin

配置完成后，scp远程发送给另外两个节点

3.配置hbase-env.sh文件

进入hbase-2.4.6/conf目录下，添加以下内容

export JAVA_HOME=/home/hadoop/bigdatasoftware/jdk1.8.0_171

export HBASE_MANAGES_ZK=false

4.配置hbase-site.xml文件

将里面的内容替换（有些地方修改为自己的路径和主机名）为以下：

<configuration>

<!-- 8020或9000要与hadoop的core-site.xml fs.defaultFS的端口一致 -->

<property>

<name>hbase.rootdir</name>

<value>hdfs://HadoopMaster:9000/HBase</value>

</property>

<property>

<name>hbase.cluster.distributed</name>

<value>true</value>

</property>

<property>

<name>hbase.master.port</name>

<value>16000</value>

</property>

<!-- 在分布式的情况下一定要设置，不然容易出现Hmaster起不来的情况 -->

  <property>                                     

  <name>hbase.unsafe.stream.capability.enforce</name>

         <value>false</value>

           </property>

           <property>

           <name>hbase.wal.provider</name>

           <value>filesystem</value>

           </property>

           <property>

           <name>hbase.zookeeper.property.dataDir</name>

           <value>/home/hadoop/bigdatasoftware/zookeeper-3.5.7/zkData</value>

           </property>

           <property>

               <name>hbase.zookeeper.quorum</name>

                   <value>HadoopMaster,HadoopSlave01,HadoopSlave02</value>

                     </property>

</configuration>

5.配置regionservers文件

将里面的内容替换为三个主机名：

6.软连接Hadoop的配置文件到Hbase

(1).软连接Hadoop的core-site.xml文件到hbase的conf目录下
ln -s ~/bigdatasoftware/hadoop-3.3.0/etc/hadoop/core-site.xml ~/bigdatasoftware/hbase-2.4.6/conf/core-site.xml
(2)软连接Hadoop的hdfs-site.xml文件到hbase的conf目录下
ln -s ~/bigdatasoftware/hadoop-3.3.0/etc/hadoop/hdfs-site.xml ~/bigdatasoftware/hbase-2.4.6/conf/hdfs-site.xml

7.配置完成远程分发hbase给另外两个节点

scp -r ~/bigdatasoftware/hbase-2.4.6 hadoop@HadoopSlave01:~/software

8.启动Hbase

（1）因为hbase是依赖zookeeper和Hadoop的，因此启动hbase前，需要先启动zookeeper和Hadoop集群。

（2）启动方式

第一种：[hadoop@HadoopMaster hbase-2.4.6]$ bin/hbase-daemon.sh start master
第二种：[hadoop@HadoopMaster hbase-2.4.6]$ bin/start-hbase.sh

（3）停止服务

[hadoop@HadoopMaster hbase-2.4.6]$ bin/stop-hbase.sh

9.验证

1.jps进程验证

Hbase启动成功后，主节点HadoopMaster有以下节点（zookeeper集群1个+Hadoop集群3个+hbase 2个）

Hbase启动成功后，附节点HadoopSlave01和HadoopSlave01有以下节点

2.网页验证

启动hbase后，可通过http://(ip地址):16010验证

成功！！！

总结

linlinlinxf
关注
Linux上搭建完全分布式zookeeper和hbase
m0_73901987的博客
05-26 2008
在一般情况下我们学习安装zookeeper和hbase是没有服务器用来练习部署的，这里我们采用在VMware上来模拟在虚拟机上安装部署zookeeper和hbase。由于zookeeper和hbase是基于Hadoop进行开发部署的，所以我们在部署完全分布式zookeeper和hbase之前，我们需要部署相关的Hadoop环境，这里我们可以在csdn官网里面搜索“Linux上部署完全分布式Hadoop集群”来查看一些大神博客发的Linux上Hadoop的部署，当然如果觉得麻烦了也可以访问。
centos7搭建hadoop2.9.2完全分布式+zookeeper部署+hbase部署
愿与你一起深度技术交流
06-16 1690
目录一、Hadoop完全分布式集群搭建部署1、配置静态IP2、关闭防火墙3、修改hostname 及 hosts映射4、创建Hadoop账号5、配置SSH6、安装jdk7、修改时区8、安装Hadoop9、配置Hadoop文件10、主机ping通centos11、启动hadoop进程可能遇到的问题：二、Zookeeper安装部署1、环境变量配置2、配置zoo.cfg文件3、创建myid文件4、启动三、Hbase安装部署1、首先解压重命名配置环境变量2、编辑hbase-env.sh文件3、编辑hbase-sit
全网最全zookeeper分布式安装和介绍使用
因上努力，果上随缘。但行好事，莫问前程。
04-26 2620
一. Zookeeper 第一章：Zookeeper入门 1.1 概述 zookeeper是一个开源的分布式的，为分布式应用提供协调的Apache项目 1.2 工作机制 Zookeeper从设计模式角度来理解：是一个基于观察者模式设计的分布式服务管理框架，它是负责存储和管理大家都关心的数据，然后接受观察者的注册，一旦这些数据的状态发生变化 ，Zookeeper就将负责通知已经在Zookeeper上注册的那些观察者做出相应的反应。 1.3 特点 1）Zookeeper：一个领导者（Leader），多个跟
分布式集群——jdk配置与zookeeper环境搭建
张小鱼的博客
08-30 3454
本文主要介绍分布式集群搭建，jdk配置以及zookeeper环境配置，以及相关的zookeeper客户端常见的命令介绍，与zookeeper的JavaAPI操作。以下的案例仅供参考。一个开源的分布式协调服务框架，它是集群的管理者。常用用途：它是集群的管理者，监视着集群中各个节点的状态根据节点提交的反馈进行下一步合理操作。通供了新增、删除、修改、监听等等功能ZooKeeper具有高可用性的原因。
zookeeper的安装和简单使用
qq_41114884的博客
03-27 1251
Zookeeper是一个高性能、高可靠性的分布式协调服务，它为分布式应用提供了可靠的元数据管理、分布式锁、分布式队列、节点选举等基础服务，是实现分布式应用的重要基础组件之一
Zookeeper安装配置
qq_39297673的博客
08-17 251
1. 集群规划 在 hadoop102、hadoop103、hadoop104 上部署 Zookeeper 2. 配置服务器编号 1. 在 /opt/module/zookeeper-3.4.10/这个目录下创建 zkData mkdir -p zkData 2. 在/opt/module/zookeeper-3.4.10/zkData 目录下创建一个 myid 的文件 cd /opt/module/zookeeper-3.4.10 touch myid 3. 编辑 myid 文件 #在 myid文件
ZooKeeper全分布式安装
weixin_51683372的博客
08-06 772
1.安装步骤 ZooKeeper全分布式，又称ZooKeeper集群模式，安装步骤如下。 （1）将ZooKeeper安装包放到虚拟机master的家目录下，在根目录下新建目录/mysoft,解压ZooKeeper安装包到/mysoft目录下。 [root@master ~]#mkdir /mysoft [root@master ~]#tar -zxvf /zookeeper -C /mysoft/ 注：(zookeeper这里指的是你根目录下的zookeeper安装包) （2）切换到/mysoft目录下
完全分布式Hbase与Zookeeper安装部署指南
安装部署HBase和Zookeeper是一个涉及多个步骤的过程，需要对分布式系统有深入理解，并严格按照步骤操作，以确保系统的稳定和高效运行。在生产环境中，还应该考虑监控、日志管理和故障恢复策略，以提升系统的整体运维...
HBase完全分布式集群的简单安装操作说明
qq_35447918的博客
03-10 2332
一 HBase完全分布式集群（使用内置ZooKeeper）安装操作说明 1）双击桌面“Oracle VM Virtual Box”图标，启动Virtual Box虚拟机软件 2）展开Virtual Box左边的HBase1.2.0，鼠标右键点击【启动】，菜单中选【启动】-》【分离式启动】，会弹出一个虚拟机启动窗口，耐心等待虚拟机启动过程完成 3）双击桌面“XshellPortable”图标，启动远程登陆终端工具XShell 4）菜单【文件】-》【打开】，弹出会话窗口，双击“HBase伪分布式”，用户
最细教学！！ 分布式文件系统：Hadoop之Zookeeper的安装与配置
weixin_49104143的博客
07-17 1905
分布式文件系统：Hadoop之Zookeeper的安装与配置 “echo $PATH”查看新添加和修改的环境变量是否设置成功，以及环境变量的值是否正确。将Zookeeper目录和.bash_profile文件发送给集群中所有主机然后每台执行source ~/.bash_profile使环境变量生效。进入Zookeeper相关文件的目录，分别创建用于存放数据文件的目录data和存放日志文件的logs目录。使新的配置的环境变量立即生效。配置Zookeeper相关的环境变量。关闭所有主机的防火墙。
分布式学习——Zookeeper介绍（三）——Zookeeper的安装
攻城狮不是猫
01-08 399
在Zookeeper概述中简单介绍了Zookeepr，工欲善其事，必先利其器。那么本文就介绍如何安装Zookeeper。 Zookeeper有三种安装方式：单机模式、集群模式、伪集群模式。 单机模式 单机模式表示只运行在一台服务器上，适合测试环境； 安装步骤如下： 一、下载ZooKeeper 二、解压 三、在conf目录下创建一个配置文件zoo.cfg tic
（十五）Zookeeper的介绍与分布式安装配置_将zookeeper分发到其他节点
2401_84692456的博客
05-15 480
运行环境是在Ubuntu14系统下，Zookeeper当前稳定版本zookeeper-3.4.12。1、更改dataDir=/usr/local/zookeeper/zkdata。各位读者，由于本篇幅度过长，为了避免影响阅读体验，下面我就大概概括了整理了。2、添加集群端点(注意master、slave是自己的主机名)zookeeper**，以方便使用，命令如下：**拷贝zoo_sample.cfg为zoo.cfg。
zookeeper分布式安装部署
weixin_39868387的博客
01-16 374
1、集群规划 在hadoop105、hadoop106和hadoop107三个节点上部署Zookeeper。 操作步骤如下： 2、解压安装 （1）上传zookeeper压缩包（zookeeper-3.4.5.tar.gz ）到/usr/local/hadoop文件目录下 （2）解压zookeeper压缩包到/usr/local/hadoop/module文件目录下 [root@hadoop10...
HBase分布式安装配置（Zookeeper+HBase）
最新发布
weixin_62687791的博客
12-10 2905
HBase 是一个面向列式存储的分布式数据库，其设计思想来源于 Google 的 BigTable 论文。HBase 底层存储基于 HDFS 实现，集群的管理基于 ZooKeeper 实现。HBase 良好的分布式架构设计为海量数据的快速存储、随机访问提供了可能，基于数据副本机制和分区机制可以轻松实现在线扩容、缩容和数据容灾，是大数据领域中 Key-Value 数据结构存储最常用的数据库方案。
搭建Zookeeper完全分布式集群（CentOS 9 ）
tangyi2008的专栏
04-17 2925
ZooKeeper是一个开源的分布式协调服务，它为分布式应用提供了高效且可靠的分布式协调服务，并且是分布式应用保证数据一致性的解决方案。 本文主要介绍ZooKeeper的完全分布式集群搭建、集群服务管理脚本的编写、以及常见问题的解决办法。
ZooKeeper的安装与操作
m0_70988704的博客
04-03 3327
是一个分布式的、开放源码的分布式应用程序协调服务，它是的Chubby服务的开源实现，也是和等大数据生态系统中的重要组件。ZooKeeper的目标是为分布式应用提供一致性服务，包括配置维护、域名服务、分布式同步和组服务等。它封装了复杂且易出错的关键服务，通过简单的接口和高效、稳定的系统提供给用户。ZooKeeper的工作原理基于，该算法通过选举产生一个领导者（leader），只有领导者能提交proposer，以此来解决Paxos算法中可能存在的活锁问题。
Zookeeper安装
qq904748592的博客
11-01 9025
zookeeper单机及集群安装部署
【分布式技术】中间件-zookeeper安装配置
wendao76的专栏
10-19 1082
通过这些基本操作，你可以在Linux环境中管理和使用ZooKeeper。对于更高级的使用场景，如分布式锁或领导者选举，你可能需要编写更复杂的客户端程序来实现。在Linux上安装ZooKeeper，你可以从Apache ZooKeeper的官方网站下载二进制包或使用包管理器安装。监控ZooKeeper的性能和查看日志对于维护ZooKeeper集群非常重要。中配置多个服务器，并在每台服务器上设置唯一的。然后，在所有服务器上启动ZooKeeper。如果需要部署ZooKeeper集群，需要在。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值