HBase集群的搭建过程

a.单机模式

1.解压hbase-1.2.6.tar.gz到~/bigdata

         ~>tar zxvf hb.gz -C ~/bigdata

2.创建软链接

         ln-snf /home/zhujuan/bigdata/hbase-1.2.6 /home/zhujuan/bigdata/hbase

3.配置环境变量

         ~>vi .profile

 

         exportHBASE_HOME=/home/zhujuan/bigdata/hbase

         exportPATH=$PATH:$HBASE_HOME/bin

         使环境变量生效:source.profile

4.配置HBase

$HH/conf/hbase-env.sh

修改27行:

         exportJAVA_HOME=/home/zhujuan/Bigdata/jdk

修改120行:

         exportHBASE_PID_DIR=/home/zhujuan/Bigdata

   /data/hbase/pids

修改128行:

         exportHBASE_MANAGES_ZK=true

5.hbase-site.xml

         <property>

                  <name>hbase.rootdir</name>

                  <value>file:///home/zhujuan/Bigdata/data/hbbase/data</value>

         </property>

6.单机模式只需要启动HMaster

         ~>hbase-daemon.sh start master

 

b.     伪分布式模式

1.编辑hbase-env.sh

修改128行:

export HBASE_MANAGES_ZK=false

2.编辑hbase-site.xml文件

<property>

          <name>hbase.rootdir</name>

          <value>hdfs://namenode01:9000/hbase</value>

</property>

<property>

          <name>hbase.cluster.distributed</name>

          <value>true</value>

</property>

<property>

          <name>hbase.zookeeper.quorum</name>

          <value>namenode01:2181,datanode1:2181,datanode2:2181</value>

</property>

3.编辑regionservers

在该文件中加入所有从节点的IP或者主机名,一行一个。

4.启动HBase集群

a.启动HDFS集群(伪分布式)

b.启动ZK集群(单机模式)

c.启动HBase集群(伪分布式)

          ~> start-hbase.sh

 

有以下五个进程,表示HBase正常启动了。

                   DataNode

                   HRegionServer

                   NameNode

                   QuorumPeerMain

                            HMaster

### HBase 集群搭建教程 #### 安装准备 在开始搭建 HBase 集群之前,需要确保所有节点的操作系统版本一致,并完成必要的软件安装。例如,在 CentOS 9 上可以使用解压方式进行安装[^1]。 ```bash tar -zxvf /software/hbase-2.5.8-bin.tar.gz -C /opt ``` 为了方便管理,建议将 HBase 添加到系统的环境变量中。 #### 环境配置 对于完全分布式的 HBase 集群,需特别注意 Java 的路径设置以及 ZooKeeper 的管理模式。以下是具体的配置步骤: ##### 配置 `hbase-env.sh` 文件 进入 HBase 的 `conf` 目录并编辑 `hbase-env.sh` 文件,指定 JDK 路径和禁用内置 ZooKeeper 实例[^2]。 ```bash export JAVA_HOME=/home/hd/software/jdk1.8.0_144 export HBASE_MANAGES_ZK=false ``` 上述命令明确了外部 ZooKeeper 的使用需求,从而提升集群的稳定性和性能。 #### 核心文件配置 除了基础环境外,还需要调整多个核心配置文件来适配分布式场景的需求。 ##### 编辑 `hbase-site.xml` 此文件定义了 HBase 运行的关键参数,包括存储位置、ZooKeeper 地址等。以下是一个典型的配置示例[^3]: ```xml <configuration> <property> <name>hbase.rootdir</name> <value>hdfs://namenode:8020/hbase</value> </property> <property> <name>hbase.cluster.distributed</name> <value>true</value> </property> <property> <name>zookeeper.znode.parent</name> <value>/hbase-unsecure</value> </property> <property> <name>hbase.zookeeper.quorum</name> <value>zk1,zk2,zk3</value> </property> </configuration> ``` 以上配置指定了 HDFS 存储路径、启用分布式模式以及连接至特定的 ZooKeeper 集群。 #### 硬件资源规划 硬件资源配置也是成功部署的重要因素之一。通常情况下,Master 节点应具备较高的内存容量(如 24GB),以便支持 NameNode 和 ResourceManager 的高效运作[^4]。 --- ### 总结 通过合理分配角色、优化网络通信及充分考虑软硬件条件,能够显著提高 HBase 集群的整体表现。具体实施过程中还需依据实际业务负载进一步调优各项参数。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值