hbase-1.2.6安装部署

本文详细介绍HBase的安装步骤及配置方法,包括选择稳定版本、配置JAVA_HOME、HBASE_MANAGES_ZK参数、hbase-site.xml关键属性、regionservers节点设置及环境变量配置,并介绍如何启动HBase集群。
部署运行你感兴趣的模型镜像

1,前言:

hbase 是hadoop database的缩写,是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。

2,安装

2.1,hbase官网下载安装包,根据官方建议,使用stable版本


2.2,新建hbase安装目录,解压安装包到当前目录

mkdir -p /opt/hbase
chown hadoop:hadoopGroup /opt/hbase
tar -zxvf hbase-1.2.6-bin.tar.gz

2.3,配置hbase配置文件

hbase配置文件目录:/opt/hbase/hbase-1.2.6/conf

2.3.1,修改hbase-env.sh,

配置JAVA_HOME,HBASE_CLASSPATH,

这里使用hbase自带的zookeeper服务管理集群,故设置HBASE_MANAGES_ZK为true.

# The java implementation to use.  Java 1.7+ required.
export JAVA_HOME=/usr/local/java/jdk1.8.0_161

# Extra Java CLASSPATH elements.  Optional.
export HBASE_CLASSPATH=/opt/hbase/conf

...

# Tell HBase whether it should manage it's own instance of Zookeeper or not.
export HBASE_MANAGES_ZK=true

2.3.2,修改hbase-site.xml:

<configuration>
        <property>
                <name>hbase.rootdir</name>
                <!-- hbase存放数据目录 -->
                <value>hdfs://master:9000/hbase/hbase_db</value>
                <!-- 端口要和Hadoop的fs.defaultFS端口一致-->
        </property>
        <property>
                <name>hbase.cluster.distributed</name>
                <!-- 是否分布式部署 -->
               <value>true</value>
        </property>
        <property>
               <name>hbase.master</name>
             <value>master:60000</value>
        </property>
        <property>
               <name>hbase.zookeeper.quorum</name>
                <!-- list of  zookooper -->
             <value>master,base0186,base0185,base0184,base0183</value>
        </property>    
        <property>
                <!--zookooper配置、日志等的存储位置 -->
                <name>hbase.zookeeper.property.dataDir</name>
                <value>/opt/hbase/zookeeper</value>
        </property>
</configuration>

2.4,修改regionservers,跟hadoop配置文件相似,增加节点hostname

[hadoop@master conf]$ cat regionservers 
base0183
base0184
base0185
base0186

2.5,修改环境变量vi .bash_profile

export HBASE_HOME=/opt/hbase/hbase-1.2.6
export PATH=$JAVA_HOME/bin:$PATH:$HADOOP_HOME/bin:$HIVE_HOME/bin:$HBASE_HOME/bin

source .bash_profile

2.6,同步hbase安装文件,环境变量.bash_profile文件到各个slave节点

scp -r /opt/hbase/hbase-1.2.6  hadoop@base0186:/opt/hbase/
scp -r /opt/hbase/hbase-1.2.6  hadoop@base0185:/opt/hbase/
scp -r /opt/hbase/hbase-1.2.6  hadoop@base0184:/opt/hbase/
scp -r /opt/hbase/hbase-1.2.6  hadoop@base0183:/opt/hbase/

2.7,启动hbase

start-hbase.sh

[hadoop@master conf]$ start-hbase.sh 
master: starting zookeeper, logging to /opt/hbase/hbase-1.2.6/bin/../logs/hbase-hadoop-zookeeper-master.out
base0183: starting zookeeper, logging to /opt/hbase/hbase-1.2.6/bin/../logs/hbase-hadoop-zookeeper-base0183.out
base0186: starting zookeeper, logging to /opt/hbase/hbase-1.2.6/bin/../logs/hbase-hadoop-zookeeper-base0186.out
base0185: starting zookeeper, logging to /opt/hbase/hbase-1.2.6/bin/../logs/hbase-hadoop-zookeeper-base0185.out
base0184: starting zookeeper, logging to /opt/hbase/hbase-1.2.6/bin/../logs/hbase-hadoop-zookeeper-base0184.out
starting master, logging to /opt/hbase/hbase-1.2.6/logs/hbase-hadoop-master-master.out
Java HotSpot(TM) 64-Bit Server VM warning: ignoring option PermSize=128m; support was removed in 8.0
Java HotSpot(TM) 64-Bit Server VM warning: ignoring option MaxPermSize=128m; support was removed in 8.0
base0184: starting regionserver, logging to /opt/hbase/hbase-1.2.6/bin/../logs/hbase-hadoop-regionserver-base0184.out
base0186: starting regionserver, logging to /opt/hbase/hbase-1.2.6/bin/../logs/hbase-hadoop-regionserver-base0186.out
base0183: starting regionserver, logging to /opt/hbase/hbase-1.2.6/bin/../logs/hbase-hadoop-regionserver-base0183.out
base0185: starting regionserver, logging to /opt/hbase/hbase-1.2.6/bin/../logs/hbase-hadoop-regionserver-base0185.out
base0184: Java HotSpot(TM) 64-Bit Server VM warning: ignoring option PermSize=128m; support was removed in 8.0
base0184: Java HotSpot(TM) 64-Bit Server VM warning: ignoring option MaxPermSize=128m; support was removed in 8.0
base0186: Java HotSpot(TM) 64-Bit Server VM warning: ignoring option PermSize=128m; support was removed in 8.0
base0186: Java HotSpot(TM) 64-Bit Server VM warning: ignoring option MaxPermSize=128m; support was removed in 8.0
base0183: Java HotSpot(TM) 64-Bit Server VM warning: ignoring option PermSize=128m; support was removed in 8.0
base0183: Java HotSpot(TM) 64-Bit Server VM warning: ignoring option MaxPermSize=128m; support was removed in 8.0
base0185: Java HotSpot(TM) 64-Bit Server VM warning: ignoring option PermSize=128m; support was removed in 8.0
base0185: Java HotSpot(TM) 64-Bit Server VM warning: ignoring option MaxPermSize=128m; support was removed in 8.0
[hadoop@master conf]$ jps
3249 SecondaryNameNode
29221 HQuorumPeer
2441 NameNode
29338 HMaster
3514 ResourceManager
29677 Jps
[hadoop@master conf]$

2.8,通过web访问http://10.1.88.187:16010/master-status



ε≡٩(๑>₃<)۶ 日月同心



您可能感兴趣的与本文相关的镜像

Stable-Diffusion-3.5

Stable-Diffusion-3.5

图片生成
Stable-Diffusion

Stable Diffusion 3.5 (SD 3.5) 是由 Stability AI 推出的新一代文本到图像生成模型,相比 3.0 版本,它提升了图像质量、运行速度和硬件效率

### 兼容性 HBase 1.2.6 与 Hadoop 2.6.0 通常是兼容的。HBase 1.2.x 系列在设计和开发时考虑了与 Hadoop 2.x 系列的兼容性,Hadoop 2.6.0 属于 Hadoop 2.x 范畴,所以两者能够配合使用。不过在实际使用中,由于不同的环境和配置可能会导致一些潜在的兼容性问题,但大多数情况下可以稳定运行。 ### 使用注意事项 - **版本一致性**:虽然理论上兼容,但在部署时要确保 HBase 和 Hadoop 各组件的版本一致,避免出现版本差异带来的问题。 - **资源管理**:HBase 运行在 Hadoop 之上,需要合理分配 Hadoop 集群的资源,避免资源竞争导致性能下降。例如,要关注 HDFS 的存储容量和 YARN 的资源调度。 - **数据一致性**:HBase 依赖 HDFS 存储数据,要确保 HDFS 的稳定性和数据一致性,防止数据丢失或损坏影响 HBase 的正常使用。 ### 相关配置 #### HBase 配置文件(hbase-site.xml) 以下是一些常见的配置示例,可根据实际情况修改: ```xml <configuration> <property> <name>hbase.tmp.dir</name> <value>/usr/local/hbase/hbaseData</value> </property> <property> <name>hbase.rootdir</name> <value>hdfs://localhost:9000/hbase</value> </property> <property> <name>hbase.zookeeper.quorum</name> <value>localhost</value> </property> </configuration> ``` 这里 `hbase.tmp.dir` 是 HBase 临时数据存储目录;`hbase.rootdir` 是 HBase 数据在 HDFS 上的根目录;`hbase.zookeeper.quorum` 是 Zookeeper 集群的地址。 #### Hadoop 配置文件 确保 Hadoop 的核心配置文件 `core-site.xml` 中配置了 HDFS 的地址: ```xml <configuration> <property> <name>fs.defaultFS</name> <value>hdfs://localhost:9000</value> </property> </configuration> ```
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值