Hbase的安装以及配置

前置条件
jdk1.8
Hadoop 2.6
Zookeeper 3.4.5

一、安装Zookeeper

单节点zookeeper可以参考
Kafka概述以及安装配置中zookeeper的安装配置
以下介绍多节点的配置
1)下载zookeeper
我们使用的是cdh套件
http://archive.cloudera.com/cdh5/cdh/5/zookeeper-3.4.5-cdh5.15.0.tar.gz
2）解压
我们这里统一解压到同一个目录下
tar -xzvf zookeeper-3.4.5-cdh5.15.0.tar.gz -C /app/cdh
3）配置环境变量
vim /etc/profile
export ZOOKEEPER_HOME=/app/cdh/zookeeper-3.4.5-cdh5.15.0
export PATH=$ZOOKEEPER_HOME/bin:PATH
4) 修改配置文件

# The number of milliseconds of each tick
tickTime=2000
# The number of ticks that the initial 
# synchronization phase can take
initLimit=10
# The number of ticks that can pass between 
# sending a request and getting an acknowledgement
syncLimit=5
# the directory where the snapshot is stored.
# do not use /tmp for storage, /tmp here is just 
# example sakes.
dataDir=/app/tmp/zookeeper
# the port at which the clients will connect
clientPort=2181
# the maximum number of client connections.
# increase this if you need to handle more clients
#maxClientCnxns=60
#
# Be sure to read the maintenance section of the 
# administrator guide before turning on autopurge.
#
# http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
#
# The number of snapshots to retain in dataDir
#autopurge.snapRetainCount=3
# Purge task interval in hours
# Set to "0" to disable auto purge feature
#autopurge.purgeInterval=1
server.1=dev2:2888:3888
server.2=dev3:2888:3888
server.3=dev4:2888:3888

这里的

server.1=dev2:2888:3888
server.2=dev3:2888:3888
server.3=dev4:2888:3888

是集群间互相通信的
然后我们将/app/cdh/zookeeper-3.4.5-cdh5.15.0的zookeeper目录完整scp到其他节点配置好环境变量
另外我们需要在所有节点上创建一下目录：
dataDir=/app/tmp/zookeeper
最后我们还需要做一件事，我们需要在dataDir目录下创建一个myid文件
vim myid
#myid的内容和我们之前的配置是相对应的
#当前机器为dev2，我们之前设置的server.1=dev2:2888:3888 那么myid的内容就是1
#当前机器为dev3，我们之前设置的server.2=dev3:2888:3888 那么myid的内容就是2
#当前机器为dev4，我们之前设置的server.3=dev4:2888:3888 那么myid的内容就是4
5)启动各个节点的zookeeper
由于之前我们配置过环境变量，所以我们直接使用
zkServer.sh start
#$ZOOKEEPER_HOME/bin/zkServer.sh start
如果出现启动不了的情况，记得关闭防火墙，因为防火墙没有关闭。
关闭防火墙：
#查看防火墙状态
sudo service iptables status
#关闭防火墙
sudo service iptables stop
#查看防火墙开机启动状态
sudo chkconfig iptables --list
#关闭防火墙开机启动
sudo chkconfig iptables off

二、Hbase安装

1）Hbase下载
https://archive.cloudera.com/cdh5/cdh/5/hbase-1.2.0-cdh5.15.0.tar.gz
2）解压
tar -xzvf hbase-1.2.0-cdh5.15.0.tar.gz -C /app/cdh
3) 配置环境变量
vim /etc/profile

export HBASE_HOME=/app/cdh/hbase-1.2.0-cdh5.15.0
export PATH=$HBASE_HOME/bin:PATH

source /etc/profile
4) 修改配置文件

vim $HBASE_HOME/conf/hbase-env.sh

export JAVA_HOME=/usr/java/jdk1.8.0_71
#不使用Hbase管理zookeeper,使用集群安装的zookeeper来管理 
export HBASE_MANAGES_ZK=false

vim $HBASE_HOME/conf/hbase-site.xml

<property>    
	<name>hbase.rootdir</name>    
	<value>hdfs://dev2:8020/hbase</value>    
	<description>
	The directory shared by RegionServers.    
	</description>  
</property>
<property>    
	<name>hbase.cluster.distributed</name>    
	<value>true</value>    
	<description>
	The mode the cluster will be in. Possible values are      
	false: standalone and pseudo-distributed setups with managed Zookeeper      
	true: fully-distributed with unmanaged Zookeeper Quorum (see hbase-env.sh)    
	</description>  
</property>

<property>    
	<name>hbase.zookeeper.quorum</name>    
	<value>dev2:2181,dev3:2181,dev4:2181</value>    
	<description>
	The directory shared by RegionServers.    
	</description>  
</property>

hbase.rootdir为hbase的存储根目录，设为hadoopHDFS根目录下的hbase
hbase.cluster.distributed集群分布式模式
hbase.zookeeper.quorum设置zookeeper地址

vim $HBASE_HOME/conf/regionservers

dev2
dev3
dev4

regionservers类似于slaves的配置
5) 启动
将/app/cdh/hbase-1.2.0-cdh5.15.0完全scp到其他节点
配置环境变量后启动hbase
$HBASE_HOME/bin/start-hbase.sh
6) 使用测试
hbase shell

> create 'member','name','gender'
> list #查看所有表

在http://dev2:60010中可以查看到对应的hbase信息