hadoop学习笔记(十)——hadoop + hbase + zookeeper

注：hadoop2.5.2 + hbase1.1.2 + zookeeper3.4.6

1) hadoop安装

参考之前hadoop的安装步骤。
[http://blog.youkuaiyun.com/thinkpadshi/article/details/45720405]

2) zookeeper安装

a) 下载最新的稳定版本zookeeper-3.4.6.tar

b) 在/usr/local下解压，与hadoop处于同一目录级别

# tar –xzvf zookeeper-3.4.6.tar.gz
# mv zookeeper-3.4.6 zk3.4.6

c) 编辑zoo.cfg文件

# cd conf
# cp zoo_sample.cfg zoo.cfg

[root@master zk3.4.6]# mkdir data

# vim zoo.cfg
dataDir=/usr/local/zk3.4.6/data
server.1=master:2888:3888  
server.2=slave1:2888:3888  
server.3=slave2:2888:3888
// server.X=A:B:C
其中X是一个数字,表示这是第几号server.
A是该server所在的IP地址.
B配置该server和集群中leader交换消息所使用的端口.
C配置选举leader时所使用的端口

d) 把zookeeper远程拷贝至其他datanode节点

[root@master local]# scp -r zk3.4.6 slave1:/usr/local
[root@master local]# scp -r zk3.4.6 slave2:/usr/local

e) 分别在各节点的/zk3.4.6/data目录下创建myid文件，分别写入对应的server.n中的n值，如下：

[root@master local]# echo 1 > zk3.4.6/data/myid
[root@master local]# echo 2 > zk3.4.6/data/myid
[root@master local]# echo 3 > zk3.4.6/data/myid

f) 启动hadoop

g) 分别在每一个节点上启动zk

[root@master bin]# zkServer.sh start

h) 在每个节点上检验zk是否启动成功

[root@master bin]# zkServer.sh status
如果出现以下情况，则表示启动成功
JMX enabled by default
Using config: /usr/local/zk3.4.6/bin/../conf/zoo.cfg
Mode: follower/leader

i) 关闭每个节点上的zk

[root@master bin]# zkServer.sh stop

3) hbase安装

a) 下载最新的稳定版本hbase-1.1.2-bin.tar

b) 在/usr/local下解压，与hadoop处于同一目录级别

[root@master local]# tar -xzvf hbase-1.1.2-bin.tar.gz
[root@master local]# mv hbase-1.1.2 hbase1.1.2

c) 编辑hbase-env.sh

编辑如下内容：
export JAVA_HOME=/usr/local/jdk1.7  
export HBASE_MANAGES_ZK=false

d) 编辑hbase-site.xml文件

<configuration>
    <property> 
        <name>hbase.rootdir</name> 
        <value>hdfs://master:9000/hbase</value> 
    </property> 
    <property> 
        <name>hbase.cluster.distributed</name> 
        <value>true</value> 
    </property>
    <property>
        <name>hbase.zookeeper.quorum</name>
        <value>master,slave1,slave2</value>
    </property>
    <property>
        <name>hbase.zookeeper.property.dataDir</name>
        <value>/usr/local/zk3.4.6/data</value>
    </property>
</configuration>

e) 编辑regionservers文件

master
slave1
slave2

f) 把Hbase复制到其他机器

[root@master local]# scp -r hbase1.1.2 slave1:/usr/local
[root@master local]# scp -r hbase1.1.2 slave2:/usr/local

g) 启动hase

[root@master bin]# start-hbase.sh

h) 检查启动是否成功

[root@master bin]# jps
……
4209 HRegionServer
4070 Hmaster
……

[root@slave1 bin]# jps
……
3771 HRegionServer
……

http://master:16030

i) 关闭hbase

[root@master bin]# stop-hbase.sh

4) 启动顺序

a) 启动hadoop
b) 启动zookeeper
c) 启动hbase
d) 关闭hbase
e) 关闭zookeeper
f) 关闭hadoop