Hadoop+Hbase+Zookeeper安装

本文介绍如何在多台服务器上部署Hadoop、HBase及ZooKeeper集群,包括配置hbase-site.xml、regionserver及hbase-env.sh文件等关键步骤。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

一:安装前准备:

下载相应的软件,软件地址如下:

hadoop的下载地址http://archive.apache.org/dist/hadoop/common/

hbase的下载地址:http://archive.apache.org/dist/hbase/

zookeeper的下载地址:http://archive.apache.org/dist/hadoop/zookeeper/

可以先将我hbase和zookeeper在master机器上安装好,然后使用scp -r  远程拷贝的命令将安装完成的文件夹一并拷贝过去。

服务器情况:

  1. 192.168.8.110  m  (用于集群主机提供hmaster namenode jobtasker服务 )  
  2. 192.168.8.111  s1      (用于集群丛机提供regionsrever datanode  tasktacuter服务)  
  3. 192.168.8.112  s2 

安装hadoop:参见http://blog.youkuaiyun.com/supingemail/article/details/8835743 ,不多说了。

另外:版本不同、可能使用也不相同,请大家选择适当的版本。


二:安装hbase:

主要是要修改hbase下的hbase-site.xml、regionserver和hbase-env.sh 这三个文件


1.hbase-site.xml配置文件,详细如下: 

  1. <property> 
  2. <name>hbase.rootdir</name> 
  3. <value>hdfs://m:9000/hbase</value> 
  4. </property> 
  5. <property> 
  6. <name>hbase.cluster.distributed</name> 
  7. <value>true</value> 
  8. </property> 
  9. <property> 
  10. <name>hbase.master</name> 
  11. <value>m</value> 
  12. </property> 
  13. <property> 
  14. <name>hbase.zookeeper.quorum</name> 
  15. <value>m,s1,s2</value> 
  16. </property> 
  17. <property> 
  18. <name>zookeeper.session.timeout</name> 
  19. <value>60000000</value> 
  20. </property> 
  21. <property> 
  22. <name>hbase.zookeeper.property.clientport</name> 
  23. <value>2222</value> 
  24. </property> 


2、编辑regionserver文件

   S1 

   S2

3、编辑hbase-env.xml文件 

  1. export JAVA_HOME=/usr/java/jdk1.6.0_26/  
  2. export CLASSPATH=$CLASSPATH:$JAVA_HOME/lib:$JAVA_HOME/jre/lib  
  3. export PATH=$JAVA_HOME/bin:$PATH:$CATALINA_HOME/bin  
  4. export HADOOP_HOME=/home/hadoop/hadoop  
  5. export HBASE_HOME=/home/hadoop/hbase  
  6. export HBASE_MANAGES_ZK=true 
  7. export PATH=$PATH:/home/hadoop/hbase/bin  

4、文件远程拷贝:

scp -r /home/hadoop/hbase     s1:/home/hadoop 

     scp -r /home/hadoop/hbase    s2:/home/hadoop



三:zookeeper安装:

1.进入/home/hadoop/zookeeper/conf/中

(1)cp    zoo_sample.cfg    zoo.cfg

(2)vim zoo.cfg,如下: 

  1. # The number of milliseconds of each tick  
  2. tickTime=2000 
  3. # The number of ticks that the initial  
  4. # synchronization phase can take  
  5. initLimit=10 
  6. # The number of ticks that can pass between  
  7. # sending a request and getting an acknowledgement  
  8. syncLimit=5 
  9. # the directory where the snapshot is stored.  
  10. dataDir=/home/hadoop/zookeeper/data  
  11. # the port at which the clients will connect  
  12. clientPort=2181
  13. server.1=s1:2888:3888  
  14. server.2=s2:2888:3888  
  15. server.3=m.2888:3888

四:验证:

在m上输入jps看看相关的进程就可以来检测是否安装成功了.(略)。


相关资料

http://wenku.baidu.com/view/991258e881c758f5f61f67cc.html

http://www.linuxidc.com/Linux/2012-01/52225.htm


评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值