hbase完全分布式安装与配置

本文档详细介绍了在2个节点上进行HBase完全分布式安装的步骤,包括环境准备、先决条件(已安装hadoop和ZooKeeper)、HBase的下载与配置、修改hbase-env.sh文件,以及启动和测试过程。在测试环节,提到了启动和停止的顺序,以及解决可能出现的问题,如从节点HRegionServer未启动和HBase shell提示问题。

1.环境说明

hbase 完全分布式安装,2个节点,分别为:
192.168.1.67 MasterServer (作为hbase的master和regionserver节点[可选])
192.168.1.241 SlaveServer  (作为hbase的regionserver节点)

2.先决条件
安装hadoop,具体安装见:http://blog.youkuaiyun.com/hwwn2009/article/details/39889465

安装zookeeper,因为要使用独立的zookeeper集群,具体安装见:http://blog.youkuaiyun.com/hwwn2009/article/details/40000881


3.安装Hbase

1)下载,注意要与hadoop版本兼容,且选择稳定版较好

wget http://mirrors.hust.edu.cn/apache/hbase/hbase-0.98.5/hbase-0.98.5-hadoop2-bin.tar.gz
2)解压

tar -zxvf hbase-0.98.5-hadoop2-bin.tar.gz 
3)修改conf/hbase-site.xml文件

<property>
  <name>hbase.rootdir</name>
  <value>hdfs://MasterServer:9000/hbase</value>
 </property>
 <property>
   <name>hbase.cluster.distributed</name>
   <value>true</value> 
 </property>
 <property>
   <name>hbase.master</name>
   <value>hdfs://MasterServer:60000</value>
 </property>
 <property>
   <name>hbase.zookeeper.quorum</name>
   <value>MasterServer,SlaveServer</value> 
 </property>
4)修改conf/regionservers文件

MasterServer
SlaveServer
注:如果不想将MasterServer作为HRegionServer,就去掉 Ma
Hbase安装配置 1、前提:要有装好的hdfs分布式文件系统和zookeeper集群 2、各台linux机器上传hbase安装包:hbase-0.98.12.1-hadoop2-bin.tar.gz 3、解压jar包:tar -zxvf hbase-0.98.12.1-hadoop2-bin.tar.gz 4、把hadoop的hdfs-site.xml和core-site.xml 放到hbase/conf下: cd root/hadoop/etc/hadoop scp -r hdfs-site.xml /root/hbase-0.98.12.1-hadoop2/conf/ scp -r core-site.xml /root/hbase-0.98.12.1-hadoop2/conf/ 4、配置hbase集群,要修改3个文件(首先zk集群已经安装好了) 5、修改hbase-env.sh export JAVA_HOME=/usr/java/jdk1.7.0_xxx (1)、告诉hbase使用外部的zk export HBASE_MANAGES_ZK=false 6、修改vim hbase-site.xml <property> <name>hbase.rootdir</name> <value>hdfs://namenade/hbase</value>//this is your real nodename. </property> <property> <name>hbase.zookeeper.property.dataDir</name> <value>/opt/zookeeper</value> </property> <property> <name>hbase.cluster.distributed</name> <value>true</value> </property> <property> <name>hbase.zookeeper.quorum</name> <value>node11,node12,node13</value> </property> 7、修改vim regionservers (指定regionserver) Node11 node12 node13 8、指定 standby 的hbase的副节点,注意:该文件存在,需要创建 vim backup-masters Node12 9、拷贝hbase到其他节点或机器 Cd /root/hbase-0.98.12.1-hadoop2 scp -r conf node12:/root/hbase-0.98.12.1-hadoop2/ scp -r conf node13:/root/hbase-0.98.12.1-hadoop2/ 10、设置私钥并同步时间。 11、启动所有的hbase (1)、分别启动zk /home/zookeeper-xxx/bin/./zkServer.sh start (2)、启动hdfs集群 /root/hadoop/sbin/./start-dfs.sh (3)、启动hbase,在主节点运行: /root/hbase-0.98.12.1-hadoop2/bin/./start-hbase.sh 12、通过浏览器访问hbase管理页面 Node11:60010 Node12:60010 Node11:50070 Node12:50070 13、为保证集群的可靠性,要启动多个HMaster hbase-daemon.sh start master
HBase是一种分布式、面向列的NoSQL数据库,通常运行Hadoop HDFS之上。为了实现高可用性和扩展性,HBase可以采用完全分布式安装配置。以下是HBase完全分布式安装配置的步骤: ### 1. 环境准备 确保所有节点上都安装了Java和Hadoop,并且Hadoop集群已经正常运行。 ### 2. 下载HBase 从Apache HBase官方网站下载最新版本的HBase。 ```bash wget https://downloads.apache.org/hbase/stable/hbase-<version>-bin.tar.gz ``` ### 3. 解压HBase 将下载的HBase压缩包解压到指定目录。 ```bash tar -zxvf hbase-<version>-bin.tar.gz ``` ### 4. 配置环境变量 编辑`~/.bashrc`文件,添加HBase的环境变量。 ```bash export HBASE_HOME=/path/to/hbase export PATH=$PATH:$HBASE_HOME/bin ``` ### 5. 配置HBase 进入HBase的`conf`目录,编辑`hbase-site.xml`文件,添加以下配置: ```xml <configuration> <property> <name>hbase.rootdir</name> <value>hdfs://namenode:9000/hbase</value> </property> <property> <name>hbase.cluster.distributed</name> <value>true</value> </property> <property> <name>hbase.zookeeper.quorum</name> <value>zk1,zk2,zk3</value> </property> <property> <name>hbase.zookeeper.property.dataDir</name> <value>/path/to/zookeeper/data</value> </property> </configuration> ``` ### 6. 配置regionservers文件 在`conf`目录下,编辑`regionservers`文件,添加所有RegionServer节点的主机名。 ``` regionserver1 regionserver2 regionserver3 ``` ### 7. 启动HBase 在主节点运行以下命令启动HBase: ```bash start-hbase.sh ``` ### 8. 验证安装 通过访问HBase的Web界面(默认端口为16010)来验证安装是否成功。 ```bash http://<master-node>:16010 ``` ### 9. 测试HBase 进入HBase Shell,创建一个表并插入一些数据来测试HBase是否正常工作。 ```bash hbase shell ``` ```shell create 'test', 'cf' put 'test', 'row1', 'cf:col1', 'value1' get 'test', 'row1' ``` ### 10. 停止HBase 在主节点运行以下命令停止HBase: ```bash stop-hbase.sh ```
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值