Hbase安装&连接Hive

本文档详细介绍了如何安装Hbase,包括下载解压、配置环境、启动关闭流程,以及如何连接Hive,涉及hbase-env.sh、hbase-site.xml、hive-site.xml的修改和jar包导入。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

一、下载以及解压

        下载Hbase的安装包,解压到需要的文件夹。

二、配置hbase

        打开hbase根目录下conf目录

        1.修改hbase-env.sh

        首先打开配置文件

vim ./hbase-env.sh

        修改内容如下

28 export JAVA_HOME=/opt/software/jdk180
126 export HBASE_MANAGES_ZK=false

         2.修改hbase-site.xml

        打开配置文件

vim ./hbase-site.xml

        修改内容如下

  <property>
     <name>hbase.rootdir</name>
     <value>hdfs://192.168.43.40:9000/hbase</value>
   </property>
   <property>
     <name>hbase.zookeeper.property.dataDir</name>
     <value>/opt/software/zk345/datatmp</value>
   </property>
   <property>
     <name>hbase.cluster.distributed</name>
     <value>true</value>
   </property>
   <property>
     <name>hbase.zookeeper.property.clientPort</name>
     <value>2181</value>
   </property>
   <property>
     <name>hbase.tmp.dir</name>
     <value>/opt/software/hbase235/tmp</value>
   </property>
   <property>
     <name>hbase.unsafe.stream.capability.enforce</name>
     <value>false</value>
   </property>

        3.配置环境变量

        打开配置文件

vim /etc/profile

        加入以下内容

export HBASE_HOME=/opt/software/hbase235
export PATH=$PATH:$HBASE_HOME/bin

三、Hbase启动顺序

        启动hbase步骤:
        1,启动hadoop: start-all.sh
        2.启动zk:     zkServer.sh start
        3.启hbase:    start-hbase.sh
        看到以下两个服务,启动成功
        8556 HMaster
        8765 HRegionServer

四、Hbase的基本指令

        启动Hbase

[root@alcaibur conf]# hbase shell

        Hbase相关指令

hbase(main):001:0> version
hbase(main):002:0> list_namespace  查看命名空间
hbase(main):003:0> list_namespace_tables 'default'  查看命名空间下的表
hbase(main):005:0> create_namespace 'kb21'
hbase(main):007:0> drop_namespace 'kb21'

五、Hbase关闭顺序

[root@alcaibur conf]# stop-hbase.sh
[root@alcaibur conf]# zkServer.sh stop
[root@alcaibur conf]# stop-all.sh

六、Hbase链接HIVE

        1.修改hive的hive-site.xml

        在其中加入以下参数,注意value值根据需求修改

<property>
<name>hive.zookeeper.com.quorum</name>
<value>192.168.43.40</value>
</property>

<property>
<name>hbase.zookeeper.com.quorum</name>
<value>192.168.43.40</value>
</property>
<property>
<name>hive.aux.jars.path</name>
<value>file:///opt/software/hive312/lib/hive-hbase-handler-3.1.2.jar,file:///opt/software/hive312/lib/zookeeper-3.4.6.jar,file:///opt/software/hive312/lib/hbase-client-2.3.5.jar,file:///opt/software/hive312/lib/hbase-common-2.3.5-tests.jar,file:///opt/software/hive312/lib/hbase-server-2.3.5.jar,file:///opt/software/hive312/lib/hbase-common-2.3.5.jar,file:///opt/software/hive312/lib/hbase-protocol-2.3.5.jarfile:///opt/software/hive312/lib/htrace-core-3.2.0-incubating.jar</value>
</property>

        2.导入jar包

cp /opt/software/hbase/lib/* /opt/software/hive/lib

Hbase安装与配置 1、前提:要有装好的hdfs分布式文件系统和zookeeper集群 2、各台linux机器上传hbase安装包:hbase-0.98.12.1-hadoop2-bin.tar.gz 3、解压jar包:tar -zxvf hbase-0.98.12.1-hadoop2-bin.tar.gz 4、把hadoop的hdfs-site.xml和core-site.xml 放到hbase/conf下: cd root/hadoop/etc/hadoop scp -r hdfs-site.xml /root/hbase-0.98.12.1-hadoop2/conf/ scp -r core-site.xml /root/hbase-0.98.12.1-hadoop2/conf/ 4、配置hbase集群,要修改3个文件(首先zk集群已经安装好了) 5、修改hbase-env.sh export JAVA_HOME=/usr/java/jdk1.7.0_xxx (1)、告诉hbase使用外部的zk export HBASE_MANAGES_ZK=false 6、修改vim hbase-site.xml &lt;property&gt; &lt;name&gt;hbase.rootdir&lt;/name&gt; &lt;value&gt;hdfs://namenade/hbase&lt;/value&gt;//this is your real nodename. &lt;/property&gt; &lt;property&gt; &lt;name&gt;hbase.zookeeper.property.dataDir&lt;/name&gt; &lt;value&gt;/opt/zookeeper&lt;/value&gt; &lt;/property&gt; &lt;property&gt; &lt;name&gt;hbase.cluster.distributed&lt;/name&gt; &lt;value&gt;true&lt;/value&gt; &lt;/property&gt; &lt;property&gt; &lt;name&gt;hbase.zookeeper.quorum&lt;/name&gt; &lt;value&gt;node11,node12,node13&lt;/value&gt; &lt;/property&gt; 7、修改vim regionservers (指定regionserver) Node11 node12 node13 8、指定 standby 的hbase的副节点,注意:该文件不存在,需要创建 vim backup-masters Node12 9、拷贝hbase到其他节点或机器 Cd /root/hbase-0.98.12.1-hadoop2 scp -r conf node12:/root/hbase-0.98.12.1-hadoop2/ scp -r conf node13:/root/hbase-0.98.12.1-hadoop2/ 10、设置私钥并同步时间。 11、启动所有的hbase (1)、分别启动zk /home/zookeeper-xxx/bin/./zkServer.sh start (2)、启动hdfs集群 /root/hadoop/sbin/./start-dfs.sh (3)、启动hbase,在主节点上运行: /root/hbase-0.98.12.1-hadoop2/bin/./start-hbase.sh 12、通过浏览器访问hbase管理页面 Node11:60010 Node12:60010 Node11:50070 Node12:50070 13、为保证集群的可靠性,要启动多个HMaster hbase-daemon.sh start master
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值