HBase学习 -安装Hbase（2）

最新推荐文章于 2023-12-12 19:49:21 发布
最新推荐文章于 2023-12-12 19:49:21 发布
阅读量630 收藏 5
点赞数 1
CC 4.0 BY-SA版权
分类专栏： # HBase
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/yiguang_820/article/details/88586917
本文详细介绍HBase的多种安装模式，包括独立式、独立于HDFS、伪分布式及完全分布式安装过程。涵盖从环境搭建、配置修改到启动验证的全部步骤，适合初学者和进阶用户。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

目录：

  1. 安装模式
    1. 独立式HBase安装                （使用自带的Zookeeper）
    2. 独立于HDFS的HBase安装    （使用自带的Zookeeper）
    3. 伪分布式HBase安装            （使用自带的Zookeeper）
    4. 伪分布式HBase安装            （不使用自带的Zookeeper）
    5. 完全分布式安装                     （不使用自带的Zookeeper）
  2. 安装步骤：
    注意：各版本之间的兼容
    1. 基本环境：
      1. Ubuntu15.10或者 centOS
      2. jdk1.7
    2. 安装并启动基础条件，比如：Hadoop-2.7.3、Zookeeper-3.4.10
    3. 安装HBase-1.2.6
      1. 下载、上传、解压
      2. 配置环境变量
      3. 配置HBase
      4. 启动HBase
      5. 验证：HBase Web界面： 
        http://localhost:60010

一.独立式HBase安装

详细步骤：

  1. 前提条件：安装 jdk
  2. 安装HBase
    1. 上传、解压 
      第一步：上传到home目录下安装
第二步：解压命令： tar -zxvf hbase-1.2.6-bin.tar.gz -C /home
    2. 配置环境变量，将bin目录添加到PATH路径下
      # vi /etc/profile
      在最后添加两行 
      HBASE_HOME=/home/hbase-1.2.6
PATH=$PATH:$HBASE_HOME/bin
      让其生效 
      #source /etc/profile
    3. 配置HBase
      1. 第一步：配置 hbase-env.sh，让HBase关联jdk，并使用自带的zookeeper
        # cd /home/hbase-1.2.6/
        # vi conf/hbase-env.sh 
        export JAVA_HOME=/home/jdk1.7.0_80
#默认为true，不添加此行也可以，当不使用自带的Zookeeper，改为false即可
export HBASE_MANAGES_ZK=true
      2. 第二步：配置hbase-site.xml 
        # mkdir /home/hbase-1.2.6/data
        # vim conf/hbase-site.xml  
        <configuration>
  <property>
    <name>hbase.rootdir</name>
    <value>file:///tmp/hbase/data</value>
    <!--hbase.rootdir是指定HRegion服务器的位置，即数据存放的位置-->
  </property>
  <property>
    <name>hbase.zookeeper.property.dataDir</name>
    <value>/home/hbase-1.2.6/data/zookeeper</value>
    <!--hbase zookeeper数据存储地址-->
  </property>
  <property>
    <name>hbase.cluster.distributed</name>
    <value>false</value>
    <!--hbase.cluster.distributed是设置HBase的运行模式，
    false是单机模式，true是分布式模式，默认为false。
    如果是false, HBase和Zookeeper会运行在同一个JVM里面。-->
  </property>
</configuration>
    4. 启动HBase
      执行bin目录下的start-hbase.sh就可以启动hbase，因为配置了HBase环境变量，在任意目录执行start-hbase.sh都可以启动hbase，以下操作同理 
      启动：
start-hbase.sh

验证:用jps指令查看，可以看到有HMaster程序：
jps

进入HBase Shell模式：运行bin目录下的hbase shell可进入HBase Shell：
bin/hbase shell

关闭：
stop-hbase.sh

 

二.独立于HDFS的HBase

简要步骤：

  1. 前提条件：安装jdk 、Hadoop
  2. 安装HBase（使用自带的Zookeeper）：和 【独立式HBase安装】相比，除了需要提前安装Hadoop外，仅仅hbase-site.xml有所差别 
    <configuration>
  <property>
    <name>hbase.rootdir</name>
    <value>hdfs://192.168.200.10:9000/hbase</value>
    <!--hbase.rootdir是数据存放的位置，这里换成hadoop中hdfs上的位置
        注意：注意9000的端口要跟hadoop安装目录/etc/hadoop/core-site.xml中的端口号一样
    -->
  </property>
  <property>
    <name>hbase.zookeeper.property.dataDir</name>
    <value>/home/hbase-1.2.6/data/zookeeper</value>
    <!--hbase zookeeper数据存储地址-->
  </property>
  <property>
    <name>hbase.cluster.distributed</name>
    <value>false</value>
    <!--hbase.cluster.distributed是设置HBase的运行模式，
    false是单机模式，true是分布式模式，默认为false。
    如果是false, HBase和Zookeeper会运行在同一个JVM里面。-->
  </property>
</configuration>
  3. 启动
    先启动Hadoop：start-all.sh
    启动HBase：start-hbase.sh

 

三.伪分布式HBase（使用自带的zookeeper）

简要步骤：

  1. 前提条件：安装jkd、Hadoop
  2. 安装HBase（使用自带的Zookeeper）：和 【独立式HBase安装】相比，除了需要提前安装Hadoop外，仅仅hbase-site.xml有所差别 
    <configuration>
  <property>
    <name>hbase.rootdir</name>
    <value>hdfs://192.168.200.10:9000/hbase</value>
    <!--hbase.rootdir是数据存放的位置，这里换成hadoop中hdfs上的位置
        注意：注意9000的端口要跟hadoop安装目录/etc/hadoop/core-site.xml中的端口号一样
    -->
  </property>
  <property>
    <name>hbase.zookeeper.property.dataDir</name>
    <value>/home/hbase-1.2.6/data/zookeeper</value>
    <!--hbase zookeeper数据存储地址-->
  </property>
  <property>
    <name>hbase.cluster.distributed</name>
    <value>ture</value>
    <!--hbase.cluster.distributed是设置HBase的运行模式，
    false是单机模式，true是分布式模式，默认为false。
    如果是false, HBase和Zookeeper会运行在同一个JVM里面。-->
  </property>
</configuration>
  3. 启动
    先启动Hadoop：start-all.sh
    启动HBase：start-hbase.sh
  4. HBase Web界面访问
    注意：需要关闭liunx、windows的防火墙
    可以在web端看到hbase的相关信息，在单机上部署，输入网址：http://192.168.200.10:16010 （注意：192.168.200.10是安装hbase的虚拟机ip） 即可看到，注意端口号默认为16010
  5. 进入hbase shell中，开启hbase的基本操作 
    进入shell模式：
#bin/hbase shell

查看HBase状态：
status

创建新表
create 'test', 'cf'
第一个参数是表的名字，第二个是列族的名字。不需要定义列，因为列是可以动态增加的

     

四.伪分布式HBase（不使用自带的zookeeper）

详细步骤：

  1. 前提条件：安装jdk、Hadoop、zookeeper单机即可
  2. 安装HBase
    1. 下载
    2. 上传
    3. 解压
    4. 配置环境变量
    5. 配置
      1. hbase-env.sh 
        export JAVA_HOME=/home/jdk1.7.0_80
#默认为true，不添加此行也可以，当不使用自带的Zookeeper，改为false即可
export HBASE_MANAGES_ZK=false
      2. hbase-site.xml 
        <configuration>
<property>
    <name>hbase.rootdir</name>
    <value>hdfs://localhost:9000/hbase</value>
  </property>
  <!--
    可以不配置，如果要配置，需要和zookeeper配置文件zoo.cfg中的dataDir指定的路径相同
    zoo.cfg中dataDir=/home/zookeeper-3.4.10/data1
  -->
  <property>
    <name>hbase.zookeeper.property.dataDir</name>
    <value>/home/zookeeper-3.4.10/data1</value>
  </property>
  <property>
    <name>hbase.cluster.distributed</name>
    <value>true</value>
  </property>

  <!--如果是zookeeper单机-->
  <property>
    <name>hbase.zookeeper.quorum</name>
    <value>localhost</value>
  </property>
  <property>
    <name>hbase.zookeeper.property.clientPort</name>
    <value>2181</value>
  </property>

  
  <!--如果是zookeeper伪分布式-->
  <!--指定zookeeper集群-->
  <!--
  <property>
    <name>hbase.zookeeper.quorum</name>
    <value>localhost：2181，localhost：2182，localhost：2183</value>
    <!--如果配置了ip映射主机名，可以是<value>kd01,kd02,kd03</value> 
  </property>
  -->
</configuration>
    6. 启动
      1. 先启动Hadoop、zookeeper
      2. 再启动hbase
    7. web访问

 

四.完全分布式

可参考博客：hbase集群安装

简要条件：

  1. 前提条件：安装jdk、Hadoop分布式、Zookeeper分布式
  2. 安装HBase：和 【独立式HBase安装】相比，除了需要提前安装Hadoop集群和zookeeper集群外，还有如下配置文件有所差别
    1. hadoop集群安装教程
    2. zookeeper集群安装教程：zookeeper集群安装教程
    3. 修改hbase-env.sh配置文件 
      export JAVA_HOME=/home/jdk1.7.0_80
#默认为true，不添加此行也可以，当不使用自带的Zookeeper，改为false即可
export HBASE_MANAGES_ZK=false
    4. 修改hbase-site.xml配置文件 
      <configuration>
<property>
    <name>hbase.rootdir</name>
    <value>hdfs://localhost:9000/hbase</value>
  </property>
  <!--
    可以不配置，如果要配置，需要和zookeeper配置文件zoo.cfg中的dataDir指定的路径相同
    zoo.cfg中dataDir=/home/zookeeper-3.4.10/data1
  -->
  <property>
    <name>hbase.zookeeper.property.dataDir</name>
    <value>/home/zookeeper-3.4.10/data1</value>
  </property>
  <property>
    <name>hbase.cluster.distributed</name>
    <value>true</value>
  </property>

  <!--如果是zookeeper伪分布式-->
  <!--
  <property>
    <name>hbase.zookeeper.quorum</name>
    <value>localhost</value>
  </property>
  <property>
    <name>hbase.zookeeper.property.clientPort</name>
    <value>2181</value>
  </property>
  -->
  
  <!--如果是zookeeper集群-->
  <!--指定zookeeper集群-->
  <property>
    <name>hbase.zookeeper.quorum</name>
    <value>192.168.100.11,192.168.100.12,192.168.100.13</value>
    <!--如果配置了ip映射主机名，可以是<value>kd01,kd02,kd03</value>  -->
  </property>
  <property>
    <name>hbase.zookeeper.property.clientPort</name>
    <value>2181</value>
  </property>
</configuration>
      说明 
      hbase.zookeeper.property.dataDir：hbase zookeeper数据存储地址
hbase.zookeeper.quorum：zookeeper集群的地址
hbase.zookeeper.property.clientPort：zookeeper集群的端口
    5. 新建backup-masters文件，并做修改 
      [root@kd01 conf]$ vi backup-masters

# 添加备用hbase-master
kd02
    6. 修改regionservers配置文件，加入RegionServer节点列表 
      [root@kd01 conf]$ vi regionservers

# 默认有一行localhost，删除
kd01
kd02
kd03
    7. 把hadoop的配置文件core-site.xml和hdfs-site.xml复制到hbase的配置文件目录下
    8. 把hbase安装目录分发给其他节点
  3. 启动
    1. 首先启动zookeeper集群 
      zkServer.sh start
    2. 然后启动HDFS集群 
      start-dfs.sh
    3. 最后启动hbase集群 
      start-hbase.sh
  4. 验证：通过jps查看进程或者访问WEB页面进行验证
  5. HBase如何识别HMaster
    如果不在配置文件(hbase-site)中指定master
    那么在哪台机器上执行./hbase/bin/start-hbase.sh，哪台机器就会被认为是HMaster。
Hbase安装启动时遇到问题
yandao的博客
09-20 1246
Hbase安装启动时遇到无法启动zk端口2181问题 解压、配置完后执行start-hbase.sh后使用jps未看到HMaster： 查看log，提示zk运行的端口应该是2182而不是默认的2181 Could not start ZK at requested port of 2181. ZK was started at port: 2182 根据提示，在hbase-site.xml中增加一条配置信息： <property> <name>hbase.zookeeper
Hbase 集群启动脚本分析
jacknichao的专栏
09-30 1249
说明本文主要分析一下Hbase集群启动过程，只涉及到核心过程，不涉及到具体内容，hbase的版本是hbase-0.94.27.tar整体流程： 运行start-hhbase.sh脚本 执行 $bin/hbase-config.sh 设置配置参数 根据集群启动是否是分布式的模式，在本地仅启动master或者启动整个集群 判断启动模式：重新启动集群(restart)or初次启动集群（start）（缺省：
Hbase2.0完全分布式安装完整版(含报错解决)——Hbase2.1.2
@羲凡—只为更好的活着
01-20 3886
@羲凡——只为了更好的活着 Hbase2.0完全分布式安装完整版——Hbase2.1.2 HBase是一个分布式的、面向列的开源数据库。HBase不同于一般的关系数据库，它是一个适合于非结构化数据存储的数据库，另一个不同的是HBase基于列的而不是基于行的模式。Hbase的安装也很简单，而且Hbase2.0和Hbase1.0以及Hbase0版本安装都非常类似，完全可以套用。此文中选择Hbase2....
Hbase的基本Shell命令
weixin_44695980的博客
07-09 2790
一、启动habse分布式集群 在集群的某个节点启动hbase集群的命令：start-hbase.sh 二、进入hbase的客服端命令： hbase shell 三、hbase基本shell命令： 注意HBase Shell 中的回格键没用，要用【Ctrl+Backspace】，每个命令之后不需要分号(;)结束。 HBase帮助命令：hbase(main):003:0> help ‘creat...
HBASE搭建过程报错解决汇总
weixin_41684423的博客
04-15 8336
错误1： running matser, logging to /opt/hbase-1.6.0/bin/../logs/hbase-jamjar-matser-master.out Error: Could not find or load main class matser 原因&解决：hbase-env.sh 中需要export你的Java路径 错误2： running master, logging to /opt/hbase-1.6.0/bin/../logs/hbase.
【HBase】操作 HBase 的必会命令（图示详解）
A minor
01-27 1763
1.基本命令 启动 HBase：./start-hbase.sh 查看 HBase 是否启动：jps（注：docker 容器内没有该命令） 进入 HBase 的客户端：./hbase shell 2.命名空间 1）创建命名空间 create_namespace '命名空间' 2）查看命名空间 list_nameapce 注：HBase系统默认定义了两个缺省的namespace hbase：系统内建表，包括namespace和meta表 default：用户建表时未指定namesp
HBase（hbase-2.4.9-bin.tar.gz）
01-10
HBase（hbase-2.4.9-bin.tar.gz）是一个分布式的、面向列的开源数据库，该技术来源于 Fay Chang 所撰写的Google论文“Bigtable：一个结构化数据的分布式存储系统”。就像Bigtable利用了Google文件系统（File System...
hbase-2.4.17-bin 安装包
08-28
这个“hbase-2.4.17-bin”安装包提供了HBase的最新稳定版本2.4.17，适用于大数据处理和分析场景。下面将详细介绍HBase的核心概念、安装步骤以及配置和管理。 一、HBase核心概念 1. 表（Table）：HBase中的表是由行...
phoenix-hbase-2.4-5.1.2
03-09
《Phoenix与HBase的深度解析：基于phoenix-hbase-2.4-5.1.2版本》 在大数据处理领域，Apache HBase和Phoenix是两个至关重要的组件。HBase作为一个分布式、列式存储的NoSQL数据库，为海量数据提供了高效、实时的访问...
hbase的hbase-1.2.0-cdh5.14.2.tar.gz资源包
07-14
`hbase-1.2.0-cdh5.14.2.tar.gz` 是针对Cloudera Distribution Including Apache Hadoop (CDH) 5.14.2的一个特定版本的HBase打包文件。CDH是一个流行的Hadoop发行版，包含了多个大数据组件，如HDFS、MapReduce、YARN...
phoenix-hbase-2.2-5.1.2-bin.tar.gz
05-07
`phoenix-hbase-2.2-5.1.2-bin.tar.gz`这个压缩包包含了Phoenix 2.2版本与HBase 5.1.2版本的二进制文件，用户可以解压后在本地或集群环境中安装和运行。安装步骤通常包括配置环境变量、创建HBase和Phoenix的目录结构...
HBase常用Shell命令
热门推荐
qq_43695848的博客
05-23 1万+
在使用具体的Shell命令操作HBase数据之前，需要首先启动Hadoop，然后再启动HBase，并且启动HBase Shell，进入Shell命令提示符状态，具体命令如下： cd /usr/local/hadoop ./sbin/start-dfs.sh cd /usr/local/hbase ./bin/start-hbase.sh ./bin/hbase shell 1.在HBase中创建表 假设这里要创建一个表student，该表包含Sname、Ssex、Sage、Sdept、cours
Hbase的安装和基础编程
半濠春水的博客
05-07 3747
（一）安装Hbase，能够查询Hbase的版本 由于HBase对Hadoop具有版本依赖性，所以在安装HBase2.2.2时要首先安装Hadoop3.1.3。 ①解压hbase-2.2.2-bin.tar.gz文件 压缩格式的文件hbase-2.2.2-bin.tar.gz下载到本地电脑，保存在“/home/hadoop/下载”下，现在解压包装包至路径 /usr/local下。 ②文件改名 将解压的文件名hbase-2.2.2改为hbase以方便使用。 把hbase目录权限赋予给hadoop用户。 .
start-hbase.sh
大JAVA解决方案
02-11 2119
[wangshumin@centoshostnameKL1 conf]$ ll总用量 56-rw-rw-r--. 1 wangshumin wangshumin   18 1月  23 13:10 backup-masters-rw-r--r--. 1 wangshumin wangshumin  974 1月  23 13:02 core-site.xml-rw-r--r--. 1 wangsh...
HBase的常用Shell命令
人在杰途的博客
06-05 1253
注意：在HBase命令窗口中输入命令，如果输入出错，直接使用删除键【delete】是无法删除输入字符的，必须使用【ctrl+delete】组合键才能删除。重点：HBase没有数据库的概念，只有命名空间的概念namespace，相当于库，HBase的表就是组织在命名空间里。创建表时如果没有指明命名空间，则默认该表创建在HBase的默认命名空间‘default’中。设置列族可以设置生存时间（以秒为单位），HBase将在到达到期时间后自动删除该列族。设置查询数据的时间戳区间。设置查询数据的时间戳。
大数据----31.hbase安装启动
最新发布
u014579001的博客
12-12 2302
http://archive.apache.org/dist/hbase/ 下载地址。8. 通过web来访问：http://192.168.64.160:16010/（在一台机器上进行配置；注意：在启动之前需要进行时间的统一；（我们使用的是和主节点的时间同步；3.解压软件：解压到/usr/local/ 文件夹 （在一台机器上）2.启动hbase(在hadoop06上执行) 在主机上启动即可；需要修改的内容：（分别开启他的注释修改内容即可；6.进行hbase的配置文件的修改操作：修改文件。
HBase启动时报错：/bin/java: No such file or directory
han_hhh的博客
12-27 4653
原因是配置环境时 hbase-2.2.2/conf/目录下的hbase-env.sh中JAVA_HOME出错， 可以试着一步步cd，看看是哪里出错了，我是因为粗心没把java的版本号写全 错误如下; /home/han_hhh/hbase-2.2.2/bin/hbase: line 687: /usr/java/jdk1.8.0/bin/java: No such file or directory /home/han_hhh/hbase-2.2.2/bin/hbase: line 687: /usr/
启动hbase（报错：没有那个文件或目录）
weixin_54503172的博客
11-09 5327
然后修改配置文件：hbase-env.sh(文件在hbase-conf目录)发现都是Java没有文件或目录，判断是jdk的路径错误。完成hbase伪分布配置后，启动hbase。更改完成后再次启动hbase即可。将本机的jdk路径写正确。
HBase - 安装过程中的问题
weixin_30765475的博客
10-13 851
问题1：启动时start-hbase.sh 报 权限不够 原因：在移动文件时，使用root用户在/usr/local下创建的hbase，所以hbase文件夹的使用者为root，其他人没权限 解决方案： 　　修改权限 　　查看权限 ： ll /usr/local - 找hbase， 　　修改：sudo chown -R userName（要使用的用户名） hbase（文件名） 问题2...
深入探讨HBase 0.98.1-hadoop2 API及其应用
HBase 0.98.1-hadoop2 API是HBase在与Hadoop 2.x系列集成后推出的版本，它不仅提供了一个稳定的API，还通过与Hadoop的深入集成，使得HBase在处理海量数据时更加高效和稳定。用户可以通过Java客户端API、REST API以及...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值