hbase 完全分布式

最新推荐文章于 2025-04-01 19:19:05 发布

JAVA日常笔记精选

最新推荐文章于 2025-04-01 19:19:05 发布

阅读量317

点赞数 1

分类专栏： hbase

本文链接：https://blog.youkuaiyun.com/qq_29082603/article/details/103677377

版权

hbase 专栏收录该内容

9 篇文章

订阅专栏

本文档详细介绍了如何在分布式环境中安装和配置HBase。从安装Hadoop和JDK开始，接着下载并解压HBase安装包，配置环境变量及HBase的相关配置文件。接着在各节点间分发软件，并通过rsync同步环境变量。然后，重启客户端机器以应用环境变量，启动HBase并在Master节点上查看进程。最后，强调了HBase默认使用内置Zookeeper，如需使用外部Zookeeper需调整启动命令属性。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

0.安装hadoop和jdk

1.官网下载hbase安装包

2.解压到/soft/下,建立伪链接

ln -s hbase-xxx hbase

3.配置环境变量

vi /etc/environment
HBASE_HOME=/soft/hbase
path=.....:/soft/hbase

4.配置/soft/hbase/conf/hbase-site.xml

//配置hbase master主目录
<property>
    <name>hbase.rootdir</name>
    <value>hdfs://s101:8020/hbase</value>
</property>

//是否已集群模式运行
<property >
    <name>hbase.cluster.distributed</name>
    <value>true</value>
</property>

//配置zookeeper目录
<property>
    <name>hbase.zookeeper.property.datadir</name>
    <value>/home/hadoop/hive/master/zk</value>
</property>

//zookeeper集群机器
<property>
    <name>hbase.zookeeper.quorum</name>
    <value>s102,s103,s104</value>
</property>

//zookeeper客户端连接端口，如果不想所有机器都使用此端口，可以在
//hbase.zookeeper.quorum属性中，指定具体端口s102:2181,s103:2182,s104:2183
<property>
    <name>hbase.zookeeper.property.clientPort</name>
    <value>2181</value>
    <description>Property from ZooKeeper's config zoo.cfg.
    The port at which the clients will connect.</description>
</property>

5.配置hbase/conf/regionservers,和hadoop中的slaver文件作用一样

s102

s103

s104

6.分发hbase到s102,s103,s104

rsync

7.分发环境变量，要使用root用户

8.重启其他客户端机器，使环境变量生效

9.在master上启动hbase

$>start-dfs.sh
$>start-yarn.sh
$>start-hbase.sh

10.查看进程 ,hbase的进程和zookper进程

s101上 HMaster

s102,103.104 HregionSerrver Hquorumpeer

11.查看hbase的webui

s101:16010 hbase.master

s102:16030 hregionserver

s102:16020 hregionserver RPC端口

注：hbase会默认使用内置zookeeper,虽然在hbase-site.xml中已经配置外部zookeeper地址，但并不会生效；

如果想使用外部zk，需要修改启动命令中的属性

hbase 使用外部 zk

修改[/soft/hbase/conf/hbase-env.sh]
# Tell HBase whether it should manage it's own instance of ZooKeeper or not.
# export HBASE_MANAGES_ZK=true
//默认使用内置zk
改为false，使用外部zk
export HBASE_MANAGES_ZK=false