Hbase 集群启动脚本分析

最新推荐文章于 2024-04-11 22:38:03 发布
最新推荐文章于 2024-04-11 22:38:03 发布
阅读量1.2k 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： HBase 文章标签： hbase 集群 脚本
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/jack_nichao/article/details/52712998
本文深入分析了Hbase集群启动的过程，包括start-hbase.sh、hbase-daemon.sh和hbase-daemons.sh脚本的作用，以及ZooKeeper和HMaster的启动细节。在分布式模式下，启动顺序涉及Zookeeper、HMaster和RegionServer等关键组件。通过hbase守护进程启动各个服务，确保集群正常运行。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

说明

本文主要分析一下Hbase集群启动过程，只涉及到核心过程，不涉及到具体内容，hbase的版本是hbase-0.94.27.tar

整体流程：

  1. 运行start-hbase.sh脚本
  2. 执行 $bin/hbase-config.sh 设置配置参数
  3. 根据集群启动是否是分布式的模式，在本地仅启动master或者启动整个集群
  4. 判断启动模式：重新启动集群(restart)or初次启动集群（start）（缺省：start）
  5. 如果是分布式模式，依次启动如下服务：
    启动zookeeper org.apache.hadoop.hbase.zookeeper.HQuorumPeer（这种情况是使用HBase自身管理Zookeeper）
    启动master org.apache.hadoop.hbase.master.HMaster
    启动${HBASE_REGIONSERVERS}目录中指定的regionserver org.apache.hbase.regionserver.HRegionServer
    启动${HBASE_BACKUP_MASTERS}中指定的master-backup
  6. 启动5中的服务会调用hbase-daemons.sh脚本，而该脚本最终调用hbase脚本启动服务对应的进程

start-hbase.sh脚本

  1. 执行hbase-config.sh脚本，设置环境变量
    这里写图片描述
  2. 判断集群启动的模式，autorestart 或者start[默认]
    这里写图片描述
  3. 判断分布模式
最低0.47元/天 解锁文章

200万优质内容无限畅学
HBase集群启动脚本流程分析
xiao的博客
07-30 1687
在安装HBase的时候需要配置一些参数，这些参数在HBase启动的时候发挥着怎样的作用，如何影响的HBase的运行，出现启动错误时如何快速定位错误的位置。在解决这些问题之前，先从源码的角度分析一下HBase的启动流程，了解HBase是怎么启动的。
一键启动zookeeper、hadoop、hbase集群（shell脚本）
慕铭yikm
10-08 1516
1.启动集群 文件名： start-cluster.sh #! /bin/bash echo "------正在启动集群------" echo "------正在启动Zookeeper------" /usr/zk/zookeeper-3.4.6/bin/zkServer.sh start ssh root@slave1 "source /etc/profile;/usr/zk/zookeeper-3.4.6/bin/zkServer.sh start" ssh root@slave2
启动Hadoop集群和HBase集群脚本
weixin_34037977的博客
04-06 149
#!/bin/sh #echo "waring" #read NAME #等待用户输入并把输入的值付给NAME NAME=$1 #将脚本第一个参数赋给NAME #引用变量时加上"{}",是个好习惯,利于shell辨别变量边界 if [ -z ${NAME} ] ;then #默认如果为空，hadoop start echo "1.start ...
Hbase集群搭建
大数据
05-30 663
1.上传hbase安装包 2.解压 3.配置hbase集群，要修改3个文件（首先zk集群已经安装好了）   【注意：要把hadoop的hdfs-site.xml和core-site.xml 放到hbase/conf下】    3.1修改hbase-env.sh  export JAVA_HOME=/usr/java/jdk1.7.0_55  //告诉hbase使用外部的zk  e
hbase集群的启动,注意几个问题
weixin_34292959的博客
10-12 441
1.hbase的改的会影响器他的组件的使用,    故而, 在修改 hadoop的任何组件后, 一定要记得其它的组件也能受到影响,   一下是我在将hadoop的集群改了之后 , 再次运行hbase的时候, 就会发生异常, 原因是在连接namenode的时候,发生连接不到, 就是因为我改了之前的配置,将端口号改了, 没有去将配置文件在hbase中进行更新, 具体问如下: ##我今天起得hbase的...
HBase ---启动服务的脚本
Li的博客
09-26 624
脚本一、start-cluster.sh1. 指令2. 内容3. 结果二、stop-cluster.sh1. 指令2. 内容3. 结果 三台虚拟机：hadoop102、hadoop103、hadoop104 用户：alex（并非root） cat /etc/profile >> ~/.bashrc 将我们配置的profile变量追加到.bashrc中。 一、start-cluster.sh 1. 指令 [alex@hadoop102 .ssh]# cd /usr/local/bin/ [alex
HBase集群的安装及其开启
qq_40870024的博客
11-12 832
HBase集群的安装和配置 //详见安装文档, 注意: 在搭建HBase集群之前, 先把你的集群还原到教育项目之前的状态. 1. 上传. 拖拽 hbase-2.1.0.tar.gz 到 Linux系统的 /export/software 下 2. 解压 tar -zxvf hbase-2.1.0.tar.gz -C /export/server/ 3. 修改配置文件. cd /export/server/hbase-2.1.0/conf vim hbase-env.sh export JAV
ZooKeeper,Hadoop,HBase一键启动脚本（附详细讲解）
weixin_48985617的博客
10-10 1062
为了提高效率（为了变懒），这里教大家怎么能够省时省力。
Hadoop集群群起脚本（zookeeper、Hadoop、HBase）
qq_41725214的博客
02-13 993
学习HBASE的时候，因为需要启动zookeeper和Hadoop，需要很多命令才能全部启动，关闭时也比较麻烦。所以就自己写了群起脚本和关闭脚本（/root/bin目录下，也可根据自己实际情况选择目录），记录一下。 群起脚本startcluster.sh #!/bin/bash for i in master slave1 slave2 do echo "=====$i====...
Hbase集群搭建以及启动（单点启动，群起）
Sun's Blog
11-23 1821
文章目录HBase是什么HBase支持随机写HBase支持海量数据的实时读写HBase的安装和配置（重点）1.配置2.启动（重点）单点启动群起和群停集群同步 HBase是什么 HBase是基于hadoop的数据库！ HBase支持随机写 HBase的读写操作还是借助HDFS完成，要完成随机写，根本上还是需要复合HDFS的特性！ HDFS只支持追加写！ 随机的操作： Update+Delete 借助 追加写+时间戳(版本号) 只允许客户端查询时返回时间戳最新的数据！ HBase支持海
HBase 集群部署与启动
my_study_notes的博客
10-03 3032
HBase 集群部署与启动
服务器最全安装、配置、启动HBase集群
hellowangxiansheng的博客
04-10 1188
（6）将master节点的 /opt/hbase-1.3.1 文件和 /etc/profile 文件拷贝到slave1的相同路径下。（7）将master节点的 /opt/hbase-1.3.1 文件和 /etc/profile 文件拷贝到slave2的相同路径下。切换到 HBase 的配置文件目录下，这里配置文件的目录为/opt/hbase-1.3.1/conf/切换到hbase的安装目录的bin目录下，即/opt/hbase-1.3.1/bin。执行start-hbase.sh命令，启动hbase。
Hbase 集群搭建
2401_84182020的博客
04-11 816
以上大数据开发知识点，真正体系化！**
Hbase集群的搭建
LiZhiyan的博客
06-25 2717
步骤 1： 解压Hbase步骤2 ：修改Hbase相关的配置文件2.1 进入hbase的解压路径 进入confvi hbase-env.sh2.2 进行配置2.2.1 配置jdk 2.2.2 配置zk 步骤3：修改hbase-site.xml*进入hbase的解压路径 进入conf*vi hbase-site.xml将configuration配置项的内容设置为： <p
Hadoop集群启动Hbase的步骤流程
Blackdude的博客
10-19 3647
Hadoop集群启动Hbase的步骤流程 系统版本：centOS7.7 HBASE版本：apache-hbase-1.2.1 HADOOP版本：apache-hadoop-2.7.6 JDK版本：jdk-1.8.0_45 单机安装/伪分布式：1台服务器 全分布式：3台服务器 （关于如何配置hbase，不再叙述，可以查阅资料） 1.启动hdfs start-all.sh 2.启动zookeeper 三台节点同时启动（前提是配置好了 时间同步！） zkServer.sh start 3.启动hbase
HBASE集群搭建过程
qq_41919284的博客
08-14 2555
安装hbase的条件： Hadoop zookeeper 开始安装： 上传、解压： 删除压缩包： 删除hbase下的docs文件 因为docs’文件中，都是html无用的文件，会严重影响传输效率 —-如果不是apache下的产品，建议不删除 配置环境变量： 打开官网：开始配置hbase的配置文件： 说明： hbase.rootdir：hbase的数据，...
start-hbase.sh
大JAVA解决方案
02-11 2119
[wangshumin@centoshostnameKL1 conf]$ ll总用量 56-rw-rw-r--. 1 wangshumin wangshumin   18 1月  23 13:10 backup-masters-rw-r--r--. 1 wangshumin wangshumin  974 1月  23 13:02 core-site.xml-rw-r--r--. 1 wangsh...
HBase集群配置问题
weixin_41074929的博客
09-30 269
一、启动时提示，Master is initializing。Region Server无法启动： 原因：集群各节点时间不同步造成。 集群时间同步具体操作 集群时间同步 集群时间同步 二、HBase成功启动后，运行程序报错，无法加载HBase相关包： 修改hadoop-env.sh文件： export HADOOP_CLASSPATH=$HADOOP_CLASSPATH:/home/spark/h...
以start-hbase.sh为起点，HBase启动流程
weixin_59295776的博客
09-05 288
根据需要启动的进程，如 zookeeper，则调用 zookeepers.sh如 regionserver，则调用 regionservers.sh，如 master-backup，则调用 master-backup.sh。① 装载相关配置，如HBASE_HOME目录，conf目录，regionserver机器列表，JAVA_HOME 目录等，它会调用$HBASE_HOME/conf/hbase-env.sh；③ 调用 hbase-daemon.sh 来启动 master；
hbase集群的启动
最新发布
02-26
### 启动HBase集群的操作指南 #### 1. 修改配置文件 为了确保HBase集群正常启动，需先编辑`hbase-env.sh`文件来设置必要的环境变量。具体来说，可以在`${HBASE_HOME}/conf/hbase-env.sh`中加入如下配置以禁用Hadoop类路径查找： ```bash export HBASE_DISABLE_HADOOP_CLASSPATH_LOOKUP="true"[^3] ``` 这一步骤有助于减少因依赖冲突引起的问题。 #### 2. 执行启动脚本 完成上述配置更改之后，在主节点（例如名为 `hadoop001` 的机器上），切换到 `${HBASE_HOME}/bin` 目录下并执行以下命令来启动整个HBase集群: ```bash start-hbase.sh[^2] ``` 该指令会触发一系列后台进程的初始化工作，包括但不限于： - 在指定为主服务器(`Master`)的角色实例所在的主机(hadoop001)上激活主要管理组件； - 如果存在冗余设计，则在同一网络内的另一台计算机(hadoop002)上开启备用主控单元(Backup Master Service)； - 根据预先定义于regionservers列表中的成员信息，分别在这几处位置设立相应的区域服务端点(region servers)，从而形成分布式存储架构的基础框架。 #### 3. 验证服务状态 一旦启动过程结束，建议立即检查各个组成部分的工作状况。可以通过访问各节点上的日志记录或者利用专门工具来进行健康度评估，以此确认所有预期的服务均已顺利上线运行[^4]。 ```python import os def check_hbase_status(): status_command = "jps | grep -E 'HMaster|HRegionServer'" result = os.popen(status_command).read() if not result.strip(): print("No active HBase services found.") else: print(f"Active HBase processes:\n{result}") check_hbase_status() ```
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值