HBase启动后主Master挂掉

最新推荐文章于 2024-04-08 21:23:15 发布

syyyyyyyyyyyyyyh

最新推荐文章于 2024-04-08 21:23:15 发布

阅读量315

点赞数

文章标签： hbase 大数据

本文链接：https://blog.youkuaiyun.com/syyyyyyyyyyyyyyh/article/details/117933349

版权

集群在运行中因安全考虑导致主Master节点挂掉，解决方案包括调整配置项，如将使用本地设置为false，改为使用HDFS，并针对HBase v2以上版本采用异步方式确保稳定性。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

集群觉得不够安全，所以把主节点干掉了
增加配置项
使用false为使用本地
使用true为使用hdfs
hbase2版本以上为异步

<!-- 集群环境下需要设置,因为配置了本地的dir -->
  <property>
    <name>hbase.unsafe.stream.capability.enforce</name>
    <value>false</value>
  </property>

HBase’s internal framework for cluster operati

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

syyyyyyyyyyyyyyh

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
1
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

【面试题001】最强java八股文

优快云站内信: https://i.youkuaiyun.com/#/msg/chat/qyj19920704

11-20

2万+

一、基础篇网络基础 TCP三次握手 1、OSI与TCP/IP 模型 2、常见网络服务分层 3、TCP与UDP区别及场景 4、TCP滑动窗口，拥塞控制 5、TCP粘包原因和解决方法 6、TCP、UDP报文格式 HTTP协议 1、HTTP协议1.0_1.1_2.0 2、HTTP与HTTPS之间的区别 3、Get和Post请求区别 4、HTTP常见响应状态码 5、重定向和转发区别 6、Cookie和Session区别。浏览器输入URL过程操作系统基础进程和线程的区别 1、进程间..

【檀越剑指大厂--redis】redis高阶篇

09-08

1万+

Redis没有直接使用C语言传统的字符吕表示 (以空字符结尾的字符数组，以下简称C字符串)，而是自己构建了一种名为简单动态字符串(simple dynamic string，SDS)的抽象象类型，并将SDS用作 Redis的默认字符串表示。存储String类型的key-value时,key和value都是SDS类型的.字符串键值都用SDS表示.//字节数组 char buf [ ];//buf数组中已使用字节数量 int len;//buf数组中未使用字节数量 int free;}

1 条评论您还未登录，请先登录后发表或查看评论

hbase 安装_搭建hbase集群环境

weixin_39607937的博客

11-21

124

前言通过访问hbase的官方网站，得知，hbase是一个分布式，开源的非关系型数据库，其他的我就不介绍了，主要介绍一下安装这个需要的环境，首先hadoop集群必须安装好，然后zookeeper集群也得安装好，如果您的zookeeper集群没有安装，请仿照我之前写的文章来搭建一下。栋公子：搭建zookeeper集群zhuanlan.zhihu.com下载首先安装需要下载安装包，建议到官方去下载官网...

最新HBase的HMaster自动挂掉解决方案_hbase节点挂了

2401_84150302的博客

04-08

726

其实这里真正的问题出在后面的“Operation category READ is not supported in state standby."，这里导致HMaster自动掉点的原因并不是HMaster本身，而是Hadoop系统！看了很多优快云的攻略，有让改hbase-site.xml文件的，有让启动zkCli删除/hbase根目录的，都没有用，HMaster还是照样掉点，很搞心态。注意，这里删除会直接清空所有/hbase和/hadoop的数据，如果存有重要数据请做好备份，学习使用可以直接删。

记一次hbase master停止服务的原因以及恢复

weixin_34247155的博客

10-18

435

2019独角兽企业重金招聘Python工程师标准>>> ...

HBase中master正常启动，自动关闭——原因以及解决办法

Sun_Light1的博客

03-05

7717

regionserver一直在运行，而master启动之后，过一会自动停止，因为master停止，所以也无法访问hbase管理web页面。

Hbase服务启动后HMaster和HRegionServer不一会儿就自动挂掉的解决方法

F_lan123的博客

06-17

2045

Hbase服务启动后Hmaster和HRegionServer不一会儿就自动挂掉的解决方法我的问题如下图启动后jps是这样的过了一会儿jpsHmaster和HRegionServer就饿挂掉了查看hbase日志然后百度看了很多解决方法，最后原来是没有关闭防火墙 systemctl start firewalld开启 systemctl status firewalld 查看状态 systemctl stop firewalld关闭然后我关了后就不会再自动挂掉了，希望能帮助到大家 ..

Redis超全精讲！

蔡政洁的博客

01-29

2880

目录1.NoSQL介绍1.1 什么是NoSQL1.2 NoSQL的特点1.2.1 应用场景1.2.2 不适用场景1.3 NoSQL数据库1.3.1 memcache1.3.2 redis介绍1.3.3 mongoDB介绍1.3.4 列式存储HBase介绍2. Redis介绍2.1 Redis的基本介绍2.2 Redis的应用场景2.2.1 取最新N个数据的操作2.2.2 排行榜应用，取TOP-N操作2.2.3 需要精准设定过期时间的应用2.2.4 计数器应用2.2.5 Un

hbase启动不起来，总是刚启动然后主节点和从节点都挂掉了

枣泥馅的博客

04-22

930

我出现这个原因是因为我在这个节点上放了俩个hbase导致的，我是为了测试phoenix放了一个hbase2.2和hbase2.0，最后我把 hbase2.0删除了就可以正常启动了

[hadoop&hbase篇]hbase启动后主节点hadoop001的Hmaster启动不起来，而从节点hadoo002与hadoop003的HRegionServer都能够正常启动

alone554的博客

09-16

1300

hadoop集群活跃(active)状态的namenode节点和hbase的master必须是同一台机器。

关于HBase集群中的Hmaster节点刚启动就挂掉的解决方法

weixin_43520450的博客

02-13

3781

关于HBase集群中的Hmaster节点刚启动就挂掉的解决方法

hbase启动master挂掉解决的几种办法 | base 和 Hadoop版本问题

Terra233的博客

05-16

2905

0.版本信息 hadoop3.1.3 hbase2.0.5 1.错误描述启动HBase后,master过了几秒就挂了.去log中看发现 java.lang.IllegalStateException: The procedure WAL relies on the ability to hsync for proper operation during component failures, but the underlying filesystem does not support doing so.

HMaster启动一小会之后会自动挂掉（hbase-2.4.8）

Sakura__huiliyi的博客

03-15

3592

hmaster启动一小会之后会自动挂掉进入hbase目录下的logs文件夹查看master的运行日志之后发现：是hbase-site.xml配置出现了问题主要错误有两个：一个是结尾的</configuration>误删了还有一个是hbase.rootdir的hdfs地址开头写错了，正确写法应该是 hdfs://node01:9000/目录名或者是写成本地形式： file:///路径名解决之后先不着急重启hbase，否则会报如下错误：原因是之前的信息依然存在zookeep

HBase集群开启后HMaster马上挂掉（16010web页面打不开）

kuyuguoheqi的博客

08-26

3280

但我chua的一下查看尝试了之后发现都是没问题，愁得我想着各种可能，甚至以为是因为我开起了高可用的原因（因为每次主节点马上挂掉后HMaster都会在备用节点开启），结果证明也不是这个原因。最开始发现问题是启动HBase集群后‘一切正常’但是却无法打开16010web页面，然后查看jps才发现刚打开的HBase集群的HMaster消失了。hbase-site.xml文件里设置的端口号和hadoop的etc/core-site.xml设置的端口号不一致的问题。一开始看到大佬们的都是。......

启动Hbase后Hmaster节点挂掉的几个原因

weixin_39345735的博客

10-18

9640

学习HBase过程中，在安装Hbase后，会出现Hmaster节点在几秒种后会突然挂掉，有可能是以下原因: 1.时钟不同步 2.zookeeper出问题了 3.hdfs和hbase配置的端口不匹配 hdfs core-site.xml hdfs://master hbase-rootdir hdfs://master:9000/hbase

HBASE中Hmaster启动后自动挂掉的问题

qq_29500875的博客

05-17

7052

log文件报错java.lang.IllegalStateException: The procedure WAL relies on the ability to hsync for proper operation during component failures, but the underlying filesystem does not support doing so. Please...

HBase启动后HMaster挂掉的一种解决方案

weixin_33774883的博客

05-05

2192

2019独角兽企业重金招聘Python工程师标准>>> ...

启动hbase集群，hmaster总挂

m0_59186260的博客

12-03

1965

hmaster总挂掉，日志显示Master exiting java.lang.RuntimeException: HMaster Aborted

Hbase Cluster Setup Guide

zzz_atm的专栏

08-30

431

Hbase Cluster Setup Guide Environment: 1. OS: Ubuntu 12.04.2 LTS 2. JAVA: JDK1.7 3. Hadoop: Hadoop 2.0.3 alpha 4. Maven: Maven3 5. Hbase: hbas

hbase启动后浏览器是backup master

最新发布

04-01

### HBase 启动后浏览器显示 Backup Master 的原因分析当 HBase 成功启动并进入正常工作状态时，在浏览器访问其 Web UI 页面时可能会看到 **Backup Master** 显示的情况。这通常是因为当前节点被配置为备用主节点（Backup Master），而不是活跃的主节点（Active Master）。以下是具体的原因： #### 1. 备份主节点的角色定义 HBase 支持高可用性（HA）功能，其中可以配置多个 HMaster 实例来提高系统的可靠性。其中一个实例作为 Active Master 运行，而其他实例则作为 Backup Master 存在[^1]。这些备份主节点会监控集群的状态，并准备接管活动角色以防主要主节点发生故障。如果用户通过浏览器查看到的是一个 Backup Master，则表明该节点目前处于待命状态而非实际负责协调整个集群操作的主要控制者位置上。 #### 2. 配置文件的影响在 `backup-masters` 文件中指定了哪些服务器应该充当额外的备选 master 节点之一。例如命令 `echo hadoop103 > $HBASE_HOME/conf/backup-masters` 就是用来指定一台名为 'hadoop103' 的机器成为可能的 secondary 或 standby masters 列表成员的一部分。因此, 如果您连接到了这样的一台 server 上面去观察 web ui，默认情况下它只会报告自己作为一个辅助性的 component存在——即所谓的 “backup”。另外需要注意的是关于 hdfs namenode 地址设置也会影响整体表现形式。比如 core-site.xml 中如下片段 `<property><name>fs.defaultFS</name><value>hdfs://hadoop1:9000/</value></property>` 定义了默认使用的 Namenode URI地址[^3], 正确指向对应的namenodes对于确保所有组件间通信顺畅至关重要. --- ### 解决方案为了确认是否真的存在问题或者只是误解了所见的信息，建议采取以下几个措施: #### 方法一：验证哪个是真正的 Active Master 可以通过执行以下 shell 命令找到正在工作的 primary instance: ```bash $ bin/hbase hbck -masterinfo ``` 此工具可以帮助识别谁才是此刻真正承担职责的那个 leader node 并给出相应 ip 和 port number 等细节信息以便于后续定位问题所在之处[^2]. #### 方法二：调整客户端请求目标至正确的 URL 一旦明确了哪一个是 active master之后就可以修改自己的 browser 访问路径从而直接连向那个确切的服务端口上去获取更全面准确的数据展示效果而不至于误以为系统出了差错。假设得知 activity master 所处的位置位于另一台主机 say "hadoop102",那么就应该把之前打开页面时候输入进去的链接改成形如 http://hadoop102:<port>/ 来代替原来的错误方向尝试。 #### 方法三：检查日志记录寻找异常情况最后还有一种可能性就是尽管表面上看起来像是简单的 role difference 导致的现象但实际上背后隐藏着某些潜在的技术难题尚未得到妥善处理完毕。所以有必要深入挖掘相关的 logging materials 查找是否存在任何 warning messages 提醒我们注意特殊状况的发生几率大小如何变化趋势怎样发展等等重要内容项. --- ### 总结综上所述,HBase 启动以后发现网页界面上标注出来的内容标记成了 backup status 只不过反映了当时查询对象本身的性质而已并没有实质意义上的故障隐患存在；只要能够按照上述指导方针一步步排查清楚事实真相再做适当调整即可恢复正常运作秩序无需过度担心害怕出现问题影响业务连续性和稳定性等方面的表现水平下降风险增加等问题出现的可能性降低很多程度之上达到预期目的为止结束本次讨论环节谢谢大家的支持配合共同进步成长！ ---