HBase2.0的修复工具打包

HBaseOperatorTools编译与HBCK2打包指南
原创 已于 2023-05-23 11:37:02 修改 · 235 阅读 · 2 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#hbase #java #数据库

于 2023-05-22 17:14:18 首次发布
本文介绍了如何从GitHub下载ApacheHBaseOperatorTools项目，解压后在IDEA中打开并修改为个人的HBase版本。接着，需删除pom.xml中的scope为provide的条目，然后在终端中进入hbase-hbck2目录，使用MVN进行cleaninstall操作，避免使用package以防止出现编译错误。此过程适用于处理HBase2.0的HBCK2工具的编译问题。

1、下载项目包

GitHub - apache/hbase-operator-tools: Apache HBase Operator Tools

2、解压到本地的目录，用idea打开，修改为自己的hbase版本，并删除pom.xml的scope的 provide

有scope的 provide都去掉 

 

3、点击打开Terminal界面，切换到hbase-hbck2下，执行命令打包 

mvn clean install -DskipTests

不用mvn clean package，会报错如下界面，导致打包失败

参考：HBase2.0的修复工具HBCK2_hbase hbck2 编译_大猿小猿向前冲的博客-优快云博客 

learn_step
关注
HBase 2.0.0 META 数据修复工具
小强的博客
12-10 5661
必须先吐槽一下 Cloudera 6.x 和 Hbase 2.0 太坑了！ 不久前生产上的一套Hbase集群出现著名的RIT（Regions in Transition）问题。 查看hbase web ui 于是通过hbck命令查看一下集群状态，果然好多inconsistency ... ERROR: Region { meta => XXX,XXX:,157301923100...
Hbase修复工具Hbck与Hbck2，异常定位和修复
大数据技术派
09-26 3065
因为前面Hbase2集群出现过一次故障，当时花了一个周末才修好，就去了解整理了一些hbase故障的，事故现场可以看前面写的一篇：Hbase集群挂掉的一次惊险经历一. HBCK一致性一致性是...
hbase-operator-tools：Apache HBase操作员工具
02-04
hbase-operator-tools 操作员工具的主机，包括： ，hbase-2.x修复工具，是hbase-1的hbck （AKA hbck1 ）的后继者。 ，一种用于生成有关Table列数和行大小的基本报告的工具； 在没有可用的分布式执行时使用。
hbase-meta-repair-hbase-2.0.2.jar
12-16
HBase 元数据修复工具包。 ①修改 jar 包中的application.properties，重点是 zookeeper.address、zookeeper.nodeParent、hdfs.root.dir配置项，hdfs 最好写 ip； ②将core-site.xml、hdfs-site.xml添加到BOOT-INF/classes 下； ③开始修复 `java -jar -Drepair.tableName=表名 hbase-meta-repair-hbase-2.0.2.jar`
hbase的2.2.4版本支持哪个版本的hadoop_HBase运维HBase2.x修复工具HBCK2介绍
weixin_39965673的博客
11-23 604
1. 背景 在了解HBCK2之前，建议先了解一下啥是HBCK。HBCK是HBase1.x中的命令，到了HBase2.x中，HBCK命令不适用，且它的写功能(-fix)已删除，它虽然还可以报告HBase2.x集群的状态，但是由于它不了解HBase2.x集群内部的工作原理，因此其评估将不准确。因此，如果你正在使用HBase2.x，那么对HBCK2应该需要了解一些，即使你不经常用到。2. 获取...
Hbase2修复 - HBCK2
chun的博客
09-30 479
这两天集群扩容后，出现的一系列问题，某个节点数据的VERSION不对，最终没解决掉，最后导致HBase数据丢失 以下是所使用到的博客，记录一下以后再次出现好进行解决 主要使用HBCK2 https://www.modb.pro/db/54575 https://developer.aliyun.com/article/683107 https://zhuanlan.zhihu.com/p/83237810 https://www.daimajiaoliu.com/daima/4edb28b64900404
HBase数据迁移方案
阿生
09-25 5020
HBase2.1.0数据迁移方案 文章目录HBase2.1.0数据迁移方案步骤一、迁移HFile数据步骤二、迁移表的region步骤三、bulkload数据 业务要求：将数据从旧的集群HBase1.2迁移到HBase2.1.0中去。每个表的数据量级10TB左右 值得注意：HBase升级到Hbase2.x之后，他的数据修复工具独立出来作为 HBCK2 成立了一个单独的项目 ，并且这个项目并不是所有的......
Apache Atlas 2.0.0 HBase Hook功能模块独立打包
根据给定的文件信息，我们可以提取以下IT知识点： **标题知识点：** 1. 文件名：`apache-atlas-2.0.0-...Apache Atlas作为元数据管理和治理的工具，通过这样的模块可以扩展其对于Hadoop生态系统中HBase组件的支持。
hbase合集
leezsj的博客
07-17 1448
HBASE hbase的来源 1、hdfs的数据读写延迟高 2、不能进行实时删除局部数据 3、hive的数据必须要指定的列或者字段，必须要格式化的数据 4、hbase来源于google的bigtable hbase的定义 hbase是一个基于hadoop开源的，分布式的，多版本的，可扩展的，非关系型数据库，能够处理海量数据，（数十亿行，数百万列），面向列存储，面向稀疏存储（mysql面向行存储） HBase特性 hbase类似于：redis，clickhouse,mongodb，canss
Ambari2.7.x编译专用HBase 2.0.0二进制包
该HBase版本号为2.0.0.3.0.0.0-1634，属于Cloudera发行版（CDH）风格的版本命名方式，其中“2.0.0”代表HBase上游开源项目的主版本号，“3.0.0.0”通常表示Cloudera对基础版本的封装和补丁集成，“1634”则可能是该...
hbase hbck2修复工具hbase-operator-tools-1.0.0.1.0.0.0-618-bin.tar.gz
10-16
hbase hbck2修复工具hbase-operator-tools-1.0.0.1.0.0.0-618-bin.tar.gz，hbase1版本的hbck已经不支持修复命令，hbase2.1版本需要用这个新版的工具
HBase 2.0之修复工具HBCK2，修复数据
wenzhixiang1192的博客
04-07 2003
1.起因 此次修复数据情况是:服务器中毒导致HBASE异常关闭， 启动各种错误，实在没搞懂就清理了ZK关于HBASE的目录（rmr /hbase 建议先看原因，实在不行在做这个删除ZK操作，不对任何人负责，只是记录我修复的过程，仅供参考），本人的HBASE版本是2.0.5。 2.查找资料 关于如何修复ZK相关数据，查找到了相关文章 （HBase指南 | HBase 2.0之修复工具HBCK2运维指南 https://mp.weixin.qq.com/s/GVMWwB1WsKcdvZGfvX1lcA?s
HBase 常用操作工具类（2.0）
REID丶Beginner的博客
09-28 576
写这个小工具的时候公司还在使用比较老的HBase大数据套件，后来公司升级了大数据套件该工具很多类被弃用（HBase官网：As of release 2.0.0, this will be removed in HBase 3.0.0. Use xxxto buildxxx），领导要求跟改掉被官网弃用的方法，舍不得删就放这留个纪念。 package org.metadata.core.hbase.util; import org.apache.commons.lang.StringUtils; im..
HBase指南 | HBase 2.0之修复工具HBCK2运维指南
测试0901-1
12-28 1295
目前社区已经发布了HBase的2.0版本，很多公司都希望去尝试新版本上的新功能，但是不得不面对的问题就是当集群出了问题应该如何解决。 在之前的HBase版本中，我们可以依赖hbck来帮助检查问题和修复问题，在新的版本上我们应该如何去处理呢？HBASE-19121[1]给了我们答案——HBCK2。 HBCK2目前发布了1.0版本，还在一直开发中，感兴趣的...
Hbase2.0版本 Region处于RIT状态
weixin_47099283的博客
11-01 1185
Hbase2.0版本 Region处于RIT状态
hbase修复工具hbase-operator-tools源码分析v0.01
研究源码的最底层,只持有正确的仓位
11-25 899
第一节 参考 https://github.com/apache/hbase-operator-tools.git https://yq.aliyun.com/articles/686248 https://yq.aliyun.com/articles/586755?utm_content=m_48695 http://hbase.apache.org/book.html#arch.bulk.lo...
【分布式数据库】使用HDFS底层文件进行HBase跨集群数据迁移
康师傅没有眼泪
05-12 2068
因为，我们这个A集群是kerberos 环境，B集群是不带kerberos环境，这里使用Distcp的方式。这里仅是为了迁移底层数据，所以选择那种方式都可以。客户集群机房迁移，我们部署的集群也要完成跨集群迁移hbase 表，这里选择迁移Hadoop底层数据来实现hbase的表迁移。从HMaster -web 可以看到表的 2 个Region 的状态为 Other Regions。如果是kerberos 认证集群的集群 我们需要在jar包中 加入 集群的 xml 配置文件即可。三、HBCK2下载和编译。
hbase HBCK2使用指南
南风知我意
07-12 1922
HBCK2 每次运行时都会执行一个独立的任务。 它并不是一个可以分析所有关于正在运行的集群，然后修复发现的“所有问题”，如 hbck1 使用的建议的工具。 HBCK2 用于修复。 对于正在运行的集群中的不一致或阻塞的列表，您可以转到其他地方，查看正在运行的集群 Master 的日志和 UI。 一旦发现问题，您就可以使用 HBCK2 工具要求 Master 进行修复或跳过不良状态。 HBCK2 和 hbck1 之间的另一个重要区别是要求 Master 进行修复，而不是尝试在修复工具的上下文中进行本地修复。
hbase-operator-tools：让HBase运维更加高效
最新发布
gitblog_00831的博客
05-01 628
hbase-operator-tools：让HBase运维更加高效 项目介绍 hbase-operator-tools 是 Apache 软件基金会下的一个开源项目，旨在为 Apache HBase 提供一系列的运维工具。该项目主要包括两个核心工具：HBCK2 和 TableReporter。HBCK2 是针对 hbase-2.x 版本的修复工具，它是 hbase-1 版本中 hbck（也称为 h...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值