hbase元数据恢复（meta表）

最新推荐文章于 2024-05-06 11:18:51 发布

原创

最新推荐文章于 2024-05-06 11:18:51 发布 · 4k 阅读

3 ·

CC 4.0 BY-SA版权

文章标签：

#hbase

当HBase的meta表处于in transition状态导致Master无法启动时，可通过清理Zookeeper信息、备份并删除HBase数据，然后重启Master和恢复数据来修复。具体操作包括删除Zookeeper中的/hbase-unsecure节点，备份hbase数据，清除/apps/hbase目录，重新启动Master，最后从备份恢复数据并使用hbck进行修复。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

  meta表一直in transition，master起不来，日志中报错： zookeeper.MetaTableLocator: Failed verification of hbase:meta 

  解决方法如下： 

  1.删除zookeeper信息 

  rmr /hbase-unsecure 

  2.保存hbase数据 

  hadoop fs -mv /apps/hbase/data/data/default/* /backup 

  3.删除hbase数据 

  hadoop fs -rmr /apps/hbase 

最低0.47元/天解锁文章

200万优质内容无限畅学

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

anyking0520

关注关注

0
点赞
踩
3

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

HBase meta表数据修复

人是有思想的芦苇

07-31

5784

目的为了弄清楚hbase:meta表中的数据（每个表的region所在的regionserver信息）是否会在集群每次重启后重新生成。过程将hbase:meta表中数据全部删除后重启集群，结果发现只有hbase:namespace的信息会重新生成并插入到hbase:meta表中，而其他所有用户表（用户自己创建的表）的信息都没有恢复。这里又牵扯到另一个问题，如何修复hbase:meta表中的数据，用户

【大数据学习 | HBASE】hbase的写数据流程与hbase插入数据

2301_80912559的博客

11-11

1479

同hdfs的edits日志文件一样，每个regionserver中都存在一个HLog文件，这个文件主要是hbase的操作日志文件，这个文件内的数据会记录的操作，防止集群损坏后恢复用的。我们知道hbase的一个表为了多个机器并行进行管理和查询，将数据按照行进行拆分为多个region部分，多个region的数据会分散到不同的regionserver中进行管理，这个表全部都是元数据信息，但是这个表也会存在很多region信息，我们应该去那个region中查询meta表的数据呢，这个时候。

参与评论您还未登录，请先登录后发表或查看评论

获取元数据表hbase meta和用户表信息.png

09-01

该脑图是介绍获取元数据表hbase meta和用户表信息，请贡献给大家下载！

hbase修复元数据

bigdata_player

04-11

1442

新版本的 hbck 可以修复各种错误，修复选项是：（1）-fix，向下兼容用，被-fixAssignments替代（2）-fixAssignments，用于修复region assignments错误（3）-fixMeta，用于修复meta表的问题，前提是HDFS上面的region info信息有并且正确。（4）-fixHdfsHoles，修复region holes（空洞，某个区...

Hbase表迁移-元数据逆向恢复

TH_lsq的博客

07-27

544

Hbase迁移方法较多，本次使用的是逆向恢复，即直接将hbaes数据目录get到本地，并put到新集群的hdfs目录下，并进行元数据恢复，简单粗暴，以下为详细步骤在源集群上将hbase表整个目录get到本地磁盘 hdfs dfs -get /apps/hbase/data/data/namespace/tablename 或者hadoop fs -copyToLocal /apps/hbase/data/data/namespace/tablename 将本地磁盘当前目录下的数据put到目标

zookeeper数据恢复

苏苏爱自由

09-05

2970

刚刚在向hbase表写数据时发现一个神奇的现象：判断该表显示不存在，建表时发现显示表已存在。 org.apache.hadoop.hbase.TableExistsException: cash_log:op_info 查看hdfs文件发现该表数据不存在。查看 zk显示该表 meta信息存在。要做的就是在zk上使用rmr /hbase1/table/cash_log:op_in...

在删除了/hbase/data/hbase/meta/1588230740/怎么重新生成hbase的元数据表

06-27

删除HBase的元数据表（通常是位于 `/hbase/data/hbase/meta/` 目录下的文件）通常情况下不是一个常规操作，因为这些表存储着HBase的数据结构和配置信息，对它们的修改可能会导致整个集群的不稳定。如果意外删除了这...

hbase元数据存储在哪

最新发布

06-16

总结：HBase元数据存储在hbase:meta表中，该表位于HDFS的/hbase/data/hbase/meta目录下。§§相关问题§§1.HBase的hbase:meta表存储哪些具体信息？2.HBase元数据是如何管理的？3.如何查看hbase:meta表的内容？4....

Hbase备份与恢复工具Snapshot的基本概念与工作原理_hbase 快照恢复(1)

2401_84181524的博客

05-06

972

【代码】Hbase备份与恢复工具Snapshot的基本概念与工作原理_hbase 快照恢复(1)

0661-6.2.0-Hadoop数据备份与恢复

Hadoop_SC的博客

09-13

2257

Fayson的github： https://github.com/fayson/cdhproject 推荐关注微信公众号：“Hadoop实操”，ID：gh_c4c535955d0f 1 文档编写目的在Hadoop集群中，数据文件是以Block的方式存储在HDFS上，而HDFS上数据的名称，副本存储的地址等都是通过NameNode上的元数据来保存的。Hive的数据库和表的数据也是保存在HDF...

hbase-meta-repair-hbase-2.0.2.jar

12-16

HBase 元数据修复工具包。 ①修改 jar 包中的application.properties，重点是 zookeeper.address、zookeeper.nodeParent、hdfs.root.dir配置项，hdfs 最好写 ip； ②将core-site.xml、hdfs-site.xml添加到BOOT-INF/classes 下； ③开始修复 `java -jar -Drepair.tableName=表名 hbase-meta-repair-hbase-2.0.2.jar`

hadoop namenode 数据恢复

懒散狂徒的专栏

07-02

2929

在一次hadoop的重启过程中，重启失效，只能杀掉hadoop的namenode进程。再重启的时候，出现如下问题： 2012-05-18 15:17:35,313 ERROR org.apache.hadoop.hdfs.server.namenode.NameNode: java.lang.NullPointerException at org.apache.hadoop.hdfs

Hadoop数据恢复的办法

涛博

05-17

3213

Hadoop回收站trash，默认是关闭的。需要进行相关的配置进行 1.修改conf/core-site.xml，增加 <property> <name>fs.trash.interval</name> <value>1440</value> <description>Number of minutes b...

hadoop 备份与恢复_0661-6.2.0-Hadoop数据备份与恢复

weixin_34710938的博客

02-03

2278

作者：汪汝庆1.文档编写目的在Hadoop集群中，数据文件是以Block的方式存储在HDFS上，而HDFS上数据的名称，副本存储的地址等都是通过NameNode上的元数据来保存的。Hive的数据库和表的数据也是保存在HDFS中，而Hive的元数据metastore则保存在关系型数据库中。这些文件和数据如果丢失或者损坏，都会导致相应的服务不可用，Hadoop集群可以启用某些组件和服务的高可用或者备份...

修改ambari postgres-embedded数据库源数据，删除服务

fzh90的专栏

02-20

1698

因为需要重装impala，先将impala删除，但是误操作，使得ambari-server启动不了，正确的顺序是： curl -u admin:admin -H "X-Requested-By: ambari" -X DELETE http://58.198.176.92:8093/api/v1/clusters/hadoop/services/IMPALA 再接着删除 ambari-se

生产HDFS Block损坏恢复最佳实践(含思考题) (zhuan)

u011500419的专栏

06-06

686

一.文件ruozedata.md 上传: -bash-4.2$ hdfs dfs -mkdir /blockrecover -bash-4.2$ echo "www.ruozedata.com" > ruozedata.md -bash-4.2$ hdfs dfs -put ruozedata.md /blockrecover -bash-4.2$ hdfs dfs -ls /b...

hbase zookeeper 元数据删除了怎么办

u011250186的博客

08-03

677

hbase zookeeper 元数据删除了怎么办

基于hadoop的Hbase集群丢失块信息后，清除Hbase数据，格式化hdfs文件系统

lll0101的博客

07-25

2443

可以看到在hdfs文件系统中Hbase的元数据块丢失，这是非常严重的，因本人初学，所以采用格式化的方式来重建。启动Hbase集群后显示如下错误： 1.清除数据之前先把Hbase和Hadoop及zookeeper(Hbase 依赖于zookeeper)的相关的进程都停掉 stop-hbase.sh(停Hbase进程) stop-all.sh（停Hadoop进程） zkServer.sh s...

【大数据】记一次hadoop集群missing block问题排查和数据恢复

如切如磋，如琢如磨，臻于至善。

02-24

3195

记一次 Hadoop 集群 missing block 问题解决及排查思路，集群环境总共有2个NN节点，3个JN节点，40个DN节点，基于hadoop-3.3.1的版本。集群采用的双副本，未使用ec纠删码。因为出现了missing block块高于namenode安全模式启动的阈值，导致namenode起来一直处于安全模式。