一种HBase数据备份及恢复方法

目 录

0.引 言

1.备份方法

2.脚本的使用方法

3 获取HDFS文件到本地系统

 4 数据恢复方法

4.1 将将备份文件添加到hdfs中

4.2 导入数据到HBase集群

5.小 结

---

0.引 言

HBase在大数据处理中地位至关重要，有的公司会将HBase作为原始数据接入层，那么Hbase的数据备份就显得至关重要，那么如何备份呢？这里我们引入Hbase的一个API，hbase org.apache.hadoop.hbase.mapreduce.Export，该API可以实现同一集群间的数据备份。

1.备份方法

初始化全量备份 + 增量备份手段

基本原理：Export导出工具与CopyTable一样是依赖hbase的scan读取数据，并且采用的ImportFormat与CopyTable一样是TableInputFormat类，从该类的getSplits()方法可以看出MR的map数与hbase表的region数相同。

执行日程：

备份按照每张hbase中的表进行备份，每月的1号进行全量备份，每天进行增量备份<