通过快照迁移hbase1.1.2的表数据(以clone_snapshot为例说明)

最新推荐文章于 2024-01-31 14:53:30 发布

宝罗Paul

最新推荐文章于 2024-01-31 14:53:30 发布

阅读量2.8k

点赞数

CC 4.0 BY-SA版权

分类专栏：大数据文章标签： hbase snapshot 大数据运维

本文链接：https://blog.youkuaiyun.com/qq_31598113/article/details/79935161

本文介绍了如何使用HBase的快照功能无损迁移表数据，特别是在客户端误操作导致数据丢失时，通过clone_snapshot命令创建新表以保持服务不间断。快照仅涉及元数据复制，不影响Region Server。详细步骤包括查找HBase根目录、准备快照、导出到目标集群及在目标集群克隆新表。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

【为什么要用clone的方式复制出一张新表】

有时候因为客户端的不当行为导致了丢失hbase表数据，如果全表恢复(restore_snapshot)则恢复之前必须禁用(disable)该表。但是我不想禁用该表，我想要这张表继续提供服务，怎么办？那么我们就采用克隆快照的方式生成另一张表即可。

【snapshot功能简介】

使用hbase提供的快照(snapshot)功能，不需要停掉hbase集群，不会对Region Server产生影响。导出快照到其他集群也不会对Region Servers产生影响。快照涉及的复制和恢复不包括数据拷贝，只涉及元数据的复制。snapshot为所有HFile文件分别新建引用关系(类似指针)，这些元数据就是snapshot.

操作步骤，每一步的命令都整理好，如截图——

步骤1：从源集群中查得hbase根目录

[root@master-1-001 ~]# grep -i -r -C 2 "hbase.rootdir" /usr/hdp/current/hbase-client/conf/
/usr/hdp/current/hbase-client/conf/hbase-site.xml- <property>
/usr/hdp/current/hbase-client/conf/hbase-site.xml: <name>hbase.rootdir</name>
/usr