hbase ExportSnapshot迁移hbase表

Rjunxiang

已于 2023-02-21 14:06:26 修改

阅读量1.1k

点赞数

分类专栏： hbase 文章标签： hbase 大数据 hadoop

于 2022-11-18 13:42:37 首次发布

本文链接：https://blog.youkuaiyun.com/weixin_43869987/article/details/127918652

版权

hbase 专栏收录该内容

3 篇文章

订阅专栏

本文介绍如何在HBase中创建快照，并将其从一个集群迁移到另一个集群的详细步骤。包括使用ExportSnapshot工具进行快照复制及通过create、disable、restore_snapshot等命令还原数据。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

在源集群上准备快照：

snapshot 'credit_dict','credit_dict_snapshot20221117'
list_snapshots

复制快照到目标集群：

hbase org.apache.hadoop.hbase.snapshot.ExportSnapshot \
-Dipc.client.fallback-to-simple-auth-allowed=true \
-snapshot credit_dict_snapshot20221117 \
-copy-from hdfs://50.2.68.116:8020/hbase \
-copy-to hdfs://192.168.24.96:8020/hbase \
-mappers 10 \
-bandwidth 10

参数名	注释
-D ipc.client.fallback-to-simple-auth-allowed=true	允许安全认证的集群访问未开启kerberos的集群
-snapshot	指定要复制迁移的快照
-copy-from	要复制迁移快照的源集群地址
-copy-to	要复制迁移快照的目标集群地址
-mappers	开启多少个mappers任务
-bandwidth	限制导出快照时的带宽消耗，要求输入表示每秒兆字节的整数单位(MB/sec)

还原数据到表中：

create "credit_dict",  {NAME =>"info"},SPLITS => ['10','20','30','40','50','60','70','80','90']
disable 'credit_dict'
restore_snapshot 'credit_dict_snapshot20221117'
enable 'credit_dict'