hbase不能使用hadoop的压缩算法

原创已于 2022-07-22 09:47:08 修改 · 575 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#大数据 #hadoop #hbase

于 2022-07-21 19:32:53 首次发布

国产系统专栏收录该内容

3 篇文章

订阅专栏

本文档介绍了当HBase无法使用Hadoop的压缩算法时的排查步骤。首先，通过hadoopchecknative命令检查是否版本不兼容，然后根据返回结果安装缺失的库。如果HBase仍无法调用所需算法，需要创建软链接，确保HBase能访问到Hadoop的lib目录。具体操作包括针对不同系统架构创建相应软链接，并重启HBase服务以应用更改。

问题：hbase不能使用hadoop的压缩算法

用hadoop checknative命令
在这里插入图片描述

全部false：不用想了，肯定是版本不兼容，unmae -a 命令确认系统版本
一部分false：那就单独安装false的安装包，再检查hadoop应该就有了

如果显示有自己要用算法，但是hbase不能调用，注意要在hbase配置软连接到hadoop的lib

可以在hbase的master日志中查找，调用软链接的名称是什么

more /mnt/data/hbase/logs/hbase-root-master-node-1.log |grep ‘aarch|amd’

## amd64版本,也就是x86
ln -s /opt/software/hadoop/lib/native /opt/software/hbase/lib/native/Linux-amd64-64

## arrch64版本
ln -s /opt/software/hadoop/lib/native /opt/software/hbase/lib/native/Linux-aarch64-64

最后重启hbase就好