hbase 创建表卡住 无报错信息

本文分析了HBase在创建表时卡住且无报错信息的现象,指出可能原因是HDFS处于安全模式导致的只读状态。解决方案包括调整`dfs.safemode.threshold.pct`设置或使用`hadoop dfsadmin -safemode leave`命令强制退出安全模式。此外,还提到了配置文件`hbase-site.xml`中`hbase.cluster.distributed`的检查与修正,以及`regionservers`文件中的IP配置错误。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

*hbase 创建表卡住 无报错信息


Hbase shell不能创建表的原因分析。


.现象:

前一段时间 安装了Hbase

hbase shell

进去之后 list status 命令都能够正常运行。

但是执行建表语句

create 'aaa','bbb'

的时候 他就一直卡在那不动,也不报任何错误, 日志里面一直在刷如下的 debug日志:

DEBUG org.apache.Hadoop.hbase.client.HConnectionManager$HConnectionImplementation: Lookedup root region location, connection=org.apache.hadoop.hbase.client.HConnectionManager$HConnectionImplementation@23faa614; serverName=

INFO org.apache.hadoop.hbase.master.ServerManager: Waiting on regionserver(s) to checkin


   然后我进到  Hive里面 也是可以执行查看语句 但是不能创建表。

状态就是 只能读不能写。


.解决办法:


namenode在启动的时候首先进入安全模式,如果datanode丢失的block达到一定的比例,则系统会一直处于安全模式状态即只读状态。

dfs.safemode.threshold.pct(缺省值0.999f)表示HDFS启动的时候,如果DataNode上报的block个数达到了元数据记录的block个数的0.999倍才可以离开安全模式,否则一直是这种只读模式。如果设为1HDFS永远是处于SafeMode


有两个方法离开这种安全模式
1)修改dfs.safemode.threshold.pct为一个比较小的值,缺省是0.999
2hadoop dfsadmin -safemode leave命令强制离开

用户可以通过dfsadmin -safemode value  来操作安全模式,参数value的说明如下:

1. enter - 进入安全模式

2. leave - 强制NameNode离开安全模式

3. get -  返回安全模式是否开启的信息

4. wait - 等待,一直到安全模式结束。


我采取的办法是 强制离开安全模式。

进入hadoop bin目录,

执行:

hadoop dfsadmin -safemode leave



然后我分别进入 hive hbase

create 就可以 顺利的执行了。

\无效

 ./hbase-daemon.sh  --config ../conf start regionserver

查看日志

WARN regionserver.HRegionServerCommandLine: Not starting a distinct region server because hbase.cluster.distributed is false

查看配置文件hbase-site.xml

    <property>

        <name>hbase.cluster.distributed</name>

        <value>true</value>

        <description>The mode the cluster will be in. Possible values are false: standalone and pseudo-distributed setups with managed Zookeeper true: fully-distributed with unmanaged Zookeeper Quorum (see hbase-env.sh)</description>

    </property>

查看regionservers 里面配置错一个IP,改正后分发给每个节点

然后建表,妥妥地。

### HBase 创建 Admin 报错解决方案 当在 HBase创建 `Admin` 对象时遇到错误,通常可能是由于配置不正确、依赖库版本冲突或其他环境问题引起的。以下是可能的原因分析及对应的解决方案: #### 1. 配置文件路径未正确加载 如果 HBase 的配置文件(如 `hbase-site.xml` 或其他相关 XML 文件)未能被正确读取,则可能导致无法初始化 `Admin` 实例。 - **解决方法**: 确保程序能够找到并加载正确的 HBase 配置文件。可以通过设置 Java 系统属性来指定配置文件的位置[^3]。 ```java System.setProperty("hbase.configuration.directory", "/path/to/hbase/conf"); Configuration config = HBaseConfiguration.create(); Admin admin = ConnectionFactory.createConnection(config).getAdmin(); ``` --- #### 2. ZooKeeper 服务不可用 ZooKeeper 是 HBase 正常运行所必需的服务之一。如果没有正常启动或者连接失败,也会导致 `Admin` 初始化失败。 - **解决方法**: 按照以下顺序依次启动服务,并确认每一步都成功完成: - 启动 ZooKeeper (`zkServer.sh start`) - 启动 HDFS 和 YARN 集群 - 启动 HBase RegionServers (`start-hbase.sh`) 及 Master (`hbase-daemon.sh start master`) 通过执行命令验证 ZooKeeper 是否可用: ```bash echo stat | nc localhost 2181 ``` 如果返回状态信息示正常工作;否则需排查网络或端口绑定问题。 --- #### 3. 版本兼容性问题 某些情况下,使用的客户端 SDK 版本与实际部署的 HBase 版本不符也可能引发异常。例如 Guava 库的不同版本之间可能存在 API 差异[^4]。 - **解决方法**: 升级至匹配版本的 HBase 客户端 JAR 包及其依赖项。对于 Maven 用户来说,在 pom.xml 添加如下声明即可锁定所需组件版本号: ```xml <dependency> <groupId>org.apache.hbase</groupId> <artifactId>hbase-client</artifactId> <version>${hbase.version}</version> </dependency> <!-- Example --> <properties> <hbase.version>2.4.9</hbase.version> </properties> ``` 同时注意移除项目中重复引入的基础类库(比如 guava),防止发生冲突覆盖现象。 --- #### 4. 权限不足 即使完成了上述操作仍会碰到权限受限情况,特别是在安全模式启用后的分布式环境中尤为常见[^2]。 - **解决方法**: 登录到目标主机上的 hbase shell 并赋予当前用户足够的访问权利: ```shell grant '<username>', 'RWXCA' ``` 其中 `<username>` 替换为你正在尝试建立管理接口的应用用户名字串。 --- #### 总结 综上所述,针对不同类型的潜在诱因采取针对性措施往往能有效缓解此类难题的发生几率。当然具体实施过程中还需结合实际情况灵活调整策略方向。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值