hbase 多用户写操作 regionserver突然宕掉（二）

最新推荐文章于 2024-06-28 17:11:34 发布

qiuchenl

最新推荐文章于 2024-06-28 17:11:34 发布

阅读量2.7k

点赞数

CC 4.0 BY-SA版权

分类专栏：分布式文件系统

本文链接：https://blog.youkuaiyun.com/qiuchenl/article/details/9019447

博客讲述了在HBase环境中，多用户进行长时间写入操作后，RegionServer出现宕机的问题。日志显示文件未能复制到足够节点。进一步排查发现，DataNode上的并发连接数超出限制，原因是配置参数`dfs.datanode.max.xcievers`设置过小。正确设置该参数值可以解决此问题。值得注意的是，作者之前因拼写错误（将`xcievers`拼为`xcievers`）未能成功解决问题。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

hbase多用户写入数据写了十个小时左右 regionserver就宕机了查看regionserver的日志文件，异常很平常，如下：

org.apache.hadoop.ipc.RemoteException: java.io.IOException: File /hbase/t/ff0b5a311419578f75678c21d5a27148/.tmp/5708637502440582008 could only be replicated to 0 nodes, instead of 1
        at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.getAdditionalBlock(FSNamesystem.java:1531)
        at org.apache.hadoop.hdfs.server.namenode.NameNode.addBlock(NameNode.java:685)
        at sun.reflect.GeneratedMethodAccessor85.invoke(Unknown Source)
        at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:25)
        at java.lang.reflect.Method.invoke(Method.java:597)
        at org.apache.hadoop.ipc.RPC$Server.call(RPC.java:563)
&nb