missing blocks错误

最新推荐文章于 2023-10-07 20:08:34 发布

转载最新推荐文章于 2023-10-07 20:08:34 发布 · 147 阅读

0 ·

CC 4.0 BY-SA版权

原文链接：http://www.cnblogs.com/dailidong/p/7571233.html

文章标签：

#java #大数据

本文介绍了解决Hadoop HDFSDatanode在处理文件达到上限时出现的错误情况。通过调整配置文件中的dfs.datanode.max.xcievers参数，并将其值设置为4096来解决此问题。

Datanode的日志中看到: 10/12/14 20:10:31 INFO hdfs.DFSClient: Could not obtain block blk_XXXXXXXXXXXXXXXXXXXXXX_YYYYYYYY from any node: java.io.IOException: No live nodes contain current block. Will get new block locations from namenode and retry...

有可能是Hadoop HDFS Datanode 达到了同时处理文件的上限，修改

<name>dfs.datanode.max.xcievers</name>

</property>

然后重启datanode

转载于:https://www.cnblogs.com/dailidong/p/7571233.html