解决问题：使用hadoop时出现：java.io.IOException: Bad connect ack with firstBadLink ...

最新推荐文章于 2021-10-12 11:42:56 发布

李先生的李

最新推荐文章于 2021-10-12 11:42:56 发布

阅读量5.2k

点赞数

分类专栏： hadoop 问题

本文链接：https://blog.youkuaiyun.com/lijy83/article/details/8194402

版权

问题同时被 2 个专栏收录

6 篇文章

订阅专栏

hadoop

2 篇文章

订阅专栏

当使用Hadoop遇到创建输出流异常时，可能是由于并发连接数超过限制导致。可通过增加datanode中允许的最大连接数来解决此问题。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

使用hadoop时出现错误：hdfs.DFSClient - Exception in createBlockOutputStream 192.168.1.17:50010 java.io.IOException: Bad connect ack with firstBadLink as 192.168.1.24:50010

原因192.168.1.24机器datanode log里出现以下错误信息：
2012-11-16 07:50:06,452 ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: DatanodeRegistration(192.168.1.24:50010, storageID=DS-1981722178-192.168.1.24-50010-1350633535171, infoPort=50075, ipcPort=50020):DataXceiver
java.io.IOException: xceiverCount 4097 exceeds the limit of concurrent xcievers 4096

解决办法, 修改conf/hdfs-site.xml里的dfs.datanode.max.xcievers配置，增大xcievers个数，如：
<property>
<name>dfs.datanode.max.xcievers</name>
<value>16000</value>
</property>