java.io.EOFException: while trying to read 65557 bytes

最新推荐文章于 2022-11-16 14:51:38 发布

fish_cool

最新推荐文章于 2022-11-16 14:51:38 发布

阅读量4.6k

点赞数 1

CC 4.0 BY-SA版权

分类专栏： hadoop

本文链接：https://blog.youkuaiyun.com/chenyi8888/article/details/8350124

hadoop 专栏收录该内容

75 篇文章

订阅专栏

本文记录了在内网环境下运行大量数据时，Hadoop datanode 出现的日志异常情况，详细展示了错误堆栈信息，并涉及 DataXceiver 和 BlockReceiver 的异常行为。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

最近在内网环境跑大量数据时，datanode日志出现以下异常：

2012-12-20 15:40:32,122 ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: DatanodeRegistration(10.200.187.193:50010, storageID=DS-1456135989-10.200.187.193-50010-1353996999806, infoPort=50075, ipcPort=50020):DataXceiver
java.io.EOFException: while trying to read 65557 bytes
        at org.apache.hadoop.hdfs.server.datanode.BlockReceiver.readToBuf(BlockReceiver.java:268)
        at org.apache.hadoop.hdfs.server.datanode.BlockReceiver.readNextPacket(BlockReceiver.java:312)
        at org.apache.hadoop.hdfs.server.datanode.BlockReceiver.receivePacket(BlockReceiver.java:376)
        at org.apache.hadoop.hdfs.server.datanode.BlockReceiver.receiveBlock(BlockReceiver.java:532)
        at org.apache.hadoop.hdfs.server.datanode.DataXceiver.writeBlock(DataXceiver.java:404)
        at org.apache.hadoop.hdfs.server.datanode.DataXceiver.run(DataXceiver.java:108)
        at java.lang.Thread.run(Thread.java:662)