hadoop DN不能启动,报错：DataXceiver error processing WRITE_BLOCK operation

最新推荐文章于 2023-07-07 19:22:50 发布

转载最新推荐文章于 2023-07-07 19:22:50 发布 · 8.2k 阅读

文章标签：

#hadoop

Hadoop 专栏收录该内容

2 篇文章

订阅专栏

解决Hadoop集群中DataNode数据传输错误问题，通过修改vihdfs-site.xml配置文件，将DataNode最大传输线程数设置为8192，确保数据传输效率和稳定性。

ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: hadoop-yarn.cloudyhadoop.com:50010:DataXceiver error processing READ_BLOCK operation  src: /192.168.1.104:52441 dst: /192.168.1.20:50010

修改数据传输线程个数
vi hdfs-site.xml
添加：
<property>   
    <name>dfs.datanode.max.transfer.threads</name>   
    <value>8192</value>   
    <description>   
        Specifies the maximum number of threads to use for transferring data  
        in and out of the DN.   
    </description>  
</property>  
复制到其它节点，并重启datanode。