HA hadoop不能上传到hdfs，遇到WARN hdfs.DFSClient: DataStreamer Exception

最新推荐文章于 2025-02-20 14:33:30 发布

tsaideng

最新推荐文章于 2025-02-20 14:33:30 发布

阅读量1.9k

点赞数 2

分类专栏： Hadoop zookeeper

本文链接：https://blog.youkuaiyun.com/john_deng2/article/details/103440934

版权

在尝试将文件上传到HDFS时遇到WARN hdfs.DFSClient: DataStreamer Exception错误。解决方案包括检查并确保dfs.namenode.name.dir和dfs.datanode.data.dir在hdfs-site.xml中的配置一致性，以及重启DataNode。如果当前目录不一致，需进行调整。另一种方法是关闭NameNode和DataNode，删除current文件夹，重新格式化NameNode，然后启动。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

案例：
在准备put一个file到 hdfs的时候，遇到以下错误。

[root@hadoop01 current]# hdfs dfs -put /home/words /
19/12/05 15:49:14 WARN hdfs.DFSClient: DataStreamer Exception
org.apache.hadoop.ipc.RemoteException(java.io.IOException): File /words._COPYING_ could only be replicated to 0 nodes instead of minReplication (=1).  There are 0 datanode(s) running and no node(s) are excluded in this operation.
	at org.apache.hadoop.hdfs.server.blockmanagement.BlockManager.chooseTarget4NewBlock(BlockManager.java:1620)
	at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.getNewBlockTargets(FSNamesystem.java:3135)
	at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.getAdditionalBlock(FSNamesystem.java:3059)
	at org.apache.hadoop.hdfs.server.namenode.NameNodeRpcServer.addBlock(NameNodeRpcServer.java:725)
	at org.apache.hadoop.hdfs.protocolPB.ClientNamenodeProtocolServerSideTranslatorPB.addBlock(ClientNamenodeProtocolServerSideTranslatorPB.java:493)
	at org.apache.hadoop.hdfs.protocol.proto.ClientNamenodeProtocolProtos$ClientNamenodeProtocol