could only be replicated to 0 nodes,instead of 1

本文介绍了在使用Hadoop进行文件复制操作时遇到的问题及解决方法。主要表现为无法将本地文件复制到Hadoop根目录下,并提示错误信息。通过检查发现datanode存在问题,最终定位到防火墙自动启动导致的问题,并给出了具体的解决步骤。

错误:Error Recovery for block null bad datenode[0] nodes==null

             ......

           copyFromLocal:java.io.IOException:File...could only be replicated to 0 nodes,instead of 1

 

我执行了下面几个指令:

hadoop fs -lsr /                 查看hadoop 的根目录,没有发生错误

hadoop fs -mkdir test       创建一个目录,也没有错误

hadoop fs -rmr 1.txt          删除一个文件,也没有错误

hadoop fs -copyFromLocal 1.txt /     复制本地文件1.txt 到hadoop 根目录下,这个就报上面的错误

 

分析:

可以创建目录,可以查看文件,可以删除文件,但是就是不能放数据,说明namenode没有问题,肯定是datenode有问题,0个节点,我又分以下检测datenode

1.查看slaves文件中是否记录了datenode

2.查看防火墙是否关闭

 

发现,防火墙没有关闭,前面由于,datenode重启后,然后,防火墙自动启动,可以把防火墙的开机自动启动关闭,通过chekconfig --levle iptabls来设置。

 

转载于:https://www.cnblogs.com/robert-blue/p/4137273.html

评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符  | 博主筛选后可见
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值