Hadoop错误及解决方案集锦

下面列举了在启动Hadoop集群时出现的各种错误及解决方案

1. 当启动HDFS集群的时候，启动后用jps命令查询集群各组件状态，发现Secondary name node没有出现。

故到Hadoop服务的logs日志文件夹查看hadoop-root-secondarynamenode-VM-4-2-ubuntu.log，发现如下报错：

• Lock on /export/servers/hadoop-2.7.5/hadoopDatas/snn/name/in_use.lock或者Lock on /export/servers/hadoop-2.7.5/hadoopDatas/snn/edits/in_use.lock错误。解决方案：
  直接定位到/export/servers/hadoop-2.7.5/hadoopDatas/snn/name或/export/servers/hadoop-2.7.5/hadoopDatas/snn/edits文件夹，然后文件夹里面会看到有一个in_use.lock文件，需要手动将其删除即可解除此锁定。

• 遇到报java.net.BindException: Port in use: node01:50090，Caused by: java.net.BindException: Address already in use错误。解决方案：
  应该是之前关闭或异常关闭Hadoop集群的时候端口被占用了，可以通过命令lsof -i :50090查看端口占用的情况，然后找到对应的进程号通过命令kill -9 进程号将其占用端口的进程删除即可

2. 最近启动Hadoop成功启动以后，最初一两天能够正常运行ÿ