安小乐

详细总结了hadoop伪分布式集群搭建、分布式集群搭建、以及搭建时遇到的一些问题。

错误描述：      搭建伪分布式hadoop时，format namenode之后，start-dfs.sh启动hdfs，jps发现datanode启动后不久就自动死掉了。在日志文件：/usr/local/hadoop/hadoop-2.6.0/logs/hadoop-liuxianfa-datanode-liuxianfa8.out中看到如下报错信息。上网查了一下，发现了解决办法如下。

hadoop.tmp.dir配置参数指定hdfs的默认临时路径，这个最好配置，如果在新增节点或者其他情况下莫名其妙的DataNode启动不了，就删除此文件中的tmp目录即可。不过如果删除了NameNode机器的此目录，那么就需要重新执行NameNode格式化的命令。（我觉得这其实就是因为上面那个原因造成的。按照上面那个第二个方法去做就行了。）

secondary namenoded 配置很容易被忽视，如果jps检查都正常，大家通常不会太关心，除非namenode发生问题的时候，才会想起还有个secondary namenode