Hadoop HDFS Namenode启动不成功

最新推荐文章于 2025-04-18 18:30:40 发布

原创最新推荐文章于 2025-04-18 18:30:40 发布 · 7.9k 阅读

7 ·

CC 4.0 BY-SA版权

文章标签：

#hadoop #hdfs #namenode

Hadoop 专栏收录该内容

9 篇文章

订阅专栏

在Pseudo-Distributed模式下启动HDFS时遇到Namenode未启动的问题，由于HDFS的格式化信息存于系统的tmp目录，每次开机被清空，导致需要重新格式化。解决方案是在core-site.xml中设置新的hadoop.tmp.dir，避免使用tmp目录，并重新格式化Namenode，然后启动HDFS，问题得到解决。

今天在Pseudodistributed mode下启动HDFS

见配置 http://blog.youkuaiyun.com/norriszhang/article/details/38659321

但是在试验向HDFS里拷贝文件时，发现出错，说没有找到namenode，用jps查看，有datanode和secondary namenode都启动起来了，但NameNode没有启动起来，用netstat -anp | grep 8020查看HDFS的默认端口8020也没有被监听。

经网上查询，得知原因：引 http://blog.youkuaiyun.com/bychjzh/article/details/7830508

原来是因为HDFS把namenode的格式化信息存在了系统的tmp目录下，该目录每次开机会被清空，因此每次重新启动机器，都需要重新格式化HDFS。

解决方案是配置一个新的tmp目录给hadoop

在$HADOOP_INSTALL/etc/hadoop/core-site.xml中添加一个property

<property>
    <name>hadoop.tmp.dir</name>
    <value>/home/norris/hadoop_tmp</value>
    <description>A base for other temporary directories.</description>
</property>

这样就把hadoop的tmp目录设置到/home/norris/hadoop_tmp下面了，就不用担心下次启动会被清空了。

配置好后，先格式化namenode

%hadoop namenode -format

再启动HDFS

%start-dfs.sh

再向HDFS里放文件。

%hadoop fs -copyFromLocal /home/norris/data/hadoop/weatherdata.txt /usr/norris/weatherdata.txt

再关机，重启，再启动HDFS

%start-dfs.sh

再查看jps

有namenode被启动起来了。

查看文件：