配置Hadoop 伪分布式 _NameNode格式化问题_解决方案

最新推荐文章于 2024-05-05 19:12:30 发布

原创

最新推荐文章于 2024-05-05 19:12:30 发布 · 3.5k 阅读

5 ·

CC 4.0 BY-SA版权

文章标签：

#Hadoop #HDFS #format

在Ubuntu 16.04上配置Hadoop 2.9.1伪分布式环境时遇到NameNode格式化错误，问题定位在权限和配置文件路径。关闭防火墙，修改目录权限后，删除配置文件中自定义路径，使用默认生成的目录解决了格式化问题。进一步出现的tmp文件缺失和Namenode自动挂掉的问题，通过设置配置文件中的hadoop.tmp.dir为绝对路径得以解决。最终成功启动并保持稳定。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

【Ubuntu 16.04 Hadoop2.9.1】

跟着厦大林子雨的实验指南配置伪分布式环境时出现了以下问题：

在修改了/etc/hadoop/core-site.xml & /etc/hadoop/hdfs-site.xml后

namenode -format时出现 Cannot create directory /Softwares/hadoop/tmp/dfs/name/current 异常

具体配置文件修改如下：

<configuration>
    <property>
        <name>hadoop.tmp.dir</name>
        <value>file:/Softwares/hadoop/tmp</value>
        <description>Abase for other temporary directories.</description>
    </property>
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://localhost:9000</value>
    </property>
</configuration>