记hadoop伪分布式部署中的HDFS进程未启动的解决办法

最新推荐文章于 2024-08-06 22:59:32 发布

zhikanjiani

最新推荐文章于 2024-08-06 22:59:32 发布

阅读量1.4k

点赞数

CC 4.0 BY-SA版权

本文链接：https://blog.youkuaiyun.com/zhikanjiani/article/details/94295195

本文详细记录了Hadoop集群搭建过程中的配置步骤，包括core-site.xml和hdfs-site.xml的设置。针对Namenode进程不启动的问题，分析了多次格式化Namenode的影响，并提供了解决方案，强调了查看日志的重要性。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

一、配置都是照着官网配置的：

vi /etc/hadoop/core-site.xml

<configuration>
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://localhost:9000</value>		//localhost后期需要修改的话，修改为机器名，切勿修改为ip；一旦ip发生变化，要修改的地方有很多。
    </property>
</configuration>

vi /etc/hadoop/hdfs-site.xml

<configuration>
    <property>
        <name>dfs.replication</name>
        <value>1</value>
    </property>
</configuration>

在使用命令启动过程中，namenode进程始终不显示，
由于我多次使用bin/hdfs namenode -format这个命令，通过百度搜索得知NameNode进程未启动成功的几种情况：

一般由于多次格式化NameNode导致。在配置文件中保存的是第一次格式化时保存的namenode的ID，因此就会造成datanode与namenode之间的id不一致。
如果遇到这个问题，可以参照如下博客修改：
https://www.cnblogs.com/mtime2004/p/10008325.html
历经了多次格式化namenode，找到了问题虚拟机ip被修改之后，我沿用的还是旧ip，修改core-site.xml和root用户下/etc/hosts之间的映射关系就行，把ip进行更新