Hadoop HA 搭建过程中报错：namenode格式化

爆炒海螺

于 2024-03-07 14:41:00 发布

阅读量2.6k

点赞数 29

文章标签： hadoop 大数据运维

本文链接：https://blog.youkuaiyun.com/youngboi/article/details/136532171

版权

文章讲述了在尝试格式化HDFSNamenode时遇到的错误，原因是配置文件中误设了共享编辑目录。解决方法是删除多余字符并重新部署，强调配置文件检查在Hadoop问题中的重要性。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

问题描述：

在格式化namenode时，显示报错如下

2024-03-07 13:55:30,543 ERROR namenode.FSNamesystem: FSNamesystem initialization failed.
java.io.IOException: Invalid configuration: a shared edits dir must not be specified if HA is not enabled.
   at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.<init>(FSNamesystem.java:794)
   at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.<init>(FSNamesystem.java:735)
   at org.apache.hadoop.hdfs.server.namenode.NameNode.format(NameNode.java:1180)
   at org.apache.hadoop.hdfs.server.namenode.NameNode.createNameNode(NameNode.java:1645)
   at org.apache.hadoop.hdfs.server.namenode.NameNode.main(NameNode.java:1755)
2024-03-07 13:55:30,549 INFO namenode.FSNamesystem: Stopping services started for active state
2024-03-07 13:55:30,549 INFO namenode.FSNamesystem: Stopping services started for standby state
2024-03-07 13:55:30,549 WARN namenode.NameNode: Encountered exception during format:
java.io.IOException: Invalid configuration: a shared edits dir must not be specified if HA is not enabled.
   at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.<init>(FSNamesystem.java:794)
   at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.<init>(FSNamesystem.java:735)
   at org.apache.hadoop.hdfs.server.namenode.NameNode.format(NameNode.java:1180)
   at org.apache.hadoop.hdfs.server.namenode.NameNode.createNameNode(NameNode.java:1645)
   at org.apache.hadoop.hdfs.server.namenode.NameNode.main(NameNode.java:1755)
2024-03-07 13:55:30,549 ERROR namenode.NameNode: Failed to start namenode.
java.io.IOException: Invalid configuration: a shared edits dir must not be specified if HA is not enabled.
   at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.<init>(FSNamesystem.java:794)
   at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.<init>(FSNamesystem.java:735)
   at org.apache.hadoop.hdfs.server.namenode.NameNode.format(NameNode.java:1180)
   at org.apache.hadoop.hdfs.server.namenode.NameNode.createNameNode(NameNode.java:1645)
   at org.apache.hadoop.hdfs.server.namenode.NameNode.main(NameNode.java:1755)
2024-03-07 13:55:30,550 INFO util.ExitUtil: Exiting with status 1: java.io.IOException: Invalid configuration: a shared edits dir must not be specified if HA is not enabled.

问题分析：

根据报错"如果未启用ha，则不得指定共享编辑目录"提示定位到./hdfs-site.xml文件。在hdfs-site.xml文件中配置过两个共享目录，分别是journalnode namenode，查看后发现journalnode.edits多输入一个t

问题解决：

删除多余的t，重新分发hadoop到salve1 slave2节点

再次进行namenode格式化

格式化成功问题解决

总结：

在修改配置文件部分一定要细心，namenode格式化过程中报错大多都是配置文件写错了。根据报错找到对应文件进行修改。