启动namenode失败：FATAL error

最新推荐文章于 2023-01-31 23:12:04 发布
最新推荐文章于 2023-01-31 23:12:04 发布
阅读量1.8k 收藏
点赞数 1
CC 4.0 BY-SA版权
分类专栏： hadoop 文章标签： namenode hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/qingyang0320/article/details/51405643
本文记录了一次Hadoop集群NameNode启动时遇到的问题及解决过程。主要问题包括namenodelog报错、缺少必要目录及未进行格式化等，并详细介绍了手动创建目录、执行格式化命令直至成功启动的具体步骤。

namenode log报错如下：

FATAL org.apache.hadoop.hdfs.server.namenode.NameNode: Failed to start namenode.

org.apache.hadoop.hdfs.server.common.InconsistentFSStateException: Directory /tmp/hadoop-root/dfs/name is in an inconsistent state: storage directory does not exist or is not accessible.

查看一下/tmp/hadoop-root/dfs/name， 没有name这个目录。手动创建之。再跑start-dfs.sh,结果报错如下：

FATAL org.apache.hadoop.hdfs.server.namenode.NameNode: Failed to start namenode.
java.io.IOException: NameNode is not formatted.


那么就format呗：

# hadoop namenode -format  顺利完成，没看到什么WARN或ERROR。再跑start-dfs.sh,这回成功了。

# jps
5053 Master
2988 org.eclipse.equinox.launcher_1.3.0.v20130327-1440.jar
5130 Worker
8884 Jps
8629 NameNode
7445 SecondaryNameNode

Hadoop格式化zkfc报错：Got a fatal error, exiting now java.net.UnknownHostException: shi2: 未知的名称或服务
hair请的的博客
10-30 1596
目录 说明 报错内容 报错原因 解决方案 其他 说明 主机名：zui1 zui2 zui3 临时文件存放位置：/opt/hadoop-repo/ 报错内容 20/10/30 10:27:52 FATAL tools.DFSZKFailoverController: Got a fatal error, exiting now java.net.UnknownHostException: shi2: 未知的名称或服务 at java.net.Inet4AddressI...
启动hadoop，datanode节点启动失败：Initialization failed for Block pool.......
weixin_74606115的博客
10-16 993
总结来说如果不删除数据和日志的话，重新格式化namenode会产生新的集群ID，这样会和datanode的集群ID产生冲突，导致namenode启动失败。其次每次的namenode format都会重新创建一个namenodeId,而data目录下则包含了上次format时的id , namenode ，format。清空了namenode下的数据,但是没有清空datanode下的数据,导致启动时失败,所以要做的就是每次fotmat前,清空data下的所有目录（这是最保证的方法）
【大数据报错】ERROR namenode.NameNode: Failed to start namenode.
热门推荐
debimeng
02-07 2万+
ERROR namenode.NameNode: Failed to start namenode. 场景： 搭建hadoop3.1.1的HA分布式环境时，格式化node01节点后，在node02执行以下命令同步数据： hdfs namenode -bootstrapStandby 报错 2019-02-07 21:18:14,687 INFO namenode.NameNode: create...
Namenode:Failed to start namenode（伪分布式环境配置）
lylg_ban的博客
04-01 4348
真是“千呼万唤使出来”，NameNode结点出现真的不容易啊！！！ 搞了两天，终于出现了，可开心了，以图为鉴 第一天下载了centos7，并安装了一下 准备材料 jdk1.8和hadoop2.7 在usr目录下新建apps和data文件夹 data文件夹用于存放压缩包 apps文件夹用于安装文件 详细步骤： 第一步：确定虚拟机的IP地址（命令ipconfig）,设置IP地址与主机的映射关系 主机名可以修改的 vim /etc/hosts 第二步：关闭防火墙并查看防.
启动hadoop时，namenode无法启动，log中出现：java.io.IOException: NameNode is not formatted
阿珂学编程
09-22 1万+
纯属作死！hadoop配置好后，一定要先格式化：hadoop namenode -format 好像hadoop datanode -format也可以执行，但是没有什么效果。不推荐执行该语句。我就是配置好hadoop后，没有执行格式化，直接执行：start-all.sh 然后发现namenode无法启动，执行jps的效果如下： 查看hadoop-chj-namenode-hadoop.l
[hadoop3.1.2]无法启动namenode.Failed to start namenode.java.net.BindException: Port in use: hadoop1:9871
胖胖的博客
08-02 968
启动hdfs未启动namenode 9870端口被占用 Failed to start namenode.java.net.BindException: Port in use: hadoop1:9871 java.net.bindException:Cannot assign requested address.
解决ERROR org.apache.hadoop.hdfs.server.namenode.NameNode: Failed to start namenode.java.net.BindExce
大数据的菜????
01-31 1533
java.net.BindException: Problem binding to [hadoop01:9000] java.net.BindException: 地址已在使用;For more details see: http://wiki.apache.org/hadoop/BindException这个原因。解决ERROR org.apache.hadoop.hdfs.server.namenode.NameNode: Failed to start namenode.
NameNode异常退出问题，报错FSEditLog: Error: starting log segment 7913 failed for required journal
sunqingok的博客
09-04 1665
高可用集群其中一个NameNode退出，另一个namenode状态为standby，查看执行日志报错如下： 2019-07-25 15:32:27,481 FATAL org.apache.hadoop.hdfs.server.namenode.FSEditLog: Error: starting log segment 7913 failed for required journal (Jour...
HDFS NameNode的启动过程加速：多索引下的并行加载
走在前往架构师的路上
08-27 1744
文章目录前言HDFS NN的启动过程 前言 对于大部分使用HDFS作为大数据存储系统的用户而言，NameNode的启动过程缓慢已经可以算是一个十分痛点的问题。尤其是当NN的元数据规模达到数亿万级别时，这个过程总的耗时时间将会达到几小时的级别。这意味着什么呢？这意味着假设当系统因为异常退出时，再次恢复服务需要至少等超过1个小时以上。最近社区完成了一个重要的改进，benchmark结果显示可以让NN...
ERROR namenode.FSNamesystem: FSNamesystem initialization failed.
最新发布
03-31
此错误是 **Hadoop HDFS 的 NameNode 启动失败**的典型表现，意味着文件系统元数据（如目录结构、文件块映射等）加载过程中出现致命问题。以下是分步骤排查与解决方向： --- #### 一、常见原因及排查步骤 1. **元...
解决Failed to start namenode: Cannot assign requested address
qq_42995270的博客
05-10 804
尝试在云服务器上多节点安装 hadoop，在我node1的 start-dfs.sh 命令上，datanode正在启动，但namenode无法启动并出现以下错误 2022-05-09 16:37:45,820 ERROR org.apache.hadoop.hdfs.server.namenode.NameNode: Failed to start namenode. java.net.BindException: Problem binding to [node1:8020] java.net.BindE
Windows下hadoop环境搭建之NameNode启动报错
北桥苏的博客
02-16 6633
前言： 因为平时工作和日常接触到的大都是的中型项目，所以少有个性化推荐等涉及大数据的功能。但是后期应该也会在自己项目中添加信息推荐模块，所以就开始关注spark，hadoop，Thrift等工具，以下就以hadoop先开始，包括环境搭建和配置过程中踩坑过程。 关于hadoop的环境搭建，网上也有各种各样的教程。拿来直接按着他们的方法来，前期当前问题不大，但是呢，可能在安装过程中由于每个工具的版本不一致。又或者配置中文件路径不一样等等都很可能导致踩坑无数。不管是开发调测bu...
hadoop 2.7.1启动报错“Failed to start namenode.”
weixin_34259232的博客
07-26 1871
2019独角兽企业重金招聘Python工程师标准>>> ...
格式化namenode时报Failed to start namenode
ASN_forever的博客
09-07 1万+
18/09/06 19:40:19 ERROR namenode.NameNode: Failed to start namenode. java.lang.IllegalArgumentException: Unable to construct journal, qjournal://master:8485;master1:8485;lave1:8485;slave2:8485;slave3:...
win7下搭建hadoop环境，出现ERROR namenode.NameNode: Failed to start namenode.
mqingo的博客
01-19 9113
参考文章： https://blog.csdn.net/qq_35535690/article/details/81976032 hadoop环境已配置好，在使用hadoop namenode -format 命令启动运行的时候，报错 将hdfs-site.xml文件中的namenode和datanode的路径改为 <configuration> <prop...
NameNode启动失败
syyyyyyyyyyyyyyh的博客
06-15 803
未格式化nameNode，先进行格式化 bin/hdfs namenode -format java.io.IOException: NameNode is not formatted. at org.apache.hadoop.hdfs.server.namenode.FSImage.recoverTransitionRead(FSImage.java:250) at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.loadFSImage(F
java.io.IOException: NameNode is not formatted. 新创建的hadoop集群启动时报错namenode没有启动成功
hongchenshijie的博客
11-08 2768
出现的错误: 出错的原因: hadoop集群创建完成之后 namenode没有进行初始化 解决方法 以下均是在主节点操作 我的hadoop安装目录是 : /export/install/hadoop-2.6.0-cdh5.14.0/ 1.先关闭hadoop集群 /hadoop的安装目录/sbin/stop-all.sh 示例: /export/install/hadoop-2.6.0-cdh5...
ERROR namenode.NameNode: Failed to start namenode. java.lang.IllegalArgumentException: URI has an au
阿拉修
09-27 5951
经过排查是因为配置文件不能使用Linux的变量，如hadoop-env.sh里面 红框里面及时你已经配置好了$JAVA_HOME,也不能写export JAVA_HOME=$JAVA_HOME,要写绝对路径 我的错误就是上图红框我写成了${HADOOP_HOME}/tmp而导致的 ...
Hadoop集群启动NameNode错误 JAVA.IO.IOEXCEPTION: NAMENODE IS NOT FORMATTED
fa124607857的博客
05-21 2869
JAVA.IO.IOEXCEPTION: NAMENODE IS NOT FORMATTED. 新创建的HADOOP集群启动时报错NAMENODE没有启动成功 出现的错误: 出错的原因: hadoop集群创建完成之后 namenode没有进行初始化 解决方法 以下均是在主节点操作 我的hadoop安装目录是 : /export/install/hadoop-2.6.0-cdh5.14.0/ 1.先关闭hadoop集群 /hadoop的安装目录/sbin/stop-all.sh 示例:.
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

飞鸿踏雪Ben归来

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值