There appears to be a gap in the edit log. We expected txid 867311, but got txid 867402.

最新推荐文章于 2022-01-09 16:03:18 发布

花沐人

最新推荐文章于 2022-01-09 16:03:18 发布

阅读量1.1k

点赞数 1

分类专栏：问题记录文章标签： hadoop linux

本文链接：https://blog.youkuaiyun.com/qq_43382641/article/details/110824545

版权

问题记录专栏收录该内容

10 篇文章

订阅专栏

在Hadoop集群断电重启后，Namenode无法正常启动，日志显示存在编辑日志的缺口，期望交易ID为867311，但实际接收到的是867402。这表明元数据出现不一致。为解决此问题，可以尝试进入Hadoop安装目录的bin下，通过执行'hadoop namenode -recover'命令，选择手动恢复模式（Y和C选项），然后启动所有服务（start-all.sh）来修复集群状态。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

项目场景：

集群断电之后重启集群,namenode启动失败,去hadoop安装目录差看日志
/hadoop/logs 发现There appears to be a gap in the edit log. We expected txid 867311, but got txid 867402.

问题描述：

down standby NN.
java.io.IOException: There appears to be a gap in the edit log.  We expected txid 867311, but got txid 867402.
        at org.apache.hadoop.hdfs.server.namenode.MetaRecoveryContext.editLogLoaderPrompt(MetaRecoveryContext.java:94)
        at org.apache.hadoop.hdfs.server.namenode.FSEditLogLoader.loadEditRecords(FSEditLogLoader.java:218)
        at org.apache.hadoop.hdfs.server.namenode.FSEditLogLoader.loadFSEdits(FSEditLogLoader.java:146)
        at org.apache.hadoop.hdfs.server.namenode.FSImage.loadEdits(FSImage.java:891)
        at org.apache.hadoop.hdfs.server.namenode.FSImage.loadEdits(FSImage.java:872)
        at org.apache.hadoop.hdfs.server.namenode.ha.EditLogTailer.doTailEdits(EditLogTailer.java:262)
        at org.apache.hadoop.hdfs.server.namenode.ha.EditLogTailer$EditLogTailerThread.doWork(EditLogTailer.java:395)
        at org.apache.hadoop.hdfs.server.namenode.ha.EditLogTailer$EditLogTailerThread.access$300(EditLogTailer.java:348)
        at org.apache.hadoop.hdfs.server.namenode.ha.EditLogTailer$EditLogTailerThread$1.run(EditLogTailer.java:365)
        at org.apache.hadoop.security.SecurityUtil.doAsLoginUserOrFatal(SecurityUtil.java:481)
        at org.apache.hadoop.hdfs.server.namenode.ha.EditLogTailer$EditLogTailerThread.run(EditLogTailer.java:361)
2020-12-07 16:45:36,940 INFO org.apache.hadoop.util.ExitUtil: Exiting with status 1: java.io.IOException: There appears to be a gap in the edit
 log.  We expected txid 867311, but got txid 867402.