CDH Can't scan a pre-transactional edit log，Timed out waiting 120000ms ，JournalNode数据文件破坏集群恢复方法

最新推荐文章于 2025-06-24 17:39:58 发布

疯狂的暴走蜗牛

最新推荐文章于 2025-06-24 17:39:58 发布

阅读量2.9k

点赞数 1

CC 4.0 BY-SA版权

分类专栏： hadoop CDH 文章标签：集群数据宕机 cloudera

本文链接：https://blog.youkuaiyun.com/u010936936/article/details/74199306

简介：

CDH5.11集群，由于停电造成节点全部挂掉，重启后HDFS报错，同时由于HDFS报错，引起其他基于HDFS的应用如HBASE等也报错，恢复方法如下。

报错介绍：

我这里的错误，摘录部分日志如下：

在namenode中的报错如下

   2017-07-03 13:53:10,377 FATAL org.apache.hadoop.hdfs.server.namenode.FSEditLog: Error: recoverUnfinalizedSegments failed for required journal (JournalAndStream(mgr=QJM to [192.168.60.43:8485, 192.168.60.45:8485, 192.168.60.46:8485], stream=null)) 
 
   java.io.IOException: Timed out waiting 120000ms for a quorum of nodes to respond. 
 
           at org.apache.hadoop.hdfs.qjournal.client.AsyncLoggerSet.waitForWriteQuorum(AsyncLoggerSet.java:137) 
 
           at org.apache.hadoop.hdfs.qjournal.client.QuorumJournalManager.createNewUniqueEpoch(QuorumJournalManager.java:183) 
 
           at org.apache.hadoop.hdfs.qjournal.client.QuorumJournalManager.recoverUnfinalizedSegments(QuorumJournalManager.java:441) 
 
           at org.apache.hadoop.hdfs.server.namenode.JournalSet$8.apply(JournalSet.java:624) 
 
           at org.apache.hadoop.hdfs.server.namenode.JournalSet.mapJournalsAndReportErrors(JournalSet.java:393) 
 
           at org.apache.hadoop.hdfs.server.namenode.JournalSet.recoverUnfinalizedSegments(JournalSet.java:621) 
 
           at org.apache.hadoop.hdfs.server.namenode.FSEditLog.recoverUnclosedStreams(FSEditLog.java:1478) 
 
           at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.startActiveServices(FSN