secondnmaenode中错误：“Inconsistent checkpoint fields”的解决方案

Hadoop SecondNameNode 错误修复
最新推荐文章于 2024-09-29 09:20:33 发布
原创 最新推荐文章于 2024-09-29 09:20:33 发布 · 583 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#hadoop问题汇总

本文介绍了解决 Hadoop 中 SecondNameNode 出现的 Inconsistent checkpoint fields 错误的方法。此错误通常由 SecondNameNode 数据目录下的 editlog 与先前的数据版本不一致引起。解决方案包括删除 SecondNameNode 下的相关文件并重启。

当hadoop集群在运行是，出现SecondnameNode报错，字段为“Inconsistent checkpoint fields”不一致的检查点字段，如下图：



导致错误的原因：secondnamenode的数据目录下的edit log一以前额度数据百衲本不一致导致


解决方法：删除secondnamenode下的文件重启，即可。secondnamenode的路径可以在hdfs.site.xml中找寻。


解决后的运行错误消失，如下图所示：



Python中常出现TabError: inconsistent use of tabs and spaces in indentation错误解决方法
吉大秦少游
06-26 1万+
TabError: inconsistent use of tabs and spaces in indentation 这个错误目前笔者在Sublime3遇到的都是看似空格实则没有空格引起的:： 解决方法：就是打开sublime的空格制表显示就可以清楚的显示出自己是否真的空格了。 Sublime3显示空格制表符的设置方法： ①.Preferences -> Setting ②在Prefe...
SecondaryNameNode的Inconsistent checkpoint fields异常
weixin_34235457的博客
05-14 193
2019独角兽企业重金招聘Python工程师标准>>> ...
SecondaryNameNode中的“Inconsistent checkpoint fields”错误原因
weixin_34348805的博客
04-19 243
该错误原因，可能是因为没有设置好SecondaryNameNode上core-site.xml文件中的“hadoop.tmp.dir”。 2014-04-17 11:42:18,189 INFO org.apache.hadoop.hdfs.server.namenode.SecondaryNameNode: Log Size Trigger :10000...
hadoop报Inconsistent checkpoint fields.
MR_Wxm的博客
07-16 406
1、首先查看一下错误日志 2、看了许多博客，都说是多次格式化导致的版本不一致，有说clusterId的，又说namespaceID，有点迷，所以直接看源码吧，一个版本判断应该还是可以看懂的，通过抛异常的路径找到https://github.com/apache/hadoop/blob/1f71c4ae71427a8a7476eaef64187a5643596552/hadoop-hdfs-project/hadoop-hdfs/src/main/java/org/apache/hadoop/hdfs/
hadoop 异常 Inconsistent checkpoint fields
秀才的专栏
07-01 4958
hadoop second namenode异常 Inconsistent checkpoint fields没有访问量情况下，namenode进程：cpu 100% ；内存使用超多；没有错误日志；secondarynamenode报错：java.io.IOException: Inconsistent checkpoint fields.LV = -57 namespaceID = 371613
启动secondrynamenode失败 namenode.SecondaryNameNode: Exception in doCheckpoint java.io.IOException: Inconsistent checkpoint fields.
最新发布
07-21
完成上述操作后，检查 SecondaryNameNode 的日志文件，确认是否仍有 `Inconsistent checkpoint fields` 错误。若问题已解决，则集群应恢复正常运行，NameNode 与 SecondaryNameNode 的元数据状态保持一致。 此外，...
解决顽固的TabError: inconsistent use of tabs and spaces in indentation
热门推荐
河西~石头
04-13 1万+
各种python编辑器中缩进的设置和显示，通过设置从根上解决缩进导致的错误。同时介绍了解决已出现的缩进错误的方法。
ORA-00932: inconsistent datatypes: expected - got NCLOB
weixin_42537012的博客
12-13 3079
ORA-00932: inconsistent datatypes: expected - got NCLOB
Phoenix报错:Error: ERROR 726 (43M10): Inconsistent namespace mapping properties. 开启或关闭命名空间而导致
ABU009的博客
09-29 891
#打开hbase命名空间后#Phoenix崩溃
TensorFlow加载模型时出错的解决方式
09-18
今天小编就为大家分享一篇TensorFlow加载模型时出错的解决方式，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
hadoop 报错 java.io.IOException: Inconsistent checkpoint fields
gs80140的专栏
08-24 1000
关注的点是 blockpoolID ,clusterID,namespaceID, 格式化后 name目录下面这个id变了, 要改成旧的。name目录: /home/hadoop/dfs/name/current/VERSION内容。/home/hadoop/dfs/name/current/VERSION 的内容中的。这个63不能乱换, 主要思路就是保持各个VERSION一致。背景: 使用了格式化,导致首重了新的集群ID。最终各个目录内的VERSION如下。
hadoop异常：Inconsistent checkpoint fields
weixin_42316741的博客
09-26 826
  错误： 原因：          hadoop的升级功能需要data-node在它的版本文件里存储一个永久性的clusterID，当datanode启动时会检查并匹配namenode的版本文件里的clusterID，如果两者不匹配，就会出现"Incompatible clusterIDs"的异常。 　　每次格式化namenode都会生成一个新的clusterID, 如果只格式化了n...
Secondarynamenode无法启动： checkpoint directory does not exist or is not accessible.
shanjiawei22的博客
07-13 4310
问题：使用start-all.sh或start-dfs.sh后secondarynamenode没有启动。使用 hdfs secondarynamenode命令，查看错误信息提示 Directory /usr/local/hadoop/tmp/dfs/namesecondary is in an inconsistent state: checkpoint directory does not e...
f2fs mkdir创建目录过程分析
tianweishuiguo的专栏
11-09 1555
不论是文件，还是目录，在文件系统中都由inode表示，本篇主要看一下创建一个目录f2fs都做了哪些事情，创建了哪些结构，什么样的格式，怎样最终存储到存储中。 SYSCALL_DEFINE3(mkdirat, int, dfd, const char __user *, pathname, umode_t, mode) { struct dentry *dentry; struct pat...
学
weixin_37714014的博客
11-17 658
鸟哥linux学习 2017.11.14 计算机概论 1.计算器定义为:『接受用户输入指令不数据,由中央处理器的数学与逻辑单元运算处理后, 以产生或储存成有用的信息』; 2.计算机硬件五大单元   输入单元:包括键盘、鼠标、卡片阅读机、扫描仪、手写板、触控屏幕等等一堆;   输出单元:例如屏幕、打印机等等   控制单元   算术逻辑单元   主存储器 CPU 为一个具有特
HDFS中的checkpoint（ 检查点 ）的问题
weixin_30352191的博客
08-05 1631
1、问题的描述 由于某种原因，需要在原来已经部署了Cloudera CDH集群上重新部署，重新部署之后，启动集群，由于Cloudera Manager 会默认设置dfs.namenode.checkpoint.period和dfs.namenode.checkpoint.txns分别是1个小时和1000000。只要达到这两个条件之一，secondarynamenode会执行checkp...
bug：ERROR org.apache.hadoop.hdfs.server.namenode.SecondaryNameNode: Exception in doCheckpoint
安小乐
06-11 5144
hadoop.tmp.dir配置参数指定hdfs的默认临时路径，这个最好配置，如果在新增节点或者其他情况下莫名其妙的DataNode启动不了，就删除此文件中的tmp目录即可。不过如果删除了NameNode机器的此目录，那么就需要重新执行NameNode格式化的命令。（我觉得这其实就是因为上面那个原因造成的。按照上面那个第二个方法去做就行了。）
Hadoop学习——HDFS中的Snapshot和Checkpoint
07-09 5320
Snapshot（快照）：在数据库或者文件系统中，一个快照表示对当前系统状态的一个备份，当系统发生故障时，可以利用这个快照将系统恢复到产生快照时的样子。 Checkpoint（检查点）：因为数据库系统或者像HDFS这样的分布式文件系统，对文件数据的修改不是直接写回到磁盘的，很多操作是先缓存到内存的Buffer中，当遇到一个检查点Checkpoint时，系统会强制将内存中的数据写回磁盘，当然此时才
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值