CDH4 CM启动NameNode失败的问题，请求超时

最新推荐文章于 2021-11-27 14:21:09 发布
原创 最新推荐文章于 2021-11-27 14:21:09 发布 · 1.7k 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#cloudera #hadoop集群 #namenode

本文记录了一次CDH集群因日志占用磁盘空间导致系统宕机的问题，并分享了通过解决cloudera-scm-agent服务未启动的问题来恢复正常运行的经验。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

今天上班cdh集群出现日志把系统磁盘空间占满的问题，cdh集群宕机，清理掉日志之后使用CM界面无法启动NameNode，提示请求超时，及下面的信息

Service did not start successfully; not all of the required roles started: Service hdfs1 does not have sufficient running NameNodes.

搞了很久，最后通过谷歌，搜索到原来是cloudera-scm-agent服务没有启动

链接地址http://grokbase.com/t/cloudera/scm-users/12bvqyr1c1/hdfs-cannot-start 与我出现的问题是相同的

遇到问题---CDH重启namenode--Command timed-out after 150 seconds--角色正在启动
直到世界的尽头
03-04 8429
情况 我们由于某些配置参数的调整 有时候需要重启namenode。 最方便的操作就是在CM后台直接操作–重新启动。 但是这次遇到的情况比较诡异，点击重启之后 namenode的状态变成了 已停止。 再次去点击重新启动则报错: Command aborted because of exception:Command timed-out after 150 seconds 角色正在启动 ...
解决journalnode与NameNode连接问题
weixin_40645193的博客
11-23 2020
org.apache.hadoop.ipc.Client: Retrying connect to server错误的解决的方法。 一、问题描述 HA按照规划配置好，启动后，NameNode不能正常启动。 刚启动的时候 jps 看到了NameNode，但是隔了一两分钟，再看NameNode就不见了。 测试之后，发现下面2种情况： 1）先启动JournalNode，再启动Hdfs，NameNode可以启动并可以正常运行 2）使用start-dfs.sh启动，众多服务都启动了，隔两分钟NameNode会退出，再
namenode启动失败参考
05-16
未知原因导致namenode 的fsimage等文件丢失，namenode重启失败的参考解决
cdh namenode 节点启动失败（无法打开文件）
yang_zzu的博客
10-15 2544
Can't open /var/run/cloudera-scm-agent/process/28-hdfs-NAMENODE-format/super cdh 6.1.0 安装服务的时候出现 NameNode 节点启动异常的问题 查找cloudera-config.sh 文件 find / -name cloudera-config.sh 编辑文件 cloudera-config.sh vim /opt/cloudera/cm-agent/service/common/cloude..
HDFS中namenode启动失败
weixin_30367169的博客
01-17 812
1、环境配置： 　　-1、core-site.xml文件 1 <configuration> 2 <property> 3 <name>fs.defaultFS</name> 4 <value>hdfs://bigdata-study-104:8020</value&gt...
CDH报错:请求 Service Monitor 超时。这可能会导致页面响应缓慢。
TURING.DT
11-18 1万+
CDH 运行一段时间CM管理界面提示：请求 Service Monitor 超时。这可能会导致页面响应缓慢。请查看 Service Monitor 的状态。 重启动服务器，此时服务器是没有人访问的。依然存在这个问题，查看了内存，还有15G  free，应该没问题的。 解决方法： 由于相关monitor服务的jvm配置太小导致，随着cloudera的业务量加大，垃圾回收内容增多等原因导
cm6.2.1启动失败cloudera-scm-server失败
weixin_41956627的博客
08-25 1875
启动失败cloudera-scm-server失败 [root@hd01 cloudera-scm-server]# systemctl status cloudera-scm-server ● cloudera-scm-server.service - Cloudera CM Server Service Loaded: loaded (/usr/lib/systemd/system/cloudera-scm-server.service; enabled; vendor preset: disab
Hadoop-2.5.0-cdh5.3.2 启动过程详解
Zephyr's Blog
01-01 4524
五. 启动集群 注意：在启动之前务必将配置文件都检查清楚，包括环境变量设置且生效，最后要严格按照以下的步骤启动。 5.1 启动ZooKeeper集群 在集群中安装 ZooKeeper 的主机上启动 ZooKeeper 服务。在本教程中也就是在 slave51、slave52、slave53 的主机上启动相应进程。分别登陆到三台机子上执行： zkServer.sh start 以
CDH 组件参数调优
weixin_45682234的博客
11-17 1824
1 集群参考 1.1 集群服务 1.2 Cloudera Management 服务 选项 配置值 Activity Monitor Java Heap Size 2G Alert Publisher Java Heap Size 2G Event Server Java Heap Size 2G Host Monitor Java Heap Size 4G Service Monitor Java Heap Size 4G 1.3 Zookeeper 服务
Namenode在每个整点出现RPC延迟告警故障排查
jingyi1219的博客
03-29 2559
问题描述： Namenode在每个整点都出现RPC延迟告警，告警期间Hadoop命令无返回结果。beeline连接不上hive，持续时间约5分钟左右 问题定位步骤及原因： 首先通过监控数据查看集群rpc队列等待时间和处理时间 2.统计audit日志看看rpc请求每秒的qps 3. 在hdfs审计日志目录下，执行这个命令 grep"cmd=contentSummary"hdfs-audit.log*|grep"src=/p...
hadoop基础----hadoop实战(七)-----hadoop管理工具---使用Cloudera Manager安装Hadoop---Cloudera Manager和CDH5.8离线安装
热门推荐
直到世界的尽头
11-29 1万+
hadoop基础----hadoop实战(六)-----hadoop管理工具---Cloudera Manager---CDH介绍简介我们在上篇文章中已经了解了CDH，为了后续的学习，我们本章就来安装CDH5.8。CDH5.8是目前比较新的版本，自带hadoop2.0以上的hadoop，而且已经包含了很多组件，也是我们接下来需要学习的hadoop生态圈中的组件。环境Cloudera Manager
【Hadoop技术】HDFS详解
zjjcchina的博客
09-30 497
HDFS特点 HDFS（Hadoop Distributed File System，即Hadoop分布式文件系统）是hadoop生态系统的一个重要组成部分，是hadoop中的的存储组件，在整个Hadoop中的地位非同一般，是最基础的一部分，因为它涉及到数据存储，MapReduce等计算模型都要依赖于存储在HDFS中的数据。HDFS是一个分布式文件系统，以流式数据访问模式存储超大文件，将数据分块存储到一个商业硬件集群内的不同机器上。 ​超大文件。目前的hadoop集群能够存储PB级的数据。 流式数据访问。
【转】【HDFS】hive任务报HDFS异常：last block does not have enough number of replicas
xieganyu3460的博客
10-15 9487
HIVE运行查询脚本时报错，last block does not have enough number of replicas： 1 2018-10-15 2018-07-17 2 2018-10-15 10:00:01 3 Java HotSpot(TM) 64-Bit Server VM warning: ignoring option MaxPermSize=512M; s...
简单两步在单元测试中使用HDFS和Hive
JiajunBernoulli的博客
11-27 917
INSERT VALUES Unit Test Validated SqlNode在这里插入代码片 before fix INSERT INTO `CATALOG`.`SALES`.`T3` VALUES ROW('a', CAST(1.0 AS INTEGER), CAST(1 AS SMALLINT)), ROW('b', 2, CAST(2 AS SMALLINT)), ROW('c', 3.0, CAST(3 AS SMALLINT)), ROW('d', 4.0, 4), ROW('e', 5
zkServer.sh status查看状态是报Error contacting service. It is probably not running.
wangxizhen123的博客
04-29 939
1，当我启动zookeeper集群的时候使用jps可以看到所有的机器上都出现QuorumPeerMain，但当我使用zkServer.sh status查看状态是报Error contacting service. It is probably not running.解决方法：使用netstat -ntp| grep 2181可以看到如下：[root@shizhan bin]# netstat ...
CDH CM启动命令
最新发布
05-28
好的，用户的问题是询问CDH CM的启动命令。首先我需要回忆ClouderaManager和CDH的相关知识。根据之前的引用内容，用户提到过启动CM Server的命令是/opt/cm-5.6.0/etc/init.d/cloudera-scm-server start，并且在引用1...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值