CDH启动agent 报错求大神解析 解决了三天了 还没解决好

最新推荐文章于 2022-04-05 22:11:11 发布
原创 最新推荐文章于 2022-04-05 22:11:11 发布 · 2.4k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

博客内容讲述了在启动CDH agent时遇到401 Unauthorized错误，尝试多种方法如重启supervisord进程无效。最终发现解决方法是在杀死supervisord进程后立即重启cloudera-scm-agent，避免进程重新启动。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

启动agent 日志报错信息如下
cd /opt/cm-5.14.0/log/cloudera-scm-agent
tail -n 200 cloudera-scm-agent.log
在这里插入图片描述
ProtocolError: <ProtocolError for 127.0.0.1/RPC2: 401 Unauthorized>
[13/Aug/2019 09:10:14 +0000] 8405 MainThread agent ERROR Failed to connect to newly launched supervisor. Agent will exit
[13/Aug/2019 09:10:14 +0000] 8405 MainThread agent INFO Stopping agent…
[13/Aug/2019 09:10:14 +0000] 8405 MainThread agent INFO No extant cgroups; unmounting any cgroup roots
[13/Aug/2019 09:10:14 +0000] 8405 Dummy-1 daemonize WARNING Stopping daemon.

试了网上很多说法 不行 已经不知道怎么办了
方法是：
$> ps -ef | grep supervisord
$> kill -9
sudo service cloudera-scm-agent restart

我试了 结果如下 杀不死 supervisord进程以另一个ip再次出现

在这里插入图片描述cm的web界面出来了 如下 受管的主机中只有主节点的

最低0.47元/天 解锁文章

200万优质内容无限畅学
secretyzh
关注
CDH安装过程中出现的问题- CDH启动agent失败
萌兔兔MMQ！！
08-15 1379
请教了我的一个前辈（马可老师）后得知大概起始给系统挂载分盘时候分配的磁盘太小，然后随着日后使用，磁盘不够，有2种解决方法，第一种治标的，采用删除日志方法，linux系统所有文件的日志保存在/var/log下，可以删日志把空间腾出来，我就用进程查看了****意，此时我的4台机器，242server主节点启动成功，242,243两台ip的机器agent没有启动成功，244,245的agent启动成功了）......
已解决：centos7下cdh集群报错总结，环境CDH6.3.2+cm6.1，持续更新
人生是一场修行
05-02 2104
之前我的虚拟机用的都是ambari搭建的HDP，由于看到网上讲的和朋友讲的企业中用的一般是CDH，且CDH的稳定性和效率也会比较高。所以今晚就在虚拟机上搭建了CDH。(只不过我搭建的不是集群，只是在一个机器上搭建) 具体搭建过程，我总结好了，可以私信我直接获取 cdh搭建的有道云笔记，有空再写上来。 以下是相关的一些注意事项和错误总结！ 1.httpd无法进入，重启也不行的解决方法 如果已经用启动命令了但是无法进入网页或者报错的话，排除端口开放问题和防火墙问题之后。那么先用yum卸载httpd和mod_ws
安装CDH出现file /opt/cloudera/parcels/.flood/CDH-6.2.0-1.cdh6.2.0.p0.967373-el7.parcel...does not exist
热门推荐
黄智霖的博客
05-22 1万+
使用Cloudera Manager采取parcel方式安装CDH的时候，部分agent节点出现异常： Src file /opt/cloudera/parcels/.flood/CDH-6.2.0-1.cdh6.2.0.p0.967373-el7.parcel/CDH-6.2.0-1.cdh6.2.0.p0.967373-el7.parcel does not exist 查看对应age...
CDH集群安装agent启动后报错Failed to connect to previous supervisor.
housh89的博客
04-16 1648
解决办法，先把所有的agent用命令stop掉，命令如下： /opt/cloudera-manager/cm-5.16.1/etc/init.d/cloudera-scm-agent stop ps -aux|grep cloudera-scm-agent 找到/opt/cloudera-manager/cm-5.16.1/run/cloudera-scm-agent/events 这个...
Cloudera Agent启动报错-Failed to connect to previous supervisor
数据源的港湾
04-05 1230
现象 某CDH环境由于有节点重启，重启后发现Cloudera Agent服务异常。从Agent日志中查看报错如下截图所示。 分析 正常Agent启动后df -h看到有一个挂载的/var/run/process进程，但是此时Agent起来的我们找不到这个进程。 根据网上相关文章显示，系统异常宕机后导致启动后临时文件不能访问。 通过以下命令我们找到 for mnt in $(mount|cut -d ' ' -f 3); do stat $mnt 1>/dev/null 2>&1; rc=
401 Unauthorized: ERROR Failed to connect to newly launched supervisor. Agen
kismet2399的博客
12-24 2763
该情况分为两种: 一:/opt/XXXX/lib/cloudera-scm-agent/目录下的uuid一样导致 处理方式:1,删除该节点下/opt/XXXX/lib/cloudera-scm-agent/目录下的所有文件                2,清空主节点CM数据库               3,重启cloudera-scm-agent 二:agent 旧的端口没有关闭, ...
CDH运维报错问题
hcq_lxq的博客
08-21 3481
ERROR Failed to connect to previous supervisor 问题背景： CDH有一台服务器重启，然后重启agent的服务的时候总是重启后自动挂掉，该节点的所有大数据的组件都不能开启。 查看log目录下的agent启动日志发现报如下错误： ERROR Failed to connect to previous supervisor 后来查询有解释说，是因为服务器重启后，再启动agent会报这个错误，除非删掉主机重新配置集群supervisor重启有残留配置在，需要清
CDH集群大数据hadoop报错解决办法及思路整理-绝对干货
12-22
CDH集群大数据hadoop报错解决办法及思路整理，主要解决大数据在运行过程中所遇到的问题，相关解决办法都是实践验证过。
CDH6.2.1 HiveOnSpark 报错问题解决
蝈蝈
11-17 2289
1 CDH6.2.1 HiveOnSpark 报错解决 错误1： FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException(message:Got exception: org.apache.hadoop.ipc.RemoteException Operation category READ is not supported in state standby. Visi
安装CDH后启动spark-shell报错解决方案
jaysen1005的博客
02-28 2440
描述 安装好CDH、Coudera Manager之后，通过Coudera Manager安装所有自带的应用，包括hdfs、hive、yarn、spark、hbase等。利用远程客户端在安装有spark的节点上，通过spark-shell启动spark，满怀期待的启动spark，but，来了个晴天霹雳，报错了，报错了！错误信息如下： 19/02/28 13:45:06 ERROR spark....
CDH安装报错记录
Mookle的博客
08-06 440
问题： can’t read /etc/cloudera-scm-agent/config.ini: No such file or directory 解决： yum --setopt=tsflags=noscripts remove cloudera-manager-agent.x86_64 0:5.13.1-1.cm5131.p0.2.el6
CDH部署及排错
weixin_40548182的博客
01-13 1274
第1章 搭建 前言 该文档为部署CDH6.3.1,其他版本的CDH安装步骤大体一样，如果安装其他版本的cdh遇到报错，请参考我的另一篇文档。 CDH-7.1.4安装报错解决 1.1 说明 这里的ip和主机名视实际情况而定 1.2 环境 操作系统 CentOS 7 服务器5台，1台master，5台slave（master兼master和slave） 主机名解析 免密登录 1.3 时间同步 Master节点操作 yum -y install chrony 配置从阿里云同步时间，注意allow后的ip段，sl
CDH平台搭建过程中主机不受管解决方案
编码强迫症患者
09-16 1万+
序言 实验室的集群中一直安装的都是原生的hadoop、hbase等生态圈软件，最近由于给出的一个技术方案涉及到hbase-indexer（虽然目前还没用上），而hbase-indexer暂时没找到Apache版本，需要自己编译，而在本机上好像出现了一些错误...
CDH安装教程
。。。。。。
12-24 4182
CDH安装教程 本篇是刚进入公司安装CDH的记录，远程服务器3台，用Xshell6 工具连接 虚拟的环境准备 1、主机名设置（每一台服务器都设置：后面没有单独说明的每台都要进行配置）： hostnamectl set-hostname dsy0 vim /etc/sysconfig/network NETWORKING=yes HOSTNAME=dsy0 cat /etc/sysconfig/network 2、网络配置： vim /etc/hosts cat /etc/hosts 3、禁
CDH报错 agent异常
chenzhenguo
12-18 4700
在我添加agen节点的时候报错， 查看日志是报错信息如下  查看agent 节点日志 tail -f  /opt/cloudera-manager/cm-5.8.0/log/cloudera-scm-agent/cloudera-scm-agent.log          [18/Dec/2018 13:53:44 +0000] 1686 MainThread agent      ...
Cloudera Manager agent无法启动，拒绝链接 Failed! trying again in 2 second(s): [Errno 111] Connection refuse
jast
04-09 5715
启动agent节点失败，提示拒绝连接，百度一下很多人说解决方式是用ps -ef | grep supervisord查看是否有进程，有的话 kill 掉（使用kill -9 会自动拉起进程，使用kill），然后重启即可，kill掉后依然无法启动 cloudera-scm-agent.log日志文件报错如下 [01/Apr/2019 16:46:19 +0000] 97874 ...
CDH6.3安装问题汇总
weixin_39338423的博客
09-07 9067
CDH 安装/运维报错解决方案
CDH 常用指令及问题处理
骑着蜗牛绕地球
03-23 4934
1.常用指令 ## 主节点启动server systemctl start cloudera-scm-server ## 从节点启动agent systemctl start cloudera-scm-agent ## 停止 systemctl stop cloudera-scm-server systemctl stop cloudera-scm-agent service supervisord stop systemctl disable cloudera-scm-server # 关闭开机启动
Kettle集成CDH6.1：Hadoop File Output错误解析与解决
在尝试使用Kettle（一种数据集成工具）与CDH 6.1（Cloudera Distribution Hadoop）集成时，遇到了一个具体的错误：`java.lang.NoClassDefFoundError: com/ctc/wstx/io/SystemId`。这个问题出现在使用Hadoop File ...
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值