CDH部署失败卸掉重装，一定要把后台关于Agent的python进程kill

原创 于 2021-07-27 09:09:14 发布 · 192 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#python

本文介绍了一种通过命令行终止特定进程的方法。使用ps命令查找supervisord进程，并利用kill命令结合获取到的进程ID将其终止。此过程重复两次，确保进程被完全关闭。

下面展示一些 内联代码片。

ps -ef | grep supervisord
kill -9 $PID

ps -ef | grep supervisord
kill -9 $PID
Mr.xinfeng
关注
Cloudera Manager集群(CDH6.2.0.1)完整搭建指南
打造全国最全的AI Agent开发知识领域的博客
08-25 5930
引子 啊，大数据！ 其实并不难，难的是你“愿不愿意学”。因此我们以一篇大数据的环境搭建来入门。 2005年，会在redhat 7上搭建oracle，搭完跑通，就能拿到5000块钱。因此，在那时流行着一句话：如何学linux？在linux上会装oracle了你就会linux了。 那么大数据的安装将是在linux上安装10几个乃至几十个oracle的工作量，涉及到的知识之广，分门别类。在此，我以一文将这些知识点全部串通起来，使得按照此文安装的人员可以迅速在1天内即完成大数据集群的安装以及了解到一些相关的
Spark面试问题总结
最新发布
weixin_41367158的博客
03-07 629
在Spark中有两类task，一类是shuffleMapTask，一类是resultTask，第一类task的输出是shuffle所需数据，第二类task的输出是result，stage的划分也以此为依据，shuffle之前的所有变换是一个stage，shuffle之后的操作是另一个stage。但是这里必须要注意的是，在实际的生产环境中，恐怕能够直接用这种策略的场景还是有限的，如果RDD中数据比较多时（比如几十亿），直接用这种持久化级别，会导致JVM的OOM内存溢出异常。如果提交失败了，它将会重试；
在CDH环境上安装python3
weixin_30782293的博客
05-16 494
安装了python3之后，miniconda会在客户端再次访问Linux系统时，自动切换为python3运行环境，此时如果重启CDH中需要用到python的组件(比如impala)，这些组件就会因为找不到默认的python2.7路径而报错，因此需要按照以下方式修改配置信息： vim .bashrc export PATH="$PATH:/root/miniconda3/bin" ...
从CDH Agent错误日志学习Python拆包语法
shirukai
10-11 573
从CDH Agent错误日志学习Python拆包语法 国庆七天长假回来上班，迟迟没有进入工作状态，可能祖国的强大，让我不自觉的也飘了起来，哈哈，该收拾收拾心情，为祖国之繁荣而努力加班挣money了。今天通过解决公司开发环境的一个问题，让我瞬间进入了战斗状态，并且顺便学了一下Python拆包的一些语法，还是挺有意思的。 1 CDH Agent错误日志解决 放假回来，同事发现公司开发环境的CDH集群挂...
0551-6.1-普通用户配置kill CDH集群进程权限
Hadoop_SC的博客
11-30 375
1 文档编写目的 在前面的文章《0548-5.13.1-如何使用普通用户管理CM server和agent服务》解决了只能使用普通用户来管理CM和Agent服务的需求。本文档介绍如何为一个普通用户添加免密kill CDH集群中cloudera-scm-server、cloudera-scm-agent、supervisord进程，结合配置的免密systemctl权限，使得该普通账号能真正作为CDH...
CDH报错 agent异常
chenzhenguo
12-18 4756
在我添加agen节点的时候报错， 查看日志是报错信息如下  查看agent 节点日志 tail -f  /opt/cloudera-manager/cm-5.8.0/log/cloudera-scm-agent/cloudera-scm-agent.log          [18/Dec/2018 13:53:44 +0000] 1686 MainThread agent      ...
CDH搭建
FenKangDeAoTeMan的博客
09-23 816
CDH搭建 一、Apacha Hadoop的缺点 版本管理混乱。 部署过程繁琐、升级过程复杂。 兼容性差。 安全性低。 二、Hadoop发型版本 Apache Hadoop（原生版hadoop） Cloudera’s Distribution Including Apache Hadoop（CDH版本） Hortonworks Data Platform（HDP） MapR EMR … 三...
CDH的卸载
muyingmiao的专栏
10-25 1241
1.卸载前的规划 1.1 做镜像备份 1.2 关闭集群 及 MySQL服务 1.3 删除部署文件夹 /opt/cloudera* 1.4 删除数据文件夹 2.卸载集群 2.1 确认各服务组件的存储数据目录，以HDFS YARN ZK为例 /dfs/nn /dfs/dn /dfs/snn YARN /yarn/nm ZK /var/lib/zookeeper 2.2 关闭集群 及 MySQL服...
Cloudera Manager安装
Kim_Weir的专栏
04-14 1339
Cloudera Manager 介绍Cloudera Manager可以轻松管理任何生产规模的Hadoop部署。通过直观的用户界面快速部署，配置和监控群集 - 完成滚动升级，备份和灾难恢复以及可定制警报。 Cloudera Manager作为Cloudera Enterprise的集成和支持部分提供。参考：https://www.cloudera.com/documentation/enterp...
cdh的agent无法启动
qq_24365213的博客
11-13 2403
查看supervisord的日志有如下错误： [root@cdh1 ~]#  cat /opt/cm-5.10.0/log/cloudera-scm-agent/supervisord.out  /opt/cm-5.10.0/lib64/cmf/agent/build/env/lib64/python2.7/site-packages/supervisor-3.0-py2.7.egg/supe
Cloudera Manager agent无法启动，拒绝链接 Failed! trying again in 2 second(s): [Errno 111] Connection refuse
jast
04-09 5848
启动agent节点失败，提示拒绝连接，百度一下很多人说解决方式是用ps -ef | grep supervisord查看是否有进程，有的话 kill 掉（使用kill -9 会自动拉起进程，使用kill），然后重启即可，kill掉后依然无法启动 cloudera-scm-agent.log日志文件报错如下 [01/Apr/2019 16:46:19 +0000] 97874 ...
CDH agent节点删除后怎样及进行恢复【解决】
Jecky的博客
09-22 1107
起因：卸载了mysql结果把某个CDH中的agent节点删除了，这是我第二次干这种蠢事了。做事之前一定要想清楚怎么做，步骤是什么，可能会发生的情况！！！ 只能尽量挽回了，进行认真对比后，我发现被卸载的agent上的节点并没有将服务丢弃，只是没了agent的服务，如下： 所以我尝试重新进行了安装agent的步骤，因为我的agent是经过自己的配置的yum源进行安装，步骤如下： 1、先检查agnet版本： yum search cloudera-manager 2、进行安装 yum -y i.
客户端 cloudera-scm-agent启动报错
weixin_34159110的博客
07-02 1003
环境cloudera5.4.1CentOS release 6.6 x64报错[02/Jul/2015 04:03:31 +0000] 18593 MainThread agent ERROR Heartbeating to localhost:7182 failed.Traceback (most recent call last): File "/...
安装Cloudera Manager Server和Agent过程中遇到的问题
叶不二
05-14 8928
在安装hadoop 的cloudera manager 和 agent的过程中  版本 5.5.1 /opt/cm-5.5.1/etc/init.d/cloudera-scm-server start 是能正常启动的 /opt/cm-5.5.1/etc/init.d/cloudera-scm-agent 则无法正常启动 去查看了一下日志文件，也没有看出是什么错误，然后重装了好几次，还是这
cloudera-scm-agent启动失败 /usr/bin/env: python2.6: 没有那个文件或目录
这个博客：
11-11 2317
cloudera-scm-agent启动失败 查看.out文件显示/usr/bin/env: python2.6: 没有那个文件或目录。解决该问题后，cloudera-scm-agent启动成功。
CDH重启服务cloudera-scm-agent启动失败（ MainThread agent ERROR Heartbeating to 172.16.66.242:7182 ）
热门推荐
qq_30921461的博客
04-12 2万+
今天我登陆cdh监控页面172.16.66.242:7180界面时发现拒绝访问，发现我的cdh服务挂掉了。这个没啥，我就准备重启服务嘛，按照正常流程，先检查下mysql服务先确保mysql启动服务service mysqld status如果没有开启重启下service mysqld restart然后进入cd /opt/cloudera-manager/cm-5.11.1/etc/init.d然...
cloudera-scm-agnet 启动报错找不到libpython2.6.so.1.0
KNIFE_PAN的专栏
02-03 6219
1.下载Python-2.6.6.tar.bz2  https://www.python.org/download/releases/2.6.6/ 2.yum install bzip2-devel (必须，如果不安装，即便编译好python，scm-agent也无法启动) 2.tar -xvjf Python-2.6.tar.bz2 3. ./configure --prefix=/u
CDH离线部署指南：ClouderaManager安装和配置
CDH离线部署文档旨在指导用户使用ClouderaManager离线部署CDH，包括系统环境搭建、ClouderaManagerServer&Agent安装、CDH安装等步骤。该文档详细记录了每一步骤的操作过程，方便用户快速部署CDH。 二、系统环境搭建...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值