CDH集群安装配置（六）CDH agent

最新推荐文章于 2022-02-16 11:27:37 发布

转载最新推荐文章于 2022-02-16 11:27:37 发布 · 697 阅读

3 ·

CC 4.0 BY-SA版权

原文链接：http://www.cnblogs.com/Jesse-Li/p/10409175.html

文章标签：

#运维

本文详细介绍了如何在线或离线安装Cloudera Manager及其相关组件，包括cloudera-manager-agent和cloudera-manager-daemons。文章涵盖了安装过程中可能遇到的依赖包缺失问题及解决方法，并提供了具体的rpm包安装命令和配置文件修改指南。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

在线安装

sudo yum install cloudera-manager-agent cloudera-manager-daemons

离线安装

上传三个server的资源包到cdh1节点上（所有节点都要安装）

cloudera-manager-daemons-6.1.1-853290.el7.x86_64.rpm

cloudera-manager-agent-6.1.1-853290.el7.x86_64.rpm

安装服务

注意：安装这两个资源大多数有可能需要安装一些依赖包，比如openssl-devel，系统一般都会提示，只要根据系统提示安装缺失的依赖包即可。下面是列举的部分。

yum install -y openssl-devel perl bind-utils libxslt cyrus-sasl-plain cyrus-sasl-gssapi portmap fuse-libs /lib/lsb/init-functions httpd mod_ssl python-psycopg2 MySQL-python

下面再安装包

rpm -ivh cloudera-manager-daemons-6.1.1-853290.el7.x86_64.rpm

rpm -ivh cloudera-manager-agent-6.1.1-853290.el7.x86_64.rpm

　修改agent所在节点【cdh1,cdh2,cdh3】配置文件config.ini内容

	sudo vi  /etc/cloudera-scm-agent/config.ini  
	server_host=cdh1 （这里我是以cdh1作为server节点）

启动Clouder Manager

在从节点【cdh1,cdh2,cdh3】启动 agent 服务

systemctl start cloudera-scm-agent

转载于:https://www.cnblogs.com/Jesse-Li/p/10409175.html

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

weixin_33884611

关注关注

0
点赞
踩
3

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

CDH6.2.0集群新增节点

Jason__zhu的博客

06-01

1228

CDH6.2.0集群新增节点背景：原有服务器集群因资源不够，需要在原有cdh集群上添加新的节点（datanode、nodemanager、kafkabroker、hbaseregionserver），ClouderaManager提供了一种可视化的添加方式。一、新加机器环境配置首先得在新的主机环境中安装JDK，关闭防火墙、修改selinux、NTP时钟与主机同步、修改hosts、与主机配置ssh免密码登录、保证安装好了perl和Python。二.安装cloudera-manager-agent

CDH集群添加新的节点

guoliduo的博客

05-29

2802

1、新加机器环境配置首先得在新的主机环境中安装JDK，关闭防火墙、修改selinux、NTP时钟与主机同步、修改hosts、与主机配置ssh免密码登录、保证安装好了perl和python。 2、上传cloudera-manager文件到/opt目录，修改agent配置文件： vi /opt/cm-5.15.0/etc/cloudera-scm-agent/config.ini server_host = Master vim etc/cloudera-scm-agent/config.ini 设

参与评论您还未登录，请先登录后发表或查看评论

CDH软硬件配置建议

12-07

该文档为Cloudera官方提供的CDH部署的软硬件配置建议，包括操作系统、JDK、浏览器、数据库、Hadoop关键组件版本、硬件配置以及网络拓扑等相关配置建议。

离线部署CDH5.3.3

nieji3057的博客

06-25

512

下载离线包：http://archive.cloudera.com/cm5/cm/5/cloudera-manager-el6-cm5.3.3_x86_64.tar.gzhttp://archive.cloudera.com/cdh5/parcels/5.3.3/CDH-5.3.3-1.cdh5.3.3.p0.5-el6.parcelhttp://archive.cloudera.com/cdh5...

CDH的配置总结

木子李下的博客

05-28

1021

一、各个节点的ip地址以及主机名的更改 1.通过ifconfig命令查询Ubuntu网卡名称，之后修改网卡配置文件。 sudo vi /etc/network/interfaces 将配置文件里面的内容改为 auto ens33 iface ens33 inet static address 192.168.9.11 netmask 255.255.255.0 gateway 192.168.9.2 2.接下来把/etc/hostname和/etc/hosts改了就行 3.关闭防火墙，命令是sudo

CDH 集群安装流程

10-18

CDH集群搭建-cm5.11.1，包括cm包下载，cdh包下载，centos下载安装，时间同步，网络配置，免密ssh，防火墙配置，hostname，安装Cloudera Manager，数据库驱动，agent配置，parcels包放置，启动cm server 和 agent，...

大数据平台CDH6.2.0安装部署

10-27

该过程包括安装Cloudera Manager Server、配置MySQL数据库、部署CDH Parcel文件、配置Cloudera Manager Agent等步骤。一、安装Cloudera Manager Server Cloudera Manager Server是大数据平台的核心组件，负责管理...

CDH集群各组件配置

延宝小白马的博客

01-03

1693

cdh配置、大数据组件配置yarn、flume、spark、hive、hue等

ubuntu完全分布式搭建CDH集群（Cloudera Manager）

04-20

4. **安装 CDH 集群**: - 上传 `CDH-5.10.0-1.cdh5.10.0.p0.41-trusty.parcel` 文件到 CM Server。 - 在 CM Server 的 Web 界面上激活并分发该 parcel 到所有节点。 5. **配置 CDH 服务**: - 通过 CM 的 Web ...

CDH+集群安全启动和关闭.doc

最新发布

03-11

### CDH集群安全启动与关闭知识点详解 #### 一、CDH集群简介 Cloudera Distribution Including Apache Hadoop (CDH) 是一个基于Apache Hadoop的企业级大数据平台，由Cloudera公司提供支持和服务。CDH集成了众多...

CM/CDH 问题记录

mc的博客

02-16

3641

本文档为离线安装CDH 6.3.1 时，记录安装过程中出现的一些问题，供后续备查。从2021年1月31日开始，所有Cloudera软件都需要有效的订阅，并且只能通过付费墙进行访问。之前的在线安装，目前都不能用了。 1. CM/CDH 安装包无法下载由于之前的CM 安装包和CDH parcel 包都不能直接通过cloudera官网下载了，这里需要手动下载相关的安装包，地址详见CM/CDH离线下载包。下载好后，需要在CM安装集群上找台服务器配置安装包分发服务。参考官方文档CM / CDH,以及这篇比较.

搭建CDH实验环境，以三个节点为例的安装配置

weixin_34148508的博客

10-08

673

（一）实验环境l 实验介质n CentOS-7-x86_64-Everything-1708.ison jdk-8u161-linux-x64.rpmn cloudera-manager-centos7-cm5.12.1_x86_64.tar.gzn CDH-5.12.1-1.cdh5.12.1.p0.3-el7.parceln CDH-5.12.1-1.cdh5.12.1.p0.3-el7.pa...

CDH6中的各种目录

magicchu的博客

09-30

3973

Service Monitor： Service Monitor存储了时间序列和健康数据。Impla查询的元数据，Yarn应用的元数据。默认情况下，数据时存储在/var/lib/cloudera-service-monitor/文件夹下。 Host Monitor： Host Monitor存储了时间序列和健康数据。默认情况下，数据存储在/var/lib/cloudera-host-monitor/文件夹下。 cloudera官网介绍 server/agent日志 /var/log/cloudera-scm

Inspector did not run successfully.

weixin_30906671的博客

12-03

1114

装虚拟机，卡在这个报错1天了， server没有问题，其余所有的agent都不能运行。这部分没有日志，只有单纯的报错信息，omg，百度、bing一顿骚操作，还是没有解决问题。因为默认安装jdk1.7 所以图形化安装的时候我没有选择安装jdk，采用了自己的jdk，所以在这部分检查才出现问题先进网页进行jdk配置，然后重新检查，解决问题。 agent节点jdk配置将se...

CDH5.14.0 检查所有主机报“Inspector did not run sucessfully”错误

weixin_30586085的博客

09-04

2009

在安装CDH5.14.0的时候，在检查主机的时候，出现了Inspector did not run sucessfully。然后不知道怎么解决，但是CM有很好的错误提示功能。下面是检查的结果：下面会列出，你安装的机器上的相关服务。自己对比一下看哪些地方是有差异的。出现这个问题一般都是因为在文件同步的过程当中，一些文件没有同步过去导致的。所以把没同步的文件同步过去问题就会解决掉。我的...

CDH5.7 检查所有主机报“Inspector did not run sucessfully”错误

leon_liuqinburen的博客

08-30

4538

CM 管理界面点击检查所有主机，有一台机器出现了Inspector did not run sucessfully。（忘记截图了）看了下错误日志说 /usr/share/cmf 路径下出现了错误想到昨天有做操作删除了这个路径下的文件，初步怀疑是这个原因造成的。到其他机器发现该路径下的确有很多文件。抱着试一试的心态，把其他机器下该路径下文件复制过来。再次检查所有主机，全部OK。 ...

CDH平台搭建过程中主机不受管解决方案