Cloudera 向集群添加主机

最新推荐文章于 2023-05-26 18:46:51 发布

原创

最新推荐文章于 2023-05-26 18:46:51 发布 · 4.9k 阅读

1 ·

CC 4.0 BY-SA版权

本文详细介绍了在离线模式下使用Cloudera Manager向现有集群添加主机的过程，包括必须先安装JDK和Cloudera Manager Agent，配置Agent指向Server。由于新主机上的服务可能依赖rack信息，如Flume、Hive等，因此添加后需要重启除HDFS和ZK外的集群。

本文将概述使用Cloudera Manager向集群中添加主机的操作。

首先，我们这里是采用的离线安装模式安装的，所以对于你新的主机你必须配置好如下几个内容：

安装好JDK
安装好Cloudera Manager Agent
配置Agent指向Server

操作流程

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

DV2

关注关注

0
点赞
踩
1

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

cloudera5.13.0手动添加新主机操作步骤

maximiliansheng的专栏

05-23

1754

准备工作第一步：配置主机名新机器初始化，挂载好硬盘，配置好hostname，例如 hadoop9 hostname hadoop9 vim /etc/sysconfig/network ---- HOSTNAME=hadoop9 ---- vi /etc/sysctl.conf ---- vm.swappiness = 10 ---- sysctl -p 第二步准备：...

ClouderaManager 集群搭建

最新发布

weixin_44449054的博客

12-05

862

CDH大数据平台搭建，各大数据组件的安装

参与评论您还未登录，请先登录后发表或查看评论

大数据 -- Cloudera Manager(简称CM)+CDH构建大数据平台

Graceful_scenery的博客

11-12

436

一、Cloudera Manager介绍 Cloudera Manager(简称CM)是Cloudera公司开发的一款大数据集群安装部署利器，这款利器具有集群自动化安装、中心化管理、集群监控、报警等功能，使得安装集群从几天的时间缩短在几小时以内，运维人员从数十人降低到几人以内，极大的提高集群管理的效率。开始之前其实有很多的工作要做，比如配置IP地址、关闭防火墙、配置SSH免密登录等，这些都是比...

ubuntu 12.04 安装 Cloudera Manager5及CDH5(Mysql)【添加yum源方式安装集群】

jiabiao1602的专栏

08-17

2062

原文地址：http://www.aboutyun.com/thread-9107-1-1.html 问题导读： 1.如何不使用cloudera-manager-installer.bin来安装Cloudera Manager？ 2.如何添加源？ 3.添加源的作用是什么？为了节省大家时间，这里做一些说明：如果使用的是虚拟机，那么这些虚拟机共同有的内容例如 sud

cdh集群中添加新主机

萌兔兔MMQ！！

03-09

1569

一、新加机器环境配置python 首先得在新的主机环境中安装JDK，关闭防火墙、修改selinux、NTP时钟与主机同步、修改hosts、与主机配置ssh免密码登陆、保证安装好了perl和python。linux 二、上传cloudera-manager文件到/opt目录，修改agent配置文件：web vi /opt/cm-5.7.0/etc/cloudera-scm-agent/config.inishell server_host = Mastervim vim etc/cloudera-scm-ag

【原创】Cloudera Manager的CDH4主机修改和服务重装

weixin_30877227的博客

12-06

152

Cloudera Manager的CDH4主机修改和服务重装　　前段时间安装好了CDH4.1后，运行了一段时间，后来，把主机IP地址改掉了，但是发现服务都启动不了，怎么办呢？想到的解决方式如下：把主机IP地址改回来 CDH4.1上的IP地址改成和主机IP地址一样。　　如下图，是我安装的CDH4.1的主机情况。　　第一种方法改回主机IP地址后，重启Cloudera...

ClouderaManager6.3 单机搭建

wsq_strive的博客

08-27

3045

1、修改主机名 hostnamectl set-hostname n68 2、开启ntpd 自动同步时间，并加入开机启动 systemctl status ntpd \ && systemctl start ntpd \ && systemctl enable ntpd \ && systemctl status ntpd 3、下载Clo...

修改CM管理主机IP（CDH5.0集群IP更改）

NanoTang's Blog

11-18

4494

在一个原本在3台机器中部署了Cloudera CDH4.8的集群环境，运行状况良好，后来由于机房搬迁，导致那3台机器的ip地址被改变（hostname 没有变化）。再次启动Cloudera-scm-server，登陆进去看时，发现manager根本不认识那3台机器了。无奈在“主机”的选项中需找修改的方法，发现Cloudera-manager那个鬼东西，根本没有考虑ip地址会

如何向CDH集群添加主机节点

u010585659的博客

08-22

1997

不知不觉干了两年多的大数据开发&运维，想当初入职时因为大数据组开发人手不足（就后来带我的一个人），把本来投的是运维开发岗的我调去了大数据组。虽然当时早就听说做大数据很有前途，但本硕学的都是通信工程的我完全没有基础啊不敢投啊，不知是人品好或是运气好该庆幸自己走了狗屎运转到了有“前途”的岗位，还是因为我的简历上有做Python开发的实习经历，反正我是体会到了大公司对应届校招生调岗是多么的随意。于是从这之后就开始了我的踩坑之旅。。。之所以来优快云写博客了，是因为踩过的坑如果不记录是不知道什么时候又会再踩

Ubuntu14.04在线安装Cloudera Manager集群部署

09-25

### Ubuntu14.04在线安装Cloudera Manager集群部署 #### 一、环境准备与基础知识在开始之前，我们先来了解下整个部署过程所涉及的一些基础概念和技术要点。 - **Ubuntu 14.04**: 一种广泛使用的开源操作系统，...

Cloudera CDH新增节点到集群参考步骤

热门推荐

BabyFish13

09-20

1万+

1、新加机器环境配置首先得在新的主机环境中安装JDK，关闭防火墙、修改selinux、NTP时钟与主机同步、修改hosts、与主机配置ssh免密码登录、保证安装好了perl和python。 2、上传cloudera-manager文件到/opt目录，修改agent配置文件： vi /opt/cm-5.7.0/etc/cloudera-scm-agent/config.ini server

CM方式搭建集群---基础准备

多哥仁慈的骆驼

12-24

949

生产中的集群规模：一般情况下，在生产环境中根据集群查的规模分成三种一，小型集群 20台以内二, 中型集群 50台以内三，大型集群 50台以上基本组件的配置： 1.zookeeper 一，小型集群：3-5个节点 ...

使用CM安装部署CDH集群的一个总结

Axel_Fran的博客

03-05

773

第一安装mysql，和 java jdbc-mysql 的一个jar包添加到 java 中第二 2.1安装Cloudera Manager Server 三个包 [root@h1 cloudera-scm-server]# yum search cloudera =========================== N/S matched: cloudera ============================ cloudera-manager-agent.x86_64 : Th..

CDH集群添加新服务器

bnuib521的博客

05-26

693

把ntp服务加入到服务器启动中systemctl enable ntpd。在CM的管理界面，点击主机，Add Hosts 疯狂下一波即可添加完成。执行命令hostnamectl set-hostname sh-1。执行命令hostnamectl set-hostname sh-2。~/.ssh/authorized_keys到新机器上。可以执行ntpdc -np查看ntp运行情况。vim /etc/rc.local 添加。在13上修改文件/etc/hosts，修改sh-1跟sh-2的ntp配置文件。

Cloudera Manager安装主机节点选不中

flyingsky2008的专栏

04-28

3481

1，安装集群，部分节点没办法选中，显示节点不受管。解决方法: （1）打开Cloudera server节点/etc/cloudera-scm-server/db.properties的文件，可以看到Cloudera manager的配置文件。数据库名为scm，用户名为scm。（2）用如下命令登录Cloudera server节点的postgresql数

Cloudera Manager企业大数据平台集群增加节点实践

weixin_38023225的博客

05-18

994

准备工作 1.主机域名配置 #第一台服务器上执行 echo "172.31.30.81ptx-bigdata1" >> /etc/hosts echo "172.31.27.167ptx-bigdata2" >> /etc/hosts echo "172.31.31.127 ptx-bigdata3" >> /etc/hosts echo "172.31.28.41 ptx-bigdata4" >> /etc/host...

CDH及软件安装部署

erainm

12-18

915

1. Linux配置优化 1.1 Swappiness虚拟内存 swappiness是Linux的一个内核参数，控制系统在使用swap虚拟内存时，内存使用的相对权重。 swappiness参数值可设置范围在0到100之间。此参数值越低，就会让Linux系统尽量少用swap虚拟内存分区，多用内存；参数值越高就是反过来，使内核更多的去使用swap空间。推荐设置为10。根据服务器硬件配置会有变化。临时生效： sysctl -w vm.swappiness=10 永久生效： echo “vm.swappines

使用虚拟机搭建ClouderaManager平台，并自动部署一个hadoop集群（CDH）

CycloneKid的博客

01-19

2044

本文将从最基础的环境配置开始，介绍如何在Linux虚拟机中搭建一个CM集群，并使用CDH自动部署一个Hadoop集群。文章目录一.CM及CDH介绍CMCDH二.准备工作2.1 硬件资源分配2.2 下载需要的各种安装包1.基础工具JDK和MySQL2.CM安装包3.CDH离线库2.3 安装JDK2.4 设置免密登录2.5 关闭SELINUX2.6 安装MySQL并创建CDH需要的数据库安装MySQ...

cdh 添加新主机

cyz52的博客

12-15

1589

1.1说明 CDH机器添加分三种方式页面向导添加(最好离线) 软件包手动安装原始码手动安装第一种方式最简单，添加的节点会去主机下载安装包，但是在公网上ip反向解析域名，经常出错，离线会好点第三种方式原始码安装需要自己指定管理目录推荐第三种方式，会自动添加对应的服务，目录自动建立这里分享第二种方式，软件包安装方法 1.2安装部署主机名、ip等修改好，关闭防火墙，ssh免密码登录...

Ubuntu 14.04 Cloudera Manager 集群部署指南：时间同步与SSH免密

在本篇文章中，我们将详细介绍如何在Ubuntu 14.04操作系统上进行Cloudera Manager集群的在线部署，并解决相关的技术问题。首先，文章关注的是确保系统的网络时间同步，通过安装并配置NTP服务。在主机端，你需要执行...