CDH5.16.2安装部署(三) CDH部署

一、离线部署cm server及agent

1.1 拷贝cm包到其他节点

[root@hadoop001 cdh5162]# scp cloudera-manager-centos7-cm5.16.2_x86_64.tar.gz hadoop002:~/cdh5162/  
[root@hadoop001 cdh5162]# scp cloudera-manager-centos7-cm5.16.2_x86_64.tar.gz hadoop003:~/cdh5162/

1.2 所有节点创建目录及解压

[root@hadoop001 cdh5162]# mkdir /opt/cloudera-manager
[root@hadoop001 cdh5162]# tar -xf cloudera-manager-centos7-cm5.16.2_x86_64.tar.gz -C /opt/cloudera-manager/


1.3所有节点修改agent的配置,指向server的节点hadoop001

[root@hadoop001 cdh5162]# sed -i "s/server_host=localhost/server_host=hadoop001/g" /opt/cloudera-manager/cm-5.16.2/etc/cloudera-scm-agent/config.ini 

1.4 主节点修改server的配置

[root@hadoop001 cloudera-scm-server]# vi /opt/cloudera-manager/cm-5.16.2/etc/cloudera-scm-server/db.properties 

com.cloudera.cmf.db.type=mysql
com.cloudera.cmf.db.host=hadoop001
com.cloudera.cmf.db.name=cmf
com.cloudera.cmf.db.user=cmf
com.cloudera.cm
### Cloudera CDH 5.16.2 安装指南 #### 准备工作 确保操作系统环境已准备好,这里以 CentOS 7.7 和 VMware 虚拟机为例。安装前需确认硬件资源充足,并完成基本网络配置。 #### 下载所需文件 访问官方渠道获取对应版本的 Cloudera Manager 及其依赖项。对于特定版本如 CDH 5.16.2部署,建议直接从官方网站下载对应的 ISO 镜像或 tarball 文件[^1]。 #### 安装 Cloudera Manager Server 解压下载好的压缩包至 `/opt` 目录下,并创建软链接以便管理不同版本之间的切换: ```bash tar zxvf cm-5.16.2.tar.gz -C /opt/ ln -sfn /opt/cm-5.16.2/ /opt/cloudera-manager ``` 设置开机自启并将服务加入防火墙白名单: ```bash systemctl enable cloudera-scm-server.service firewall-cmd --add-service=cloudera-scm --permanent && firewall-cmd --reload ``` 启动 Cloudera Manager Server 并验证是否正常运行: ```bash /opt/cloudera-manager/etc/init.d/cloudera-scm-server start netstat -lntp | grep :7180 # 应显示监听状态 ``` #### 安装 Agent 组件 同样地,在所有目标节点上执行相同操作来安装 agent: ```bash tar zxvf cm-agent-5.16.2.tar.gz -C / systemctl enable cloudera-scm-agent.service ``` 通过 SSH 连接到各个节点并依次启动它们的服务: ```bash for i in $(seq 1 5); do \ ssh node$i "sudo systemctl start cloudera-scm-agent"; \ done; ``` #### Web 控制台初始化 打开浏览器输入 `http://<your_server_ip>:7180` 访问 web UI,默认用户名密码均为 admin/admin 。按照向导提示逐步完成集群搭建过程中的各项设定,包括但不限于选择合适的 Hadoop 发行版、定义数据存储位置以及指派各类角色给不同的物理机器等[^3]。 #### 升级 Spark 版本 如果希望保留原有 Spark 1.6.x 同时引入新特性,则可通过 Parcels 功能实现多版本共存。具体做法是从官网下载 spark2.2.0 parcel 包后上传至服务器,随后依照页面指示更新现有集群配置使之兼容新版引擎。 最后记得保存更改并对整个系统进行全面测试,确保一切功能均能稳定运作后再投入生产环境中使用。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值