大数据基础学习笔记（安装CDH的环境配置）-CDH-6.0.0

最新推荐文章于 2024-06-12 18:02:46 发布
原创 最新推荐文章于 2024-06-12 18:02:46 发布 · 1.2k 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#大数据 #大数据

本文详细介绍了CDH6.0集群的部署步骤，包括软件下载、网络配置、SSH免密登录设置、防火墙及SELinux关闭、JDK安装、NTP配置、MySQL安装与配置、第三方依赖包安装、repo安装、GPG key导入等关键环节。

1.下载软件地址(（以centos7.4）)
CDH安装包地址：
https://archive.cloudera.com/cdh6/6.0.0/parcels/
CDH-6.0.0-1.cdh6.0.0.p0.537114-el7.parcel
CDH-6.0.0-1.cdh6.0.0.p0.537114-el7.parcel.sha256
manifest.json

Cloudera Manager下载地址:
https://archive.cloudera.com/cm6/6.0.0/redhat7/yum/RPMS/x86_64/

cloudera-manager-agent-6.0.0-530873.el7.x86_64.rpm

cloudera-manager-daemons-6.0.0-530873.el7.x86_64.rpm

cloudera-manager-server-6.0.0-530873.el7.x86_64.rpm

cloudera-manager-server-db-2-6.0.0-530873.el7.x86_64.rpm

oracle-j2sdk1.8-1.8.0+update141-1.x86_64.rpm

2.网络配置

vim /etc/sysconfig/network


vim /etc/hosts

（内网） 

 

3.SSH免密匙登录

1.生成RSA秘钥对
   在XShell下方输入框中输入命令ssh-keygen -t rsa，然后回车执行。再回车3次，即可生成RSA秘钥对
 2.查看密钥对文件
   ls .ssh              
   id_rsa 私钥  
   id_rsa.pub

最低0.47元/天 解锁文章
cdh6.2离线安装（傻瓜式安装教程）
weixin_45682234的博客
04-29 6703
CDH6.2离线安装流程 1 安装准备 1.1 cdh6.2 下载方式一： 官网下载 https://archive.cloudera.com/cm6/6.2.0/redhat7/yum/RPMS/x86_64/ 都下载下来 https://archive.cloudera.com/cdh6/6.2.0/parcels/ 只要el7.parcel 和 el7.parcel.sha1 下载式二：...
cdh 6.2.0
qq_33540110的博客
08-30 39
大数据平台CDH6.2.0安装部署
10-27
大数据平台CDH6.2.0安装部署
大数据基础学习笔记（安装CDH的环境配置）-CDH-5.15
小马哥的博客
12-29 767
1.下载软件地址(（以centos7.4）) CDH安装包地址： http://archive.cloudera.com/cdh5/parcels/5.14.0/ CDH-5.14.0-1.cdh5.14.0.p0.24-el7.parcel CDH-5.14.0-1.cdh5.14.0.p0.24-el7.parcel.sha1 manifest.json Cloudera Manager下载...
cdh安装部署
qq_18522601的博客
07-11 1932
CDH5.16.1集群企业真正离线部署 一.准备工作 1.离线部署主要分为三块: a.MySQL离线部署 b.CM离线部署 c.Parcel文件离线源部署 2.规划: 节点 MySQL部署组件 Parcel文件离线源 CM服务进程 大数据组件 hadoop001 MySQL Parcel Activity Monitor NN RM D...
CDH安装部署
piaoniu_1985的专栏
07-31 982
环境准备 系统基本安装配置
CDH的安装与部署
weixin_44342332的博客
01-30 3157
1.基础环境准备 1.1创建一个新的虚拟机 1.2安装虚拟机，设置ROOT密码并创建用户名为cdh的用户。 1.3修改配置文件 1.4测试是否可以联网 1.5安装常用命令 1.6关闭防火墙 1.7复制两台虚拟机并修改名称 1.8生成MAC地址并记录此地址之后取消 1.9启动第二台虚拟机 1.10修改配置文件，修改以下三处内容（MAC地址为之前记录的）。 1.11修改MAC地址与配置文件中一致 1.12对第三台服务器重复1.8-1.11 1.13修改主机名 1.14配置ho
CDH6.3.1配套CDH-6.3.1-1.cdh6.3.1.p0.1470567-el7.parcel.sha1
06-01
博主CDH6.3.1配套CDH-6.3.1-1.cdh6.3.1.p0.1470567-el7.parcel.sha1，仅仅限制安装博主文章中CDH-6.3.1-中使用
精选资源
CDH-6.3.2-1.cdh6.3.2.p0.1605554-el7.parcel.sha1
05-21
因为CDH-6.3.2-1.cdh6.3.2.p0.1605554-el7.parcel命令生成的CDH-6.3.2-1.cdh6.3.2.p0.1605554-el7.parcel.sha1文件hash不匹配，自己找到官网上的parcel.sha1文件解决了这个问题，共享给大家
精选资源
CDH-5.9.0-1.cdh5.9.0.p0.23-el7.parcel.tar.gz.aa
02-26
CDH-5.9.0-1.cdh5.9.0.p0.23-el7.parcel（该文件被分割成三个压缩包，例如：.aa/.ab.ac） CDH-5.9.0-1.cdh5.9.0.p0.23-el7.parcel.sha 由于 优快云 资源文件大小的限制，分割成三个压缩文件了，下载后合并解压即可
CDH安装部署手册
10-25
本人在大数据行业工作多年，该手册是通过实践写的部署手册，供大家参考。
HADOOP集成组件CDH安装部署详细教程
01-04
linux系统cdh集成组件部署安装，包括分部式系统环境的基础配置shell脚本
【CDH部署】全网最简单CDH6.2.0环境部署
01-07
下载链接 官方下载链接: https://archive.cloudera.com/cdh6/6.2.0/parcels/ 百度网盘下载链接: https://pan.baidu.com/s/1Dm5Elf9uQqn14BUbgU3AFQ 提取码: mws3 主机规划 sparkproject1 manager 8G 50GB sparkproject2 agent 4G 50GB sparkproject3 agent 4G 50GB 1. 设置IP, hostname, hosts, ssh免密登录 可参考Hadoop中linux基本配置那篇文章 【Hadoop部署】Hadoop环境部署1
CDH6.2.0最全安装包
04-07
CDH6.2.0最全安装包，包括管理服务以及客户端软件，还包括mysql5.7的安装包。
精选资源
CDH-6.3.2-1.cdh6.3.2.p0.1605554-el7.parcel.sha
08-05
CDH-6.3.2-1.cdh6.3.2.p0.1605554-el7.parcel.sha
CentOS 7下CDH安装部署服务器
OUDKE的博客
09-28 186
CDH（Cloudera’s Distribution Including Apache Hadoop）是一个流行的开源Hadoop分发版，它提供了一套完整的大数据解决方案。在本文中，我将详细介绍如何在CentOS 7上进行CDH的安装和部署。至此，您已经成功在CentOS 7上安装和部署了CDH集群。您可以开始使用CDH来管理和分析大数据了。按照向导中的提示进行操作，包括选择数据库类型、配置数据库连接等。安装程序将引导您完成安装过程。请按照屏幕上的提示进行操作。如有任何问题，请随时提问。
CDH 6.3.2安装部署（超详细）
2201_75470972的博客
05-23 5773
超级详细的cdh6.3.2安装部署教程
CDH大数据平台部署安装（详细）
最新发布
m0_73800495的博客
06-12 2986
在主节点上安装MySQL数据库，CDH的某些组件（如Cloudera Manager和Hive Metastore）需要数据库支持。在主节点上设置本地YUM源，包含CDH和Cloudera Manager的安装包，便于节点安装和管理软件包。baseurl=http://[IP地址或master节点名称]/cloudera-repos/cm6。#将下载好的rpm安装包上传到/var/www/html/cloudera-repos/cm6。#打开10.8.42.54/cloudera-repos/cm6/
CDH5.16.2安装部署(三) CDH部署
mcdull213的博客
05-17 1090
一、离线部署cm server及agent 1.1 拷贝cm包到其他节点 [root@hadoop001 cdh5162]# scp cloudera-manager-centos7-cm5.16.2_x86_64.tar.gz hadoop002:~/cdh5162/ [root@hadoop001 cdh5162]# scp cloudera-manager-centos7-cm5.16.2_x86_64.tar.gz hadoop003:~/cdh5162/ 1.2 所有节点创建目录及解压 ..
CDH大数据集群环境安装部署指南
通过本手册的学习，读者可以了解到如何利用CDH这一高效的大数据解决方案，快速搭建和管理Hadoop集群环境，应对大规模数据处理的需求。同时，掌握Hadoop安装部署的整个流程，能够为后期的集群运维和故障排除打下坚实...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值