CDH集群安装步骤

CDH集群安装步骤

准备工作：集群之前已经装好CentOS7，防火墙也已经关闭，对于mysql所配置的则是在另一台节点之上，已创建好cloudera-manageer的初始化数据库。

1.准备相关安装包，将安装包上传/data/

2.vi /etc/hosts 修改主机映射

3.配置ssh免密登录

4.安装ntp服务，配置各个节点时间同步，两个从节点与主节点同步，主节点与阿里云时间同步

yum -y install ntp

5.禁用透明页(所有节点，优化可选）

echo never > /sys/kernel/mm/transparent_hugepage/defrag
echo never > /sys/kernel/mm/transparent_hugepage/enabled
永久生效 在/etc/rc.local 添加上面命令

6.安装jdk

rpm -qa | grep java # 查询已安装的java

yum remove java* # 卸载
rpm -ivh oracle-j2sdk1.8-1.8.0+update181-1.x86_64.rpm
vi /etc/profile 末尾添加

source /etc/profile

7.创建目录，将mysql-connector-java.jar放进去

mkdir -p /usr/share/java

8.安装httpd服务（只在主节点上安装）

yum install httpd
service httpd start
systemctl enable httpd.service 设置httpd服务开机自启

9.配置本地yum源

mkdir -p /var/www/html/cloudera-repos/
将/data/software/cm包下所有文件移到此目录下:
mv cm /var/www/html/cloudera-repos/
cd /var/www/html/cloudera-repos/cm/
创建repodata： createrepo .
下面所有节点都需要配置
vi /etc/yum.repos.d/cloudera-manager.repo

vi /etc/yum.repos.d/cm.repo

https://10-9-15-84/cloudera-repos
yum clean all
yum makecache

10.所有节点安装插件（防止莫名错误）

yum install cloudera-manager-daemons cloudera-manager-agent cloudera-manager-server --skip-broken --nogpgcheck

11.配置cloudera manager数据库

12.启动服务

systemctl start cloudera-scm-server（主节点）
systemctl start cloudera-scm-agent（所有节点）

启动时报错
（1）数据库报错

解决办法：数据库配置最后一行配置错误

（2）manifest.json报错

解决办法：
echo “127.0.0.1 archive.cloudera.com” >>/etc/hosts
将地址指向本地

13.登录cloudera managerUI页面
点击下一步，在选择存储库的时候可以选择我们原来安装的yum源
修改端口号：从cm数据库直接修改

对于client安装失败：
查看percel源，相关配置的路径，percle源是否被识别。
percle未被识别，可能是未生成percle的hash文件

按照页面提示进行相关配置。

14.对于cdh相关大数据组件的安装
根据页面进行选择自定义组件进行安装
需要配置一些组件初始化信息所需要的数据库

显示安装成功:

15.完成cdh及相关组件的安装