使用cloudrea manager管理已有的cdh集群（转）

使用cloudrea manager管理已有的cdh集群（转）

转自：http://blog.51cto.com/teacheryan/1912116

 

本文介绍如何搭建cloudera manager去接入已有hadoop组件（cdh）。

一、下载必备文件：

1.cloudera manager：http://archive-primary.cloudera.com/cm5/cm/5/

大部分公司内大数据集群环境都无公网访问权限，针对当前集群系统环境和想要接入的cm版本找到对应版本离线包，对于redhat、centos系统来说el6就是redhat6、centos6系统，之后找到想要安装的cm版本，本文搭建过程采用cloudera-manager-el6-cm5.9.0_x86_64.tar.gz

 

 

2.cdh安装包：http://archive.cloudera.com/cdh5/parcels/5.9.0/

本搭建过程采用CDH-5.9.0-1.cdh5.9.0.p0.23-el6.parcel、CDH-5.9.0-1.cdh5.9.0.p0.23-el6.parcel.sha1，parcel文件为cdh压缩包，执行安装过程会进行解压并且上传到各节点；sha1文件内为压缩包的校验码

 

 

3.mysql的jdbc驱动jar包：http://dev.mysql.com/downloads/connector/j/

 

4.mysql5.6：http://dev.mysql.com/downloads/mysql/5.6.html

本搭建过程采用mysql5.6社区版源码包mysql-5.6.35.tar.gz

 

二、cloudera manager安装：

1.server端安装配置mysql5.6:

解压mysql安装包后执行

yum install cmake ncurses-* -y

其余看编译输出，缺少什么包就再yum安装什么

进入mysql解压目录，执行

cmake -DCMAKE_INSTALL_PREFIX=/export/mysql5.6
make && make install