21、Hadoop集群管理工具：Cloudera Manager与Apache Bigtop深度解析

Hadoop集群管理工具：Cloudera Manager与Apache Bigtop深度解析

1. 引言

在Hadoop生态系统中，集群管理工具起着至关重要的作用。Ambari可用于Hortonworks Hadoop堆栈的安装和监控，而对于Cloudera堆栈，我们则需要使用Cloudera自己开发的集群管理应用程序。接下来，我们将详细探讨Cloudera集群管理器的安装、运行以及Apache Bigtop的安装过程。

2. Cloudera集群管理器

2.1 选择依据

Ambari和Cloudera集群管理器都能实现Hadoop堆栈的自动化安装和管理，也都支持软件更新自动化。如果选择Hortonworks，可选用Ambari；若倾向于Cloudera的版本，则应选择Cloudera集群管理器。

2.2 安装步骤

• 环境准备 ：使用64位、2GB内存的机器集群，将Name Node机器的内存增加到4GB以避免交换。重新安装CentOS 6到服务器，确保机器干净无冲突，后续操作以root用户执行。
• 下载安装程序 ：从Cloudera官网（www.cloudera.com/content/support/en/downloads/cloudera_manager.html）下载企业版Cloudera管理器二进制安装程序，并存储在Name Node机器（hc2nn）的/tmp目录下。

[root@hc2nn t