安装ganglia

参考文献http://share.blog.51cto.com/278008/577554

该文献已经很完善了 唯一的不足时rpmbuild 应该是rpm-build

他的原文是yum-yinstallapr-develapr-utilcheck-develcairo-develpango-devellibxml2-develrpmbuildglib2-develdbus-develfreetype-develfontconfig-develgcc-c++expat-develpython-devellibXrender-devel

我的系统是centOS，跑在阿里云上

我是在同学安装不上后，接着安装的

从2）依赖库的安装：开始的

现在保留原文，以后用

一、所需要软件

二、安装过程

1、Ganglia运行平台的安装

2、Ganglia依赖库的安装

3、RRDTool的安装

4、Ganglia的安装 (包括使用yum方式安装)

三、简单配置

四、启动与访问

五、被监控节点上安装Ganglia (包括使用yum方式安装)

六、遇到的问题，及解决办法

流行的开源服务器集群监控工具有很多，例如Nagios、Cacti、Ganglia、Zenoss、Clumon，它们在底层都利用了RRDTool。国内最常用的就是Cacti+Nagios，但是Ganglia其实也很不错，Ganglia+Nagios的组合也很强大。

Ganglia是一个可伸缩的监控系统，尤其适合用来监计算机集群、网格等。Ganglia监控系统的组成部分包括：两个独立的daemon，一个基于PHP的web前端，和一些其它的应用程序。

gmond（Ganglia Monitoring Daemon）：运行于节点上的daemon

gmetad（Ganglia Meta Daemon）：服务器端的daemon

Ganglia PHP Web Frontend：基于PHP的web前端

Ganglia官网：http://ganglia.info/

Ganglia Wiki：http://sourceforge.net/apps/trac/ganglia

一、所需软件：

平台： linux+apache+php

依赖库：

apr-devel

apr-util

check-devel

cairo-devel

pango-devel

libxml2-devel

rpmbuild

glib2-devel

dbus-devel

freetype-devel

fontconfig-devel

gcc-c++

expat-devel

python-devel

libXrender-devel

libconfuse（它无法通过yum安装）

pcre（无法通过yum安装）

RRDTool： rrdtool-1.4.5.tar.gz

Ganglia：ganglia-3.1.7.tar.gz

二、安装过程

参考了Ganglia Wiki上的安装配置文档，以及IBM网站上《Ganglia 和 Nagios》：

1）apache+php的安装：大略如下：

apache：

1. wgethttp://labs.renren.com/apache-mirror//httpd/httpd-2.2.19.tar.gz
2. tar-zxvfhttpd-2.2.19.tar.gz
3. cdhttpd-2.2.19
4. ./configure--prefix=/usr/local/apache2--enable-so--enable-mods-shared=most
5. make&&makeinstall
7. /usr/local/apache2/bin/apachectlstart

http://192.168.9.45，访问成功！

php：

准备手动编译安装，但是在下载gd库时出错，没有下载到，索性使用yum安装

1. yum-yinstallzliblibpngjpegfreetype2libxml2gdphp-mbstring
2. yum-yinstallphp

apache对php的支持：

在使用yum安装PHP时，已经默认在httpd的配置目录下创建了conf.d目录及相关文件，我们不需要进行任何的操作。直接启动httpd，然后测试php是否安装成功。

若是源码安装PHP，使apache支持php需要如下的两步操作：

首先，拷贝libphp5.so 到apache的module目录下：

1. cp/usr/lib64/httpd/modules/libphp5.so/usr/local/apache2/modules/

然后，vi /usr/local/apache2/conf/httpd.conf，添加：

1. <FilesMatch\.php$>
2. SetHandlerapplication/x-httpd-php
3. </FilesMatch>
4. <FilesMatch"\.ph(p[2-6]?|tml)$">
5. SetHandlerapplication/x-httpd-php
6. </FilesMatch>
7. <FilesMatch"\.phps$">
8. SetHandlerapplication/x-httpd-php-source
9. </FilesMatch>
11. LoadModulephp5_modulemodules/libphp5.so
13. <IfModuledir_module>
14. DirectoryIndexindex.htmlindex.php
15. </IfModules>

重启apache，测试PHP是否安装成功：

vi /usr/local/apache2/htdocs/index.php，添加：

1. <?
2. phpinfo();
3. ?>

访问：http://192.168.9.45/index.php，访问成功！

2）依赖库的安装：

1. yum-yinstallapr-develapr-utilcheck-develcairo-develpango-devellibxml2-develrpmbuildglib2-develdbus-develfreetype-develfontconfig-develgcc-c++expat-develpython-devellibXrender-devel

3）libconfuse的安装（自己使用google搜索下载地址）：

1. wgethttp://savannah.nongnu.org/download/confuse/confuse-2.7.tar.gz
2. tar-zxvfconfuse-2.7.tar.gz
3. cdconfuse-2.7
4. ./configure CFLAGS=-fPIC --disable-nls
5. make && make install

调整lib库的位置：

vi /etc/ld.so.conf.d/libconfuse.conf，添加：/usr/local/lib，然后/sbin/ldconfig -v

4) pcre安装：

pcre是perl 兼容的正规表达式库，在使用正则匹配时会很用。不安装的话，ganglia安装时会报错： libpcre not found, specify --with-libpcre=no to build without PCRE support。

1. wgetftp://ftp.csx.cam.ac.uk/pub/software/programming/pcre/pcre-8.12.tar.bz2
2. tar-jxvfpcre-8.12.tar.bz2
3. cdpcre-8.12
4. ./configure&&make&&makeinstall

调整lib库的位置：

vi /etc/ld.so.conf.d/libpcre.conf，添加：/usr/local/lib，然后/sbin/ldconfig -v

5）RRDTool的安装：

1. wgethttp://oss.oetiker.ch/rrdtool/pub/rrdtool-1.4.5.tar.gz
2. tar-zxvfrrdtool-1.4.5.tar.gz
3. cdrrdtool-1.4.5
4. ./configure--prefix=/usr/local
5. make&&makeinstall

调整lib库的位置：

vi /etc/ld.so.conf.d/librrd.conf，添加：/usr/local/lib，然后/sbin/ldconfig -v

6）Ganglia的安装：

要注意的是，Ganglia在安装时默认不安装gmetad，所以需要在configure时指定：--with-gmetad，还需要指定RRDTool库的路径：--with-librrd=… !

1. wgethttp://sourceforge.net/projects/ganglia/files/ganglia%20monitoring%20core/3.1.7/ganglia-3.1.7.tar.gz/download
2. tar-zxvfganglia-3.1.7.tar.gz
3. cdganglia-3.1.7
4. ./configure--with-gmetad--with-librrd=/usr/local/lib--sysconfdir=/etc/ganglia
5. make
6. makeinstall

编译安装成功！

几个重要文件的默认安装位置：

/usr/bin/gstat

/usr/bin/gmetric

/usr/sbin/gmond

/usr/sbin/gmetad

/etc/ganglia/gmetad.conf

需要进一步的操作，添加gmond和gmetad为系统服务：

1. cpgmond/gmond.init/etc/rc.d/init.d/gmond
2. cpgmetad/gmetad.init/etc/rc.d/init.d/gmetad
3. chkconfig--addgmond && chkconfig gmond on
   
4. chkconfig--addgmetad && chkconfig gmetad on
   

7）Ganglia web前端的安装：

1. mkdir/var/www/html/ganglia
2. cp-rweb/*/var/www/html/ganglia

Ganglia的Wiki特别指出，web前端的运行需要rrdtool，以及gmetad中的rrds/目录，没有这两个东西，无法出图。gmetad中rrd图形默认存储的目录位置为/var/lib/ganglia/rrds：

1. mkdir-p/var/lib/ganglia/rrds
2. chownnobody:nobody/var/lib/ganglia/rrds

rrdtool的位置是/usr/local/bin/rrdtool，编译web前端的配置文件时会在那儿进行定义。

是不是觉得编译安装很麻烦？你也可以使用yum安装方式 ，只是Ganglia版本稍微低一些。Yum安装方式很简单，首先要安装epel源 (什么是epel ?自行google一下 )，然后运行：

1. yuminstallrrdtoolhttpdphpganglia* 以ganglia开头的几个软件都要安装

三、Ganglia的简单配置：

1）生成gmond默认配置文件：

1. gmond-t|tee/etc/ganglia/gmond.conf

2）服务器端配置文件gmetad.conf，主要是配置data_source参数。它设定了被监控端服务器的地址及端口，可以指定多个被监控端服务器：

1. data_source“hadoop”10192.168.9.45
2. grid_name“hadoopclusterstatus” /*设置一个web前端显示的名称，随意命名。

3）被监控节点配置文件gmond.conf：

gmond.conf包括了几个部分：globals、cluster、udp_send_channel、udp_recv_channel等，如果只是想要Ganglia简单地运行，两个操作就可以了，两个操作都是在cluster配置段中进行修改：

首先，命名你的集群：

命名一个cluster名称，名称与gmetad.conf中的data_source保持一致。我的命名：name = "hadoop"

然后，修改tcp_accept_channel配置段如下：

1. tcp_accept_channel{
2. port=8649
3. acl{
4. default="deny"
5. access{
6. ip=192.168.9.45/*这里用来监控服务器的地址
7. mask=32
8. action="allow"
9. }
10. }
11. }

把这个gmond.conf配置文件分发到每个被监控的节点服务器上，重启监控端的gmetad和gmond，以及节点端的gmond，即可对节点进行监控。

4）修改web前端配置文件/var/www/html/conf.php，指定gmetad中存储rrd图形的目录，以及rrdtool的位置：

1. $gmetad_root="/var/lib/ganglia";
2. $rrds="$gmetad_root/rrds";
4. define("RRDTOOL","/usr/local/bin/rrdtool");

四、启动ganglia，并访问其web页面：

service gmond start

service gmetad start

service httpd restart

访问： http://192.168.9.45/ganglia

五、被监控节点上安装Ganglia：

根据IBM网站上的文章所述，只需要拷贝几个文件到节点机器，即可使用Ganglia对这些机器进行监控。但是我们一般都不允许以root帐户连接远程服务器，所以也比较烦琐，还不如直接安装。

被监控节点服务器不需要安装RRDTOOL，php等，只需要gmond。编译安装方式跟监控节点一样，但configure时要简单一些，下面一条命令即可：

1. ./configure--sysconfdir=/etc/ganglia

被监控节点上安装ganglia-gmond完毕后，从监控节点复制gmond.conf文件到被监控节点，然后启动/重启gmond，然后刷新监控web页面即可。

最好重启一下监控节点的gmetad。

然后把被监控端的gmond添加系统为系统服务，前面已经讲过了。略过。

被监控节点也可以使用yum方式安装，也是首先安装epel源，然后只需要运行下面命令：

1. yuminstallganglia-gmond

六、安装过程中遇到的错误及解决办法：

1）在configure apache时，遇到下列错误：

configure: error: Cannot use an external APR with the bundled APR-util

原因是apr和apr-util版本过低，下载并安装最新版，如下：

1. wgethttp://labs.renren.com/apache-mirror//apr/apr-1.4.5.tar.gz
2. tar-zxvfapr-1.4.5.tar.gz
3. cdapr-1.4.5
4. ./configure&&make&&makeinstall

调整lib库的位置：

vi /etc/ld.so.conf.d/libapr.conf，添加/usr/local/apr/lib，运行/sbin/ldconfig -v

apr-util的安装参考上述apr的安装过程。

下载地址：wget http://labs.renren.com/apache-mirror//apr/apr-util-1.3.12.tar.gz

2）Ganglia configure失败：

Checking for apr

checking for apr-1-config... no

configure: error: apr-1-config binary not found in path

解决：

yum -y install apr-devel

4）Ganglia make出错：

/usr/bin/ld: /usr/local/lib/libconfuse.a(confuse.o): relocation R_X86_64_32 against `a local symbol' can not be used when making a shared object; recompile with -fPIC

/usr/local/lib/libconfuse.a: could not read symbols: Bad value

collect2: ld returned 1 exit status

make[2]: *** [libganglia.la] Error 1

make[2]: Leaving directory `/usr/local/ganglia-3.1.7/lib'

make[1]: *** [all-recursive] Error 1

make[1]: Leaving directory `/usr/local/ganglia-3.1.7'

make: *** [all] Error 2

解决：

据网上资料，这个错误是因为在编译libconfuse时，需要指定特殊的选项：CFLAGS=-fPIC --disable-nls

重新编译libconfuse，并调整lib库：

1. ./configureCFLAGS=-fPIC--disable-nls&&make&&makeinstall

5）Ganglia访问失败：

There was an error collecting ganglia data (127.0.0.1:8652): fsockopen error: Permission denied

解决：

需要关闭selinux：vi /etc/selinux/config，把SELINUX=enforcing改成SELINUX=disable；需要重启机器。

可以使用命令setenforce 0来关闭selinux而不需要重启，刷新页面，即可访问！但此方法只是一权宜之计。要想永久修改selinux设置，还是要使用第一种方法。