本文探讨了Keepalived脑裂现象及其原因，包括心跳线故障、配置错误等因素。为防止脑裂，提出了添加冗余心跳线、启用磁盘锁和设置仲裁机制的解决方案。此外，介绍了通过zabbix自定义监控来检测脑裂，重点在于监控备机上的VIP地址变化，并提供了zabbix 6.2的安装和配置步骤。
Keepalived脑裂
在高可用（HA）系统中，当联系2个节点的“心跳线”断开时，本来为一整体、动作协调的HA系统，就分裂成为2个独立的个体。由于相互失去了联系，都以为是对方出了故障。两个节点上的HA软件像“裂脑人”一样，争抢“共享资源”、争起“应用服务”，就会发生严重后果——或者共享资源被瓜分、2边“服务”都起不来了；或者2边“服务”都起来了，但同时读写“共享存储”，导致数据损坏（常见如数据库轮询着的联机日志出错）。
对付HA系统“裂脑”的对策，目前达成共识的的大概有以下几条：
添加冗余的心跳线，例如：双线条线（心跳线也HA），尽量减少“裂脑”发生几率；
启用磁盘锁。正在服务一方锁住共享磁盘，“裂脑”发生时，让对方完全“抢不走”共享磁盘资源。但使用锁磁盘也会有一个不小的问题，如果占用共享盘的一方不主动“解锁”，另一方就永远得不到共享磁盘。现实中假如服务节点突然死机或崩溃，就不可能执行解锁命令。后备节点也就接管不了共享资源和应用服务。于是有人在HA中设计了“智能”锁。即：正在服务的一方只在发现心跳线全部断开（察觉不到对端）时才启用磁盘锁。平时就不上锁了。
设置仲裁机制。例如设置参考IP（如网关IP），当心跳线完全断开时，2个节点都各自ping一下参考IP，不通则表明断点就出在本端。不仅“心跳”、还兼对外“服务”的本端网络链路断了，即使启动（或继续）应用服务也没有用了，那就主动放弃竞争，让能够ping通参考IP的一端去起服务。更保险一些，ping不通参考IP的一方干脆就自我重启，以彻底释放有可能还占用着的那些共享资源。
脑裂产生的原因
一般来说，脑裂的发生，有以下几种原因：
高可用服务器对之间心跳线链路发生故障，导致无法正常通信
1、因心跳线坏了（包括断了，老化）
2、因网卡及相关驱动坏了，ip配置及冲突问题（网卡直连）
3、因心跳线间连接的设备故障（网卡及交换机）
4、因仲裁的机器出问题（采用仲裁的方案）
高可用服务器上开启了 iptables防火墙阻挡了心跳消息传输
高可用服务器上心跳网卡地址等信息配置不正确，导致发送心跳失败
其他服务配置不当等原因，如心跳方式不同，心跳广插冲突、软件Bug等
注意：
Keepalived配置里同一 VRRP实例如果 virtual_router_id两端参数配置不一致也会导致裂脑问题发生。
对脑裂进行监控
对脑裂的监控应在备用服务器上进行，通过添加zabbix自定义监控进行。
监控什么信息呢？监控备上有无VIP地址
备机上出现VIP有两种情况：
发生了脑裂
正常的主备切换
监控只是监控发生脑裂的可能性，不能保证一定是发生了脑裂，因为正常的主备切换VIP也是会到备上的。
监控方案
环境需求
| 主机名 | IP | 所需服务 |
|---|---|---|
| server（zabbix服务端） | 192.168.249.146 | httpd zabbix-server zabbix-agent |
| master（主keepalived） | 192.168.249.141 | keepalived |
| slave（备Keepalived） | 192.168.249.145 | Keepalived zabbix-agent |
zabbix6.2安装步骤
配置阿里云源
注意本机的操作系统的centos8
[root@server ~]# cd /etc/yum.repos.d/
[root@server yum.repos.d]# rm -rf *
[root@server yum.repos.d]# curl -o /etc/yum.repos.d/CentOS-Base.repo https://mirrors.aliyun.com/repo/Centos-vault-8.5.2111.repo
[root@server yum.repos.d]# sed -i -e '/mirrors.cloud.aliyuncs.com/d' -e '/mirrors.aliyuncs.com/d' /etc/yum.repos.d/CentOS-Base.repo
[root@server yum.repos.d]# yum clean all
[root@server yum.repos.d]# yum list all
安装httpd和mariadb*
注意PHP至少7.4,mariadb至少10.5版本
[root@server ~]# dnf -y install httpd
[root@server ~]# dnf -y module install mariadb:10.5
#无法安装使用如下命令卸载后重新安装，再安装php:7.4*
[root@server ~]# dnf -y module reset mariadb:10.5
[root@server ~]# dnf -y module install mariadb:10.5
[root@server ~]# dnf module -y install php:7.4*
[root@server ~]# yum -y install php-ldap
#查看是否安装成功
[root@server ~]# rpm -qa | grep php
php-json-7.4.19-1.module_el8.5.0+815+1c4fd2e5.x86_64
php-fpm-7.4.19-1.module_el8.5.0+815+1c4fd2e5.x86_64
php-cli-7.4.19-1.module_el8.5.0+815+1c4fd2e5.x86_64
php-xml-7.4.19-1.module_el8.5.0+815+1c4fd2e5.x86_64
php-common-7.4.19-1.module_el8.5.0+815+1c4fd2e5.x86_64
php-mbstring-7.4.19-1.module_el8.5.0+815+1c4fd2e5.x86_64
[root@server ~]#
编译http配置文件
[root@server ~]# cd /etc/httpd/conf.d/
[root@server conf.d]# find / -name *vhosts.conf
/usr/share/doc/httpd/httpd-vhosts.conf
#复制文件并修改
[root@server conf.d]# cp /usr/share/doc/httpd/httpd-vhosts.conf .
[root@server conf.d]# ls
autoindex.conf httpd-vhosts.conf php.conf README userdir.conf welcome.conf
[root@server conf.d]# vim httpd-vhosts.conf
#添加内容如下
<VirtualHost *:80>
DocumentRoot "/var/www/html/zabbix.example.com"
ServerName zabbix.example.com
ProxyRequests Off
ProxyPassMatch ^/(.*\.php)$ fcgi://127.0.0.1:9000/var/www/html/zabbix.example.com/$1
<Directory "/var/www/html/zabbix.example.com">
Options none
AllowOverride none
Require all granted
</Directory>
ErrorLog "/var/log/httpd/zabbix.example.com-error_log"
CustomLog "/var/log/httpd/zabbix.example.com-access_log" common
</VirtualHost>
#查看是否有IncludeOptional conf.d/*.conf
[root@localhost conf.d]# cd ..
[root@localhost httpd]# vim conf/httpd.conf
#搜索/DirectoryIndex，添加index.php
# DirectoryIndex: sets the file that Apache will serve if a directory
# is requested.
#
<IfModule dir_module>
DirectoryIndex index.php index.html
</IfModule>
#//搜索AddType，添加以下内容
AddType application/x-httpd-php .php
AddType application/x-httpd-php-source .phps
#创建测试页面
[root@server ~]# mkdir /var/www/html/zabbix.example.com
[root@server ~]# vim /var/www/html/zabbix.example.com/index.php
<?php
phpinfo();
?>
#开启httpd和mariadb服务
[root@server ~]# systemctl enable --now httpd
[root@server ~]# systemctl enable --now mariadb
#设置密码
[root@server ~]# mysql
MariaDB [(none)]> set password = password('long123!');
Query OK, 0 rows affected (0.000 sec)
MariaDB [(none)]> quit
Bye
#测试是否可以成功登录MySQL
[root@server ~]# mysql -uroot -plong123!
Welcome to the MariaDB monitor. Commands end with ; or \g.
Your MariaDB connection id is 4
Server version: 10.5.9-MariaDB MariaDB Server
Copyright (c) 2000, 2018, Oracle, MariaDB Corporation Ab and others.
Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.
MariaDB [(none)]> quit
Bye
[root@server ~]# systemctl enable --now php-fpm
[root@server ~]# systemctl status php-fpm
● php-fpm.service - The PHP FastCGI Process Manager
Loaded: loaded (/usr/lib/systemd/system/php-fpm.service; enabled; vendor preset: disabl>
Active: active (running) since Thu 2022-09-01 17:25:53 CST; 8min ago
Main PID: 7269 (php-fpm)
#查看是否有端口没有就进入配置文件编写
[root@server ~]# ss -antl
State Recv-Q Send-Q Local Address:Port Peer Address:Port Process
LISTEN 0 80 0.0.0.0:3306 0.0.0.0:*
LISTEN 0 128 0.0.0.0:22 0.0.0.0:*
LISTEN 0 128 *:80 *:*
LISTEN 0 128 [::]:22 [::]:*
[root@server ~]# vim /etc/php-fpm.d/www.conf
#把如下配置改为
listen = /run/php-fpm/www.sock
#改后
; Note: This value is mandatory.
listen = 0.0.0.0:9000
[root@localhost php-fpm.d]# systemctl restart php-fpm
#重新查看端口号，可以看见端口号已经有了
[root@localhost php-fpm.d]# ss -antl
State Recv-Q Send-Q Local Address:Port Peer Address:Port Process
LISTEN 0 128 0.0.0.0:9000 0.0.0.0:*
LISTEN 0 80 0.0.0.0:3306 0.0.0.0:*
LISTEN 0 128 0.0.0.0:22 0.0.0.0:*
LISTEN 0 128 *:80 *:*
LISTEN 0 128 [::]:22 [::]:*
[root@localhost php-fpm.d]#
#关闭防火墙
[root@localhost php-fpm.d]# systemctl disable --now firewalld
Removed /etc/systemd/system/multi-user.target.wants/firewalld.service.
Removed /etc/systemd/system/dbus-org.fedoraproject.FirewallD1.service.
[root@localhost php-fpm.d]# setenforce 0
[root@localhost php-fpm.d]# vim /etc/selinux/config
[root@localhost php-fpm.d]# cat /etc/selinux/config | grep SELINUX=
# SELINUX= can take one of these three values:
SELINUX=disabled
测试服务php页面是否成功
zabbix服务端安装
官方网站下载地址
https://www.zabbix.com/cn/download_sources
https://www.zabbix.com/documentation/6.2/en/manual/installation/install
产品帮助文档地址如上
[root@server ~]# cd /usr/src/
[root@server src]# wget https://cdn.zabbix.com/zabbix/sources/stable/6.2/zabbix-6.2.2.tar.gz
....
2022-09-01 18:00:30 (5.84 MB/s) - ‘zabbix-6.2.2.tar.gz’ saved [34995538/34995538]
[root@server src]# ls
debug kernels zabbix-6.2.2.tar.gz
[root@server src]#
//安装依赖包
[root@server src]# yum -y install net-snmp-devel libevent-devel
安装过程略....
#解压安装包并创建用户
[root@server src]# tar xf zabbix-6.2.2.tar.gz
[root@server src]# ls
debug kernels zabbix-6.2.2 zabbix-6.2.2.tar.gz
[root@localhost src]# useradd -r -d /usr/lib/zabbix -s /sbin/nologin -c "Zabbix Monitoring System" zabbix
[root@server src]# mkdir -p /usr/lib/zabbix
[root@server src]# chmod 770 /usr/lib/zabbix
[root@server src]# chown -R zabbix.zabbix /usr/lib/zabbix
#创建数据库
[root@server ~]# mysql -uroot -pzabbix123!
MariaDB [(none)]> create database zabbix character set utf8mb4 collate utf8mb4_bin;
Query OK, 1 row affected (0.000 sec)
MariaDB [(none)]> show databases;
+--------------------+
| Database |
+--------------------+
| information_schema |
| mysql |
| performance_schema |
| zabbix |
+--------------------+
4 rows in set (0.000 sec)
MariaDB [(none)]> create user 'zabbix'@'localhost' identified by 'zabbix123!';
Query OK, 0 rows affected (0.000 sec)
MariaDB [(none)]> grant all privileges on zabbix.* to 'zabbix'@'localhost';
Query OK, 0 rows affected (0.000 sec)
MariaDB [(none)]> SET GLOBAL log_bin_trust_function_creators = 1;
Query OK, 0 rows affected (0.000 sec)
MariaDB [(none)]> flush privileges;
#上传表，注意你使用的是什么安装就用什么我这里是用mysql
[root@server src]# cd /usr/src/zabbix-6.2.2/database/mysql
#把表导入数据库中
[root@server mysql]# mysql -uzabbix -pzabbix123! zabbix < schema.sql
[root@server mysql]# mysql -uzabbix -pzabbix123! zabbix < images.sql
[root@server mysql]# mysql -uzabbix -pzabbix123! zabbix < data.sql
[root@server ~]# mysql -uroot -plong123!
MariaDB [(none)]> use zabbix
MariaDB [zabbix]> show tables;
....
| widget_field |
+----------------------------+
176 rows in set (0.003 sec)
#必须176才是正确的
MariaDB [zabbix]> SET GLOBAL log_bin_trust_function_creators = 0;
MariaDB [(none)]> flush privileges;
MariaDB [(none)]> quit
[root@server mysql]# cd /usr/src/zabbix-6.2.2
[root@server zabbix-6.2.2]# dnf -y install gcc gcc-c++ libxml2-devel libcurl-devel pcre-devel openssl openssl-devel golang-bin make
[root@server zabbix-6.2.2]# yum install mysql-devel -y
[root@server zabbix-6.2.2]# ./configure --enable-server --enable-agent --with-mysql --with-libcurl --with-libxml2
Enable web service: no #注意这里是否开启
Enable Java gateway: no
LDAP support: no
IPv6 support: no
***********************************************************
* Now run 'make install' *
* *
* Thank you for using Zabbix! *
* <http://www.zabbix.com> *
***********************************************************
#以上是配置安装后有的配置总结，然后服务端就安装好了就，等一下上传网站的文件
[root@localhost zabbix-6.2.2]# make install
...等待，注意需要安装完成才能操作
[root@server zabbix-6.2.2]# cd /usr/local/etc/
[root@server etc]# vim zabbix_server.conf
#添加数据库的密码
### Option: DBPassword
# Database password.
# Comment this line if no password is used.
#
# Mandatory: no
# Default:
# DBPassword=
DBPassword=zabbix123!
#开启服务
[root@server etc]# zabbix_server
[root@server etc]# ss -anlt
State Recv-Q Send-Q Local Address:Port Peer Address:Port Process
LISTEN 0 128 0.0.0.0:22 0.0.0.0:*
LISTEN 0 128 0.0.0.0:10051 0.0.0.0:*
LISTEN 0 128 0.0.0.0:9000 0.0.0.0:*
LISTEN 0 128 *:80 *:*
LISTEN 0 128 [::]:22 [::]:*
LISTEN 0 80 *:3306 *:*
[root@server etc]# zabbix_agentd
[root@server etc]# ss -anlt
State Recv-Q Send-Q Local Address:Port Peer Address:Port Process
LISTEN 0 128 0.0.0.0:22 0.0.0.0:*
LISTEN 0 128 0.0.0.0:10050 0.0.0.0:*
LISTEN 0 128 0.0.0.0:10051 0.0.0.0:*
LISTEN 0 128 0.0.0.0:9000 0.0.0.0:*
LISTEN 0 128 *:80 *:*
LISTEN 0 128 [::]:22 [::]:*
LISTEN 0 80 *:3306 *:*
[root@server etc]#
zabbix服务端web界面安装与配置
[root@localhost etc]# cd /usr/src/zabbix-6.2.2/
[root@localhost zabbix-6.2.2]# ls
aclocal.m4 compile config.sub depcomp Makefile missing ui
AUTHORS conf configure include Makefile.am NEWS
bin config.guess configure.ac INSTALL Makefile.in README
build config.log COPYING install-sh man sass
ChangeLog config.status database m4 misc src
[root@localhost zabbix-6.2.2]# cp -a ui/* /var/www/html/zabbix.example.com/
cp: overwrite '/var/www/html/zabbix.example.com/index.php'? y
[root@localhost zabbix-6.2.2]#
#修改属主
[root@localhost zabbix-6.2.2]# ll /var/www/
total 0
drwxr-xr-x. 2 root root 6 Nov 12 2021 cgi-bin
drwxr-xr-x. 3 root root 32 Sep 1 22:18 html
[root@localhost zabbix-6.2.2]# chown -R apache.apache /var/www/html/
[root@localhost zabbix-6.2.2]# ll /var/www/
total 0
drwxr-xr-x. 2 root root 6 Nov 12 2021 cgi-bin
drwxr-xr-x. 3 apache apache 32 Sep 1 22:18 html
[root@localhost zabbix-6.2.2]# ll /var/www/html/
total 4
drwxr-xr-x. 13 apache apache 4096 Sep 1 23:10 zabbix.example.com
[root@localhost zabbix-6.2.2]#
页面安装前的环境安装
//修改/etc/php.ini的配置并重启php-fpm
[root@server ~]# sed -ri 's/(post_max_size =).*/\1 16M/g' /etc/php.ini
[root@server ~]# sed -ri 's/(max_execution_time =).*/\1 300/g' /etc/php.ini
[root@server ~]# sed -ri 's/(max_input_time =).*/\1 300/g' /etc/php.ini
[root@server ~]# sed -i '/;date.timezone/a date.timezone = Asia/Shanghai' /etc/php.ini
[root@server ~]# systemctl restart php-fpm
[root@server ~]# dnf -y install php-bcmath php-gd php-mysqlnd
#中文安装需要的环境
[root@server ~]# dnf -y install glibc-common langpacks-zh_CN.noarch
web页面安装
选择语言
这里是因为我的系统没有多种语言支持，如果想安装中文需要安装中文安装需要的环境
安装成功
扫一扫
502
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
