prometheus使用 (十一) alertmanager集群部署

前面我们收集了N多的指标信息，为的不就是当我们环境出现故障的时候能够快速的提醒我们去修改吗

而alertmanager为我们prometheus提供了一个非常好的报警机制 （*゜ー゜*）

一. 告警是怎么实现的

首先我们要知道，alertmanager的作用是去重、分组，以及发送邮件的
而报警实际上是由prometheus提供的，我们需要去prometheus配置好"触发告警"的一个规则，并且指定告警交给谁处理(alertmanager)
然后再去alertmanager上配置好决定要以什么形式去通知到管理员(微信、钉钉、邮件）如下图

二. 安装alertmanager（集群模式）

#为了保证高可靠性,我们这里以集群模式部署
#拉取软件包
wget https://github.com/prometheus/alertmanager/releases/download/v0.21.0/alertmanager-0.21.0.linux-amd64.tar.gz

#我的包(。・∀・)ノ
链接：https://pan.baidu.com/s/1vbbz_jZnuMwg4uvJwyygtw 
提取码：1111 


#放到3台节点上
scp alertmanager-0.21.0.linux-amd64.tar.gz  root@192.168.1.21:/root
scp alertmanager-0.21.0.linux-amd64.tar.gz  root@192.168.1.22:/root

 以下操作3节点同步

#解压
tar -zxvf alertmanager-0.21.0.linux-amd64.tar.gz

#拷贝并赋权
install -m 0755 alertmanager-0.21.0.linux-amd64/{alertmanager,amtool} /usr/bin

#添加配置文件
cat >> alertmanager.yml <<EOF
global:
  resolve_timeout: 5m
route:
  group_by: ['alertname']
  group_wait: 10s
  group_interval: 10s
  repeat_interval: 5m
  receiver: 'web.hook'
receivers:
- name: 'web.hook'
  webhook_configs:
  - url: 'http://127.0.0.1:5001'
EOF

#移动文件并设置权限
install -m 0644 -D alertmanager.yml /etc/alertmanager/alertmanager.yml

1. 服务文件配置(192.168.1.20--主)

cat > alertmanager.service <<EOF
[Unit]
Description=Alertmanager handles alerts sent by client applications such as the Prometheus server.
Documentation=https://prometheus.io/docs/alerting/alertmanager/
After=network.target

[Service]
User=root
ExecStart=/usr/bin/alertmanager \\
  --config.file=/etc/alertmanager/alertmanager.yml \\
  --storage.path=/var/lib/alertmanager \\
  --cluster.listen-address=192.168.1.20:8001  
ExecReload=/bin/kill -HUP
Restart=on-failure

[Install]
WantedBy=multi-user.target
EOF


#如果是单节点，就把这行去了，即可
#--cluster.listen-address=192.168.1.20:8001  
#主节点只需要声明自身的ip和端口即可

2. 服务文件配置（192.168.1.21--从1)

cat > alertmanager.service <<EOF
[Unit]
Description=Alertmanager handles alerts sent by client applications such as the Prometheus server.
Documentation=https://prometheus.io/docs/alerting/alertmanager/
After=network.target

[Service]
User=root
ExecStart=/usr/bin/alertmanager \\
  --config.file=/etc/alertmanager/alertmanager.yml \\
  --storage.path=/var/lib/alertmanager \\
  --cluster.listen-address=192.168.1.21:8001 \\
  --cluster.peer=192.168.1.20:8001
ExecReload=/bin/kill -HUP
Restart=on-failure

[Install]
WantedBy=multi-user.target
EOF
#--cluster.listen-address=192.168.1.21:8001 \\   #指定自身地址
#--cluster.peer=192.168.1.20:8001                #指定master地址

3. 服务文件配置（192.168.1.22--从2）

cat > alertmanager.service <<EOF
[Unit]
Description=Alertmanager handles alerts sent by client applications such as the Prometheus server.
Documentation=https://prometheus.io/docs/alerting/alertmanager/
After=network.target

[Service]
User=root
ExecStart=/usr/bin/alertmanager \\
  --config.file=/etc/alertmanager/alertmanager.yml \\
  --storage.path=/var/lib/alertmanager \\
  --cluster.listen-address=192.168.1.22:8001 \\
  --cluster.peer=192.168.1.20:8001
ExecReload=/bin/kill -HUP
Restart=on-failure

[Install]
WantedBy=multi-user.target
EOF

#同上

4. 启动服务（3节点相同）

#移动文件，并设置权限
install -m 0644 alertmanager.service /etc/systemd/system

#启动服务
systemctl daemon-reload
systemctl start alertmanager
systemctl status alertmanager

 

5. 访问测试

#访问任意节点
192.168.1.20:9093
#通过页面中我们可以看到alertmanager是以集群模式存在的，并且可以看到相关的配置文件