2018-05-29 prometheus alertmanager 抑制规则配置

本文介绍如何在Prometheus中通过添加特定标签实现告警抑制,以减少重复或冗余的告警信息。通过在告警规则中设置inhibit_instance标签,并在Alertmanager配置抑制规则,确保当一台机器出现问题时,仅报告一次告警。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

首先在prometheus 告警规则添加标签:inhibit_instance(名字随便取的):

1、在 NodeExporter 告警规则中添加 inhibit_instance: '{{$labels.instance}}' 其中 instance 格式为 ip:8888

2、在 LVS探测告警规则上添加:inhibit_instance: '{{$labels.remote_address}}:8888',因为lvs 探测是在lvs前端机器上面所以机器的instance 与nodeexporter 的instance 并不一致,需要使用后端机器的 remote_address 作为问题机器的告警目标机器这样我们就获得了问题机器的ip,加上固定端口8888 就跟NodeExporter中的instance保持一致了

3、在 alertmanager 的规则中添加抑制规则,使用NodeExporterUnavailable抑制lvs通用连通性告警,自此同一台后端机器宕机只会在告警里面报 nodexporter 挂掉而不会报 lvs 不通了,但是lvs 不通exporter没有挂掉的情况则依然会报出来,这对于运维中告警抑制收敛很有用:

# 抑制规则测试
inhibit_rules:
- source_match:
    alertname: 'NodeExporterUnavailable'
  target_match:
    alertname: 'lvs通用连通性告警'
  equal: ['inhibit_instance']

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值