chenhongloves的博客

prometheus federate msg="Error on ingesting out-of-order samples" num_dropped

grafana alert 状态为 error 的处理

通过 grafana(当前使用的古董版本: v6.5.0) 编辑现有的查询语句，光标自动移动到最后了，直接复制编辑完后的语句到 prometheus 执行报错如下如果不看 markdown 原文，完全看不出差别。

containerd 缺乏 container_fs 指标

在 Grafana Alert 中，Evaluate every 和 Evaluate for 是两个重要的配置选项，用于定义告警的评估周期和持续时间。

单纯的使用 PG 用来当 Grafana 的后端存储，这个倒是简单，难的是怎么样把现有数据迁移过去。网络上的方案千千万，N 种方式失败之后终寻得成功。

Templating Failed to upgrade legacy queries Datasource xxx not found

Grafana 默认数据库 sqlite3 迁移到新的环境

serviceMonitorSepc.[]endpoint.relabelconfighttps://github.com/prometheus-operator/prometheus-operator/blob/main/Documentation/api.md#servicemonitorspechttps://github.com/prometheus-operator/prometheus-operator/blob/main/Documentation/api.md#servicemonito

prometheus 通过 prometheus-operator 配置的，怎么样配置联邦呢？先来个官网看看什么是联邦：Federation | Prometheushttps://prometheus.io/docs/prometheus/latest/federation/operator 添加 prometheus 的配置prometheus-operator/additional-scrape-config.md at main · prometheus-operator/prome

grafana 8 开启自带的 Alert我使用的是 k8s， 采用的是环境变量来打开 Alert 功能1 环境变量： - env: - name: GF_FEATURE_TOGGLES_ENABLE value: ngalert2 配置文件# /etc/grafana/grafana.ini[feature_toggles]# enable features, separated by spaces;enable = ngale.