基于 Prometheus、Grafana 的 EMQ X 物联网 MQTT 服务器可视化运维监控

        Prometheus (https://prometheus.io/) 是由 SoundCloud 开源监控告警解决方案，支持多维数据模型 (https://prometheus.io/docs/concepts/data_model/)（时序由 metric 名字和 k/v 的 labels 构成），具备灵活的查询语句（PromQL）(https://prometheus.io/docs/querying/basics/) ，支持多种数据采集 exporters (https://prometheus.io/docs/instrumenting/exporters/)；支持告警管理，基于指标实现告警监控；支持多种统计数据模型，图形化展示友好，图形展示除了内置的浏览器，也支持 Grafana 集成。

       EMQ X 提供 emqx_statsd (https://github.com/emqx/emqx-statsd) 插件，用于将 EMQ X 运行指标及 Erlang 虚拟机状态数据输出到第三方的监控系统如 Prometheus 中。通过 Prometheus 自带的 node-exporter 还可以采集 Linux 服务器相关指标，实现服务器 + EMQ X 整体运维监控。

       本文提供了 Prometheus + Grafana 整套 EMQ X 运维监控方案搭建过程。

 

---

• 安装与准备

---

•  Docker 镜像下载

# Docker 镜像包下载
docker pull prom/node-exporter
docker pull prom/prometheus
docker pull prom/pushgateway

• 启动 node-exporter

可选，用于收集服务器指标如 CPU、内存、网络等，如果使用 Docker 安装则需要映射目标服务器响应的状态文件

docker run -d -p 9100:9100 \
  -v "/proc:/host/proc:ro" \
  -v "/sys:/host/sys:ro" \
  -v "/:/rootfs:ro" \
  --net="host" \
  prom/node-exporter

• 启动 pushgateway

pushgateway 用于接收 EMQ X 指标推送数据，需要保证 EMQ X 能够访问：

docker run -d -p 9091:9091 prom/pushgateway

• 启动 Prometheus

指定配置文件与监听端口以启动 Prometheus

# 指定配置文件并启动
docker run -p 9090:9090 \
-v $PWD/prometheus.yaml:/etc/prometheus/prometheus.yaml \
-d prom/prometheus \
--config.file=/etc/prometheus/prometheus.yaml

Prometheus 配置文件 prometheus.yaml 样例如下，详细含义请参考 Prometheus 文档：

# prometheus.yaml
global:
  scrape_interval:     10s # 默认抓取时间
  evaluation_interval: 10s # 每10秒评估一次rules
# 在本机上每一条时间序列上都会默认产生的，主要可以用于联合查询、远程存储、Alertmanager时使用。
  external_labels:
      monitor: 'emqx-monitor'
# 加载规则,依据 evaluation_interval 来定期评估rule
rule_files:
# - "first.rules"
# - "second.rules"
  - "/etc/prometheus/rules/*.rules"
# 数据拉取配置
scrape_configs:
# 表示在这个配置内的时间序例，每一条都会自动添加上这个{job_name:"prometheus"}的标签
  - job_name: 'prometheus'
    scrape_interval: 5s
    static_configs:
      - targets: ['127.0.0.1:9090']
# 服务器物理机监控
  - job_name: 'node-exporter'
    scrape_interval: 5s
    static_configs:
# node-exporter 根据实际情况填写
      - targets: ['192.168.6.11:9100']
        labels:
          instance: wivwiv-local
# EMQ X Pushgateway 监控
  - job_name: 'pushgateway'
    scrape_interval: 5s
    honor_labels: true
    static_configs:
# pushgateway 根据实际情况填写
      - targets: ['192.168.6.11:9091']

• 启动 EMQ X statsd 插件

打开 etc/emqx_statsd.conf，确认以下配置：

## pushgateway 地址
statsd.push.gateway.server = http://127.0.0.1:9091
## 数据采集/推送周期（毫秒）
statsd.interval = 15000

启动插件：

./bin/emqx_ctl load plugins emqx_statsd