Centos7下Prometheus+Grafana部署 redis 以及 mysql 监控

已于 2024-04-07 14:16:53 修改
阅读量1.5k 收藏 10
点赞数 16
文章标签： prometheus grafana redis mysql
于 2024-04-06 12:26:26 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/2301_78479213/article/details/137424848
版权
本文详细介绍了如何在Centos7环境中部署Prometheus，配置redis和mysql的exporter，以及在Prometheus中添加相应的监控作业，最终实现对Redis和MySQL的实时监控，并通过Grafana进行可视化展示。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

Prometheus 部署 redis 以及 mysql 监控

本篇文章部分内容与我前一篇文章衔接，看不明白的可以参考我前一篇文章

Redis 监控

对于 Redis 的监控，Prometheus 可以收集多种指标，包括但不限于：

  • 命令统计：如每个命令的调用次数、执行时间等。
  • 内存使用情况：包括已使用的内存量、内存碎片等。
  • 客户端连接数：当前连接到 Redis 服务器的客户端数量。
  • 键空间统计：如键的总数、过期键的数量等。

为了实现 Redis 的监控，通常需要使用 Redis 的 INFO 命令来获取这些指标，并通过一个 exporter（如 redis_exporter）将这些指标转换为 Prometheus 可以理解的格式。这个 exporter 会定期运行 INFO 命令并解析输出，然后将结果暴露给 Prometheus 服务器。

MySQL 监控

对于 MySQL 的监控，Prometheus 同样可以收集丰富的指标，包括：

  • 查询性能：如查询的响应时间、慢查询的数量等。
  • 连接统计：当前活动的连接数、尝试失败的连接数等。
  • 存储引擎状态：如 InnoDB 的缓冲区使用情况、锁的状态等。
  • 系统和进程信息：如 MySQL 服务器的 CPU 和内存使用情况。

为了监控 MySQL，通常会使用 mysql_exporter 这样的工具。这个 exporter 会连接到 MySQL 服务器，使用性能模式（Performance Schema）或其他机制来获取指标，并将它们暴露给 Prometheus 服务器。

配置和集成

在配置了 Redis 和 MySQL 的 exporter 之后，你需要在 Prometheus 的配置文件中添加对应的作业（job），以便 Prometheus 能够定期从这些 exporter 拉取指标。一旦配置完成并重启 Prometheus，它就会开始收集并存储这些指标，然后你可以使用 Prometheus 的查询语言（PromQL）来查询和分析这些指标，或者使用 Grafana 这样的工具来进行可视化。

准备

  • 两台虚拟机
192.168.100.125  Prometheus端
192.168.100.126  node端
  • 开放防火墙端口

更改防火墙

在两台机器执行
请运行以下命令以开放端口

firewall-cmd --zone=public --add-port=9104/tcp --permanent
firewall-cmd --zone=public --add-port=9121/tcp --permanent
firewall-cmd --zone=public --add-port=6379/tcp --permanent
firewall-cmd --reload

  1. 打开 SELinux 的配置文件

    sudo vi /etc/selinux/config

  2. 在打开的配置文件中，找到SELINUX这一行。这一行可能设置为enforcing（强制模式）或permissive（宽容模式）。如果你想要将 SELinux 设置为宽容模式，确保这一行的值是permissive：

    SELINUX=permissive

  3. 保存并关闭文件。如果你使用的是 vi 编辑器，按Esc，然后输入:wq并按Enter来保存并退出。

  4. 为了让新的 SELinux 配置生效，你需要重启你的系统：

    sudo reboot

  5. 或者，你也可以尝试使用setenforce命令临时将 SELinux 设置为宽容模式，但这只是临时的，重启后 SELinux 会恢复到配置文件中的设置：

    sudo setenforce 0

注意：node端（也就是被监控的）安装MySQL和redis

安装 mysql

  1. 下载 MySQL 安装包
yum install wget
wget http://repo.mysql.com/mysql57-community-release-el7-8.noarch.rpm
  1. 安装 rpm 包
    使用 rpm 命令安装下载的 rpm 包
rpm -ivh mysql57-community-release-el7-8.noarch.rpm
  1. 安装 MySQL 社区版
    使用 yum 安装 MySQL 社区版
yum -y install mysql-community-server --nogpgcheck

这里使用--nogpgcheck参数忽略 gpg 检查。 4. 启动 MySQL 服务
使用 service 命令启动 MySQL 服务

service mysqld start
  1. 查看 MySQL 状态
systemctl status mysqld
  1. 登录 MySQL 并修改密码
    查看 MySQL 的临时密码
grep 'temporary password' /var/log/mysqld.log

登录 MySQL

mysql -uroot -p

输入临时密码
修改 MySQL 的 root 用户密码

ALTER USER 'root'@'localhost' IDENTIFIED BY '新密码';

注意，为了安全起见，新密码应该足够复杂并难以猜测。

  1. (可选)修改 MySQL 密码安全校验强度
    如果设置的密码简单，可能需要将 MySQL 的密码安全校验强度改为低风险
SET GLOBAL validate_password_policy=LOW;
SET GLOBAL validate_password_length=4;

安装 mysqld_exporter

以下在 node 端执行

  1. 下载安装 mysqld_exporter
wget https://github.com/prometheus/mysqld_exporter/releases/download/v0.14.0/mysqld_exporter-0.14.0.linux-amd64.tar.gz
tar -zvxf mysqld_exporter-0.14.0.linux-amd64.tar.gz  -C /usr/local/
cd /usr/local/
mv mysqld_exporter-0.14.0.linux-amd64 mysqld_exporter
cd /usr/local/mysqld_exporter

下载慢尝试

wget https://githubfast.com/prometheus/mysqld_exporter/releases/download/v0.14.0/mysqld_exporter-0.14.0.linux-amd64.tar.gz
  1. mysqld_exporter 配置

进入数据库创建账号

CREATE USER 'exporter'@'%' IDENTIFIED BY 'password' WITH MAX_USER_CONNECTIONS 3;
GRANT PROCESS, REPLICATION CLIENT, SELECT ON _._ TO 'exporter'@'%';

使用环境变量方式配置一下数据库连接认证信息并启动 Exporter

export DATA_SOURCE_NAME='exporter:password@(localhost:3306)/'
cd /usr/local/mysqld_exporter
nohup ./mysqld_exporter &

使用配置文件，在当前机器~/.my.cnf 配置文件中增加配置信息，注意修改自己实际情况参数。注意这个.my.cnf 在 exporter 所在机器创建就行，和 mysql 实际自己的配置文件 my.cnf 没有一点关系

vi ~/.my.cnf

[client]
   host=127.0.0.1
   port=3306
   user=exporter
   password=password
  1. 使用 systemctl 管理 mysqld_exporter
vi /usr/lib/systemd/system/mysqld_exporter.service

写入

[Unit]
Description=mysqld_exporter for Prometheus monitoring
After=network.target

[Service]
Type=simple
User=root
WorkingDirectory=/usr/local/mysqld_exporter/
ExecStart=/usr/local/mysqld_exporter/./mysqld_exporter
Restart=always

[Install]
WantedBy=multi-user.target

mysqld_exporter 启动成功后，默认端口是 9104， 访问 ip:9104/metrics 即可查看 mysql 相关指标

以下在 Prometheus 端执行

  1. 修改 Prometheus 的配置文件 prometheus.yml 增加 mysql 相关 exporter job
vi  /usr/local/prometheus/prometheus.yml

在最后添加

  - job_name: 'mysql'
    static_configs:
     - targets: ['192.168.100.126:9104']
       labels:
          instance: mysql
  1. 重启 Prometheus 和 grafana
systemctl restart prometheus
systemctl restart grafana-server

进入 prometheus 的 web 界面，再次选择 targets， 可以看到新加的 mysql 端点
mysql 端点

然后导入 mysql 的监控大盘
导入 mysql 的监控大盘
导入 mysql 的监控大盘

导入 mysql 的监控大盘

导入 mysql 的监控大盘

安装 redis

以下在 node 端执行
  1. 由于 Redis 是用 C 语言编写，所以编译时需要 gcc
yum install gcc-c++
wget http://download.redis.io/releases/redis-5.0.0.tar.gz
tar -zxvf redis-5.0.0.tar.gz -C ~
cd ~/redis-5.0.0/
make install PREFIX=/usr/local/redis
  1. 进入安装目录 bin 下,修改配置文件
cd /usr/local/redis/bin
cp /root/redis-5.0.0/redis.conf /usr/local/redis/bin
vi /usr/local/redis/bin/redis.conf

在大约69行修改daemonize no为daemonize yes
在大约136行修改bind 127.0.0.1为bind 0.0.0.0

执行如下命令启动 redis：

cd /usr/local/redis/bin
./redis-server ./redis.conf
  1. 查看是否启动成功
ps aux|grep redis
  1. 在系统服务目录里创建 redis.service 文件
vi /etc/systemd/system/redis.service

写入以下内容：

[Unit]
Description=redis-server
After=network.target

[Service]
Type=forking
ExecStart=/usr/local/redis/bin/redis-server /usr/local/redis/bin/redis.conf
PrivateTmp=true

[Install]
WantedBy=multi-user.target

重载系统服务：

systemctl daemon-reload
systemctl start redis.service

redis_exporter

wget https://github.com/oliver006/redis_exporter/releases/download/v1.36.0/redis_exporter-v1.36.0.linux-amd64.tar.gz
tar -zxvf redis_exporter-v1.36.0.linux-amd64.tar.gz -C /usr/local/
cd /usr/local/
mv redis_exporter-v1.36.0.linux-amd64 redis_exporter
cd /usr/local/redis_exporter
nohup ./redis_exporter --redis.password=123456 &

下载慢尝试

wget https://githubfast.com/oliver006/redis_exporter/releases/download/v1.36.0/redis_exporter-v1.36.0.linux-amd64.tar.gz
  1. 使用 systemctl 管理 redis_exporter
vi /usr/lib/systemd/system/redis_exporter.service

写入

[Unit]
Description=Redis Exporter for Prometheus
After=network.target

[Service]
ExecStart=/usr/local/redis_exporter/redis_exporter
Restart=always
User=root
Group=root
StandardOutput=append:/usr/local/redis_exporter/redis_exporter.log
StandardError=inherit
LogLevel=info

[Install]
WantedBy=multi-user.target

访问 http://ip:9121/metrics

以下在 Prometheus 端操作

在 prometheus.yml 中添加 redis_exporter 的配置， 要注意 yml 文件的语法规范

vi /usr/local/prometheus/prometheus.yml

在最后写入

  - job_name: "redis"
    static_configs:
    - targets: ['192.168.100.126:9121']
  1. 重启 Prometheus 和 grafana
systemctl restart prometheus
systemctl restart grafana-server

进入 prometheus 的 web 界面，再次选择 targets， 可以看到新加的 redis 端点

redis 端点

在 grafana 中导入监控大盘

redis 端点监控大盘

redis 端点监控大盘
redis 端点监控大盘

redis 端点监控大盘
参考文档：
https://blog.youkuaiyun.com/yichen0429/article/details/123819489
https://www.cnblogs.com/hxun/p/11075755.html

野猫吖
关注
Windows下搭建Redis可视化监控（redis_exporter+prometheus+grafana）
邓邓子的博客
05-30 2147
目录一、概述1.redis_exporter 是什么？2.prometheus 是什么？3.grafana 是什么？二、搭建 Redis 可视化监控1.redis_exporter 安装使用（1）下载（2）启动（3）监控2.prometheus 安装使用（1）下载（2）配置（3）启动（4）查看 targets 状态3.grafana 安装使用（1）下载（2）添加数据源（3）下载 redis 监控模板（4）导入模板（5）显示效果 一、概述 1.redis_exporter 是什么？ 是一个用于收集 redi
企业级监控实战：用Prometheus+Grafana+AlertManager构建高并发场景下的MySQL与服务器监控体系
专注于编程、AI、人工智能等多个领域内容研究和分析
04-18 804
优秀的监控体系应该像飞机的仪表盘——不仅能显示当前高度（监控），还能预测气流变化（预警），甚至自动调整飞行姿态（自愈）。通过本文的实践方案，你将获得：✔️ 分钟级故障定位能力✔️ 智能化的容量预测✔️ 多维度性能分析视角✔️ 符合金融级要求的审计追踪思考题：你的监控体系目前处于哪个阶段？是简单的指标收集，还是已经实现智能预警？欢迎在评论区分享你的监控实践！
使用Prometheus进行系统监控，包括Mysql、Redis，并使用Grafana图形化表示
kayotin的博客
09-25 1364
Prometheus+Grafana监控mysql和redis
Prometheus监控 mysql、redis、kafka、elasticsearch
yuansheng730的博客
02-11 1734
Prometheus监控实战篇 一、Prometheus安装 下载地址: 官方地址: 安装步骤: 1.下载Prometheus，我用的是2.32.1版本，需要其他版本可以去官方下载 wget https://github.com/prometheus/prometheus/releases/download/v2.32.1/prometheus-2.32.1.linux-amd64.tar.gz 2.解压 tar xf prometheus-2.32.1.linux-amd64.tar.gz 3.
centos 监控mysql语句_CentOS下使用MyTop实时监控MySQL
weixin_42509766的博客
01-26 151
MyTop安装$ yum -y install mytop #epel源MyTop命令参数$ man mytop-u / --user ：指定 username，预设是 root-p / --pass / --password ：指定password，预设是none-h / --host ：指定 MySQL server的hostname，预设是localhost-P / --port ：指定连接...
监控利器：普罗米修斯监控中间件（Nginx、Redis、MySql 等）
zls365365的博客
11-25 1501
我们的产品目前使用到的中间件有 Nginx、Redis、RabbitMQ、MySql 等，本文介绍怎样使用 Promtheus 来监控这些中间件。在《监控利器：普罗米修斯介绍和安装》中有一张图，表明了 Prometheus 的数据走向，如下：从图中可以看出，监控中间件的第一步就是安装中间件的 exporter，安装有两种方式：下载安装文件进行安装和使用 Docker 进行安装，下面示例中使用的是后...
Centos7 Prometheus+Grafana安装
song7999的专栏
09-18 434
Prometheus安装 下载下载Prometheus服务端 https://prometheus.io/download/ 解压 tar -xvf prometheus-2.12.0.linux-amd64.tar.gz cd prometheus-2.12.0.linux-amd64 运行 ./prometheus --config.file="prometheus.yml"...
CentOS下使用MyTop实时监控MySQL
weixin_34234721的博客
01-10 274
CentOS下使用MyTop实时监控MySQL MyTop的项目页面为：http://jeremy.zawodny.com/mysql/mytop/ MyTop安装 $ yum -y install mytop #epel源 MyTop命令参数 $ man mytop -u / --user <USERNAME>：指定 username，预设是 root ...
Prometheus+exporter+Grafana
无区新手的博客
08-28 1196
Prometheus：监控中心，监控exporter的实时数据exporter：采集数据工具，如下：Grafana：可视化监控。
生产环境部署prometheus+grafana+kafka+redis+nginx+node+postgres+mtail
qq_44637753的博客
12-17 6615
一、部署一台prometheus，保证各服务器与本服务器相通 1、默认端口：9090 安装目录(自选)：/usr/local/prometheus 2、prometheus.service 可修改端口。 3、上传tar包并解压 tar -zxvf prometheus-2.32.0-rc.1.linux-amd64.tar.gz -C /usr/local/ mv /usr/local/prometheus-2.32.0-rc.1.linux-amd64.tar.gz /usr/local/prometh
MySQL 监控 Linux版
04-25
可实时监测 MySQL通信量（In/Out）,每秒邀请（read/write）查询数，链接服务器的数量，缓冲器使用率，提供实时监控监测。
Prometheus+Grafana普罗米修斯，搭建和使用
别来沾边儿
09-03 853
wmi-exporter下载地址：https://github.com/prometheus-community/windows_exporter/releases/download/v0.16.0/windows_exporter-0.16.0-amd64.msi。监控集成器下载地址：http://www.coderdocument.com/docs/prometheus/v2.14/instrumenting/exporters_and_integrations.html。
Centos7+Prometheus2.31.1监控Mysql8.0.27\Node\Grafana8.3.3（亲测有效）
python 熊猫
12-15 2121
Centos7+Prometheus2.31.1监控Mysql8.0.27\Node\Grafana8.3.3（亲测有效）
centos7 mysql读写监控工具_centos7下使用mytop监控MySQL性
weixin_30407563的博客
01-21 268
mytop 是一个类似 Linux 下的 top 命令风格的 MySQL 监控工具，可以监控当前的连接用户和正在执行的命令网络上的文章太旧了，今天配置了一下记录下安装配置过程，有需要的同学可以看看1、先安装perl相关工具包：yum install perl-ExtUtils-CBuilder perl-ExtUtils-MakeMakertar -zxvf TermReadKey-2.37.ta...
CentOS7安装Lepus mysql监控系统
weixin_42124384的博客
10-26 540
一、阿里云选择一个带有lamp的镜像，我用的是【LAMP环境（CentOS7.2 Apache PHP5.6 ）】，推荐工具（xshell、xftp，主要是免费！） 二、部署自己的项目到阿里云： 网站根目录：/data/wwwroot/default 新增虚拟主机： xshell进入系统执行以下操作： cd /root/oneinstack ./vhost 按照提示操作即可！ phpMyAdmin...
centos下用mytop监控mysql
天才少年程序员-李荣盛专栏
06-19 1413
mytop 是一个类似 Linux 下的 top 命令风格的 MySQL 监控工具，可以监控当前的连接用户和正在执行的命令。 　　mytop的安装过程wget ftp://ftp.sunet.se/pub/Linux/distributions/scientific/6.0/x86_64/os/Packages/epel-release-6-5.noarch.rpm rpm -ivh epel-
使用docker部署Prometheus和Grafana去监控mysql和redis
云泽的博客
11-06 1113
服务性能监控。
zabbix系列(六) Centos7 zabbix 监控mysql性能
wuwei的博客
05-31 1256
通过之前的安装zabbix，我们知道了mysql的安装地址为192.168.11.139:3306 ,用户密码为zabbix/zabbix, 通过mysqladmin --help 获取mysqladmin 所用的配置文件所在目录找来找去只有/etc/my.cnf这个文件,打开这个文件找到它又引用了额外的配置文件vi /etc/my.cnf.d/mysql-clients.cnf,默认只有[mys...
CentOS7中Prometheus结合Grafana实现可视化监控
JessonLiu_的博客
01-11 1224
2.在线下载 下载不了访问我的蓝奏云下载 4.查看Prometheus版本 检查prometheus.yml格式的命令 5.创建prometheus 本地TSDB数据存储目录 6.使用systemctl管理Prometheus 写入 7.启动Prometheus并设置开机启动 8.查看prometheus服务状态 9.访问Prometheus的网页界面 浏览器输入 如果下载不了访问我的蓝奏云下载 写入 3.设置开机启动 4.在prometheus 主机添加node节点监控 在prometh
prometheus监控redis，内存使用量
最新发布
06-09
### Prometheus 监控 Redis 内存使用量的指标与配置 在 Prometheus 监控 Redis 的场景中，内存使用情况是一个关键性能指标。以下详细说明如何查看和配置 Redis 内存使用量的监控指标。 #### 1. Redis 内存使用量的主要指标 Prometheus 通过 Redis 提供的 `INFO memory` 数据获取内存相关指标。以下是常用的内存监控指标： - **`redis_memory_used`**：表示 Redis 实例当前使用的内存量（以字节为单位）。该指标直接反映 Redis 的内存占用情况[^1]。 - **`redis_memory_peak`**：表示 Redis 实例的历史峰值内存使用量（以字节为单位）。用于评估 Redis 的最大内存需求。 - **`redis_memory_rss`**：表示 Redis 进程从操作系统的视角所占用的实际物理内存大小（以字节为单位）。它通常大于或等于 `redis_memory_used`，因为还包括了 Redis 自身的内存开销。 #### 2. 配置 Prometheus 抓取 Redis 内存指标 为了使 Prometheus 能够抓取 Redis 的内存指标，需要确保以下配置正确： - 在 Redis 配置文件中启用 `INFO` 命令，并确保 Prometheus 可以访问 Redis 提供的指标接口。 - 修改 Prometheus 的配置文件 `prometheus.yml`，添加 Redis 的抓取目标。例如： ```yaml scrape_configs: - job_name: 'redis' static_configs: - targets: ['localhost:6379'] metrics_path: '/metrics' relabel_configs: - source_labels: [__address__] target_label: instance ``` 上述配置定义了一个名为 `redis` 的任务，Prometheus 将定期从指定地址抓取 Redis 的指标数据[^3]。 #### 3. 查询 Redis 内存使用量的 PromQL 示例 通过 Prometheus 的查询语言 PromQL，可以灵活地分析 Redis 的内存使用情况。以下是一些常见的查询示例： - 查询当前 Redis 实例的内存使用量： ```promql redis_memory_used{instance="localhost:6379"} ``` - 计算 Redis 内存使用率（假设总内存为固定值）： ```promql (redis_memory_used / 1024 / 1024) * 100 ``` - 比较 Redis 的实际内存占用 (`redis_memory_rss`) 和分配的内存 (`redis_memory_used`)： ```promql redis_memory_rss - redis_memory_used ``` #### 4. 设置告警规则 为了及时发现 Redis 内存使用异常，可以设置告警规则。例如，当 Redis 内存使用量超过 80% 时触发告警： ```yaml groups: - name: redis_memory_alerts rules: - alert: RedisMemoryUsageHigh expr: (redis_memory_used / 1024 / 1024) > 80 for: 5m labels: severity: critical annotations: summary: "Redis memory usage is above 80%" description: "Instance {{ $labels.instance }} has exceeded the memory threshold." ``` 上述规则会在 Redis 内存使用量持续 5 分钟高于 80 MB 时触发告警[^4]。 #### 5. 结合 Grafana 可视化内存趋势 为了更直观地监控 Redis 的内存使用趋势，可以通过 Grafana 创建仪表盘。具体步骤包括： - 在 Grafana 中添加 Prometheus 数据源。 - 使用 PromQL 查询 Redis 的内存指标。 - 创建折线图或柱状图展示内存使用量随时间的变化。 --- ###
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值