自从上了Prometheus,睡觉真香!

Prometheus(普罗米修斯)监控系统(1) shardingfederationPrometheus Server 自带一个 UI,通过这个 UI 可以方便对数据进行查询和图形化展示;同时还可以对接 Grafana 可视化工具展示精美监控指标。2.Prometheus 基础架构Prometheus:主要是负责存储、抓取、聚合、查询方面。:主要是负责实现报警功能。:主要是实现接收有 Client-push 过来的指标数据,在指定的时间间隔,有主程序来抓取。*_exporter:主要是负责采集物理机、中间件的信息。二、Prometheus 安装。 阅读详情

点击上方“芋道源码”,选择“设为星标”

管她前浪,还是后浪?

能浪的浪,才是好浪!

每天 10:33 更新文章,每天掉亿点点头发...

源码精品专栏

 

来源:c1n.cn/ojbYT

5f64442dff7935acec2a2ed4b89cf63d.png


学习目标

如下:

  • 能够安装 prometheus 服务器

  • 能够通过安装 node_exporter 监控远程 linux

  • 能够通过安装 mysqld_exporter 监控远程 mysql 数据库

  • 能够安装 grafana

  • 能够在 grafana 添加 prometheus 数据源

  • 能够在 grafana 添加监控 cpu 负载的图形

  • 能够在 grafana 图形显示 mysql 监控数据

  • 能够通过 grafana+onealert 实现报警

基于 Spring Boot + MyBatis Plus + Vue & Element 实现的后台管理系统 + 用户小程序,支持 RBAC 动态权限、多租户、数据权限、工作流、三方登录、支付、短信、商城等功能。

项目地址:https://github.com/YunaiV/ruoyi-vue-pro

任务背景

某某某公司是一家电商网站,由于公司的业务快速发展,公司要求对现有机器进行业务监控,责成运维部门来实施这个项目。

基于微服务的思想,构建在 B2C 电商场景下的项目实战。核心技术栈,是 Spring Boot + Dubbo 。未来,会重构成 Spring Cloud Alibaba 。

项目地址:https://github.com/YunaiV/onemall

任务要求

如下:

  • 部署监控服务器,实现 7x24 实时监控

  • 针对公司的业务及研发部门设计监控系统,对监控项和触发器拿出合理意见

  • 做好问题预警机制,对可能出现的问题要及时告警并形成严格的处理机制

  • 做好监控告警系统,要求可以实现告警分级,一级报警:电话通知;二级报警:微信通知;三级报警:邮件通知

  • 处理好公司服务器异地集中监控问题,K8S 内部使用的监控系统就是普罗米修斯

任务分析

为什么要监控?答:实时收集数据,通过报警及时发现问题,及时处理。数据为优化也可以提供依据。

监控四要素:

  • 监控对象 [主机状态 服务 资源 页面,url]

  • 用什么监控 [zabbix-server zabbix-agent] => 普罗米修斯监控

  • 什么时间监控 [7x24 5x8]

  • 报警给谁 [管理员]

Prometheus 实战

Prometheus 概述

Prometheus(由 go 语言开发)是一套开源的监控&报警&时间序列数据库的组合。适合监控 docker 容器。因为 kubernetes 的流行带动了 prometheus 的发展。

https://prometheus.io/docs/introduction/overview/
时间序列数据

①什么是序列数据

时间序列数据(TimeSeries Data):按照时间顺序记录系统、设备状态变化的数据被称为时序数据。

应用的场景很多,如:

  • 无人驾驶车辆运行中要记录的经度,纬度,速度,方向,旁边物体的距离等等。每时每刻都要将数据记录下来做分析。

  • 某一个地区的各车辆的行驶轨迹数据

  • 传统证券行业实时交易数据

  • 实时运维监控数据等

②时间序列数据特点

性能好:关系型数据库对于大规模数据的处理性能糟糕。NOSQL 可以比较好的处理大规模数据,让依然比不上时间序列数据库。

存储成本低:高效的压缩算法,节省存储空间,有效降低 IO。

Prometheus 有着非常高效的时间序列数据存储方法,每个采样数据仅仅占用 3.5byte 左右空间,上百万条时间序列,30 秒间隔,保留 60 天,大概花了 200 多 G(来自官方数据)。

③Prometheus 的主要特征

如下:

  • 多维度数据模型

  • 灵活的查询语言

  • 不依赖分布式存储,单个服务器节点是自主的

  • 以 HTTP 方式,通过 pull 模型拉去时间序列数据

  • 也可以通过中间网关支持 push 模型

  • 通过服务发现或者静态配置,来发现目标服务对象

  • 支持多种多样的图表和界面展示

④普罗米修斯架构原理

如下图:

7d7870e0ef2cda15d7636a57b506541b.png
实验环境准备
c55a0fad8dc5bcc8658d03fa74c98dc3.png

1️⃣静态 ip(要求能上外网)

2️⃣主机名

33fdb3142b27da07638915f9ea8c8e6d.png

3️⃣时间同步(时间同步一定要确认一下)

4️⃣关闭防火墙,selinux

f09b56fe05fcc9e7bba1e363a991434d.png

①安装 prometheus

从官网下载相应版本,安装到服务器上:

https://prometheus.io/download/

官网提供的是二进制版,解压就能用,不需要编译。

05fd14d8fb96c3c188960b42141581ea.png

②Prometheus 界面

通过浏览器访问 http:// 服务器 IP:9090 就可以访问到 Prometheus 的主界面:

141e92f53c85d3adb886f0b61db8f5df.png

默认只监控了本机一台,点 Status→点 Targets→可以看到只监控了本机:

26126eb8491e7a6bf1357424ef6f008c.png

③主机数据展示

通过 http:// 服务器 IP:9090/metrics 可以查看到监控的数据:

e498eac9bb25f6bb5cec0d4916e30fa3.png

在 web 主界面可以通过关键字查询监控项:

60fa1eb5a4bda0c2766848fe5963d821.png

④监控远程 Linux 主机

在远程 linux 主机(被监控端 agent1)上安装 node_exporter 组件。

下载地址:

https://prometheus.io/download/
90765151d226950631a9833e6ade8ff0.png

扩展:nohup 命令。如果把启动 node_exporter 的终端给关闭,那么进程也会随之关闭。nohup 命令会帮你解决这个问题。

通过浏览器访问 http:// 被监控端 IP:9100/metrics 就可以查看到 node_exporter 在被监控端收集的监控信息:

2fad0dd3ec330ab077429c32bc11f2a6.png

回到 Prometheus 服务器的配置文件里添加被监控机器的配置段:

39ab3cba1ba1f7472d8ae10ad191c8c2.png

回到 web 管理界面→点 Status→点 Targets→可以看到多了一台监控目标:

15ffeccf434fea15126ae263d339309c.png

练习:加上本机 prometheus 的监控。答:在本机安装 node_exporter,也使用上面的方式监控起来。

⑤监控远程 MySQL

在被管理机 agent1 上安装 mysqld_exporter 组件:

f3436d2858ac86b155d648c5bbe70f77.png 0740f7e844433ac81dc260d1cd1ab1e4.png

回到 Prometheus 服务器的配置文件里添加被监控的 mariadb 的配置段:

362f04e9756f67f904d3c5163fdca047.png

回到 web 管理界面→点 Status→点 Targets→可以看到监控 mariadb 了:

0f5a3a17d9965b96f8dd43197f154eef.png fdb8c4120345138746dbb0af93665e56.png
Grafana 可视化图形工具

①什么是 Grafana

Grafana 是一个开源的度量分析和可视化工具,可以通过将采集的数据分析,查询,然后进行可视化的展示,并能实现报警。

d27c30fc22609578091dcc8bd9cb2f02.png

网址:

https://grafana.com/

②使用 Grafana 连接 Prometheus

在 grafana 服务器上安装 grafana,下载地址:

https://grafana.com/grafana/download
993dd14b36358cc8fc6ce508b57c4216.png

通过浏览器访问 http:// grafana 服务器 IP:3000 就到了登录界面,使用默认的 admin 用户,admin 密码就可以登陆了。

a33568dfb1711d58414daf4789ca5980.png

下面我们把 Prometheus 服务器收集的数据做为一个数据源添加到 grafana,让 grafana 可以得到 Prometheus 的数据。

1397ec3631ff37f6d239c7e9e864867e.png 287a237cb6bc17ce8734849fbb44c3f7.png bbd491751037bcb22ec02894d69ca08d.png 1cf2f6a4108e4912458e45326d484c76.png

然后为添加好的数据源做图形显示:

256986105e523009a3ba5ccf7d5ef034.png 26f580cddd735523c789c20103c155fe.png ba0bf5f171126dbae1cf077403631f2a.png d1b5e4f97f794a6291a12866247b2282.png

点击保存:

56f40be0a505a4ec29ba5324f2cc9b78.png

最后在 dashboard 可以查看到:

d7d0a6e62461021339fe1ac08c2d0511.png

匹配条件显示:

8c9cd5f5dd74fdcd1b7bb9b4b61d5cf7.png a4612b34f67589312b9c1b09084276f4.png

③Grafana 图形显示 MySQL 监控数据

在 grafana 上修改配置文件,并下载安装 mysql 监控的 dashboard(包含相关 json 文件,这些 json 文件可以看作是开发人员开发的一个监控模板)。

参考网址:

https://github.com/percona/grafana-dashboards
8f18b34d48edcbc419d29251e81f92c1.png

在 grafana 图形界面导入相关 json 文件:

9026fdef0ee9393d8d6a77c500116d60.png ab53141b27389a3dd639aece9105bb84.png

点 import 导入后,报 prometheus 数据源找不到,因为这些 json 文件里默认要找的就是叫 Prometheus 的数据源,但我们前面建立的数据源却是叫 prometheus_data(坑啊)。

那么请自行把原来的 prometheus_data 源改名为 Prometheus 即可(注意:第一个字母 P 是大写)。

然后再回去刷新,就有数据了,如下图所示:

397174cee21294bd04aa2b53ed33d9d7.png

过段时间再看,就会有数据了,如下图所示:

43c853dceca652d610da2ca559b4c071.png

④Grafana+onealert 报警

Prometheus 报警需要使用 alertmanager 这个组件,而且报警规则需要手动编写(对运维来说不友好)。所以我这里选用 grafana+onealert 报警。注意:实现报警前把所有机器时间同步再检查一遍。

先在 onealert 里添加 grafana 应用:

085ad91ee39765a7ca86d67f52b8fbd9.png 4a24f26c2d5061b86366dd1bdaa463d0.png

配置通知策略:

7631f467a2e6a082fb53c71ee8ea1dbb.png

在 grafana 增加通知通道:

7786cfbf99514011c292b2d84b3e5b2d.png b44dd5c3bd43640b1969e34de450a99f.png a31897d8a7fea3251e4b0111b27fc2b4.png

现在可以去设置一个报警来测试了(这里以我们前面加的 cpu 负载监控来做测试):

2c493d5c8d7d503a0712f31c7c3b4d4c.png d25f7690ba39aa2ffcdb3bc1c99a1bc7.png 0d3df3e13087a6b2fae93c07ff3523bb.png 4178b4e92d9147dad4edec96b9d135a9.png

保存后就可以测试了,如果 agent1 上的 cpu 负载还没有到 0.5,你可以试试 0.1,或者运行一些程序把 agent1 负载调大。

最终能测试报警成功:

3751b2961f4812ce8e9ce28acd749f97.png

最终的邮件报警效果:

1e243f5310c5c9bc2c8c0865101b7ecf.png

测试 MySQL 链接数报警:

96418035da106e82b530d6f5605f9af4.png 01e7ef736dadbebe3b482deedc7e5dd9.png 44fab1750fba5365d9d3d251feba31b8.png ec1481892f61cf9b29ff4916e2a5f652.png e9a169a73b2ca959c6a5fcb532196dd6.png

⑤总结报警不成功的可能原因

如下:

  • 各服务器之间时间不同步,这样时序数据会出问题,也会造成报警出问题

  • 必须写通知内容,留空内容是不会发报警的

  • 修改完报警配置后,记得要点右上角的保存

  • 保存配置后,需要由 OK 状态变为 alerting 状态才会报警(也就是说,你配置保存后,就已经是 alerting 状态是不会报警的)

  • grafana 与 onealert 通信有问题



欢迎加入我的知识星球,一起探讨架构,交流源码。加入方式,长按下方二维码噢:

6d26b0b830c7ce1e9916c5db3094b459.png

已在知识星球更新源码解析如下:

ab035156d51895fac6f0762e752fccc6.png

42cb4ad55a59f9ccff5834451bf4f7d3.png

a9538909171e2a0cfaf1174fb546cfec.png

710049affa1bafc5d8dcc39a498f38cb.png

最近更新《芋道 SpringBoot 2.X 入门》系列,已经 101 余篇,覆盖了 MyBatis、Redis、MongoDB、ES、分库分表、读写分离、SpringMVC、Webflux、权限、WebSocket、Dubbo、RabbitMQ、RocketMQ、Kafka、性能测试等等内容。

提供近 3W 行代码的 SpringBoot 示例,以及超 4W 行代码的电商微服务项目。

获取方式:点“在看”,关注公众号并回复 666 领取,更多内容陆续奉上。

文章有帮助的话,在看,转发吧。
谢谢支持哟 (*^__^*)
若依分离版搭建Prometheus+Grafana+Exporter 阅读详情

相关推荐

写给小白的“具身智能”入门科普

智能”,大家都懂,也就是AI。那么,什么是“具身”?“具身”是一个很小众的名词,通常都出现在哲学、认知科学领域。它的英文叫Embodied,是embody的过去式和过去分词。em-表示“进入,使……”,-body表示“身体”。组合起来,就是“使……进入身体”。Embodied Intelligence(具身智能),顾名思义,就是“使智能进入身体”、“给智能一个身体”的意思。那么,具身智能,是不是就是“AI+身体”呢?这样说并不准确。

欢迎来到我的博客 1826

【RuoYi-Vue-Plus】扩展笔记 07 - CentOS 7 集成 Prometheus + Grafana 监控初体验

CentOS 7 集成 Prometheus + Grafana 监控流程。

MichelleChung的星球 2764

避开模板匹配的坑:OpenCVSharp中边缘梯度算法的优化实践

本文深入探讨了OpenCVSharp中边缘梯度算法在模板匹配中的优化实践,解决了传统方法在尺度变化、角度旋转和光照差异下的局限性。通过Sobel算子提取边缘梯度特征,结合轮廓检测和多尺度匹配策略,显著提升了匹配的鲁棒性和准确性。文章还分享了并行计算、内存访问优化等实战技巧,适用于工业检测和自动化识别场景。

http9protocoller的博客 199

RuoYi-Vue-fast数据库性能监控:Prometheus与Grafana集成

在现代Web应用开发中,数据库性能直接影响系统整体响应速度和稳定性。RuoYi-Vue-fast作为基于SpringBoot和Vue的前后端分离权限管理系统,其数据库层的监控尤为重要。本文将详细介绍如何通过Prometheus(普罗米修斯)和Grafana(图形化监控工具)构建数据库性能监控体系,帮助运维和开发人员实时掌握系统运行状态。 ## 系统监控现状分析 RuoYi-Vue-fast已内...

gitblog_00371的博客 887

FFmpeg实战:5分钟搞定m3u8视频下载与ts文件合并(附完整命令)

本文详细介绍了如何使用FFmpeg快速下载m3u8视频并合并ts文件为mp4格式。通过简洁的命令行操作,读者可以轻松完成视频处理任务,包括环境准备、链接获取、下载合并及性能优化等实用技巧,特别适合需要高效处理流媒体内容的用户。

weixin_30836759的博客 222

[QMT和ptrade量化交易小白入门]-112、小市值热点概念交易策略,回测5年20倍

本专栏主要是介绍QMT和ptrade的基础用法,常见函数,写策略的方法,也会分享一些量化交易的思路,大概会写200篇左右。QMT的相关资料较少,在使用过程中不断的摸索,遇到了一些问题,记录下来和大家一起沟通,共同进步。

木头大左的博客 1084

Prometheus+Grafana+NodeExporter 打造一款出色的监控系统,帅呆了!

????这是一个或许对你有用的社群????一对一交流/面试小册/简历优化/求职解惑,欢迎加入「芋道快速开发平台」知识星球。下面是星球提供的部分资料:《项目实战(视频)》:从书中学,往事中“练”《互联网高频面试题》:面朝简历学习,春暖花开《架构 x 系统设计》:摧枯拉朽,掌控面试高频场景题《精进 Java 学习指南》:系统学习,互联网主流技术栈《必读 Java 源码专栏》:知其然,知其所以然????这是一个或许...

weixin_44421461的博客 312

SKUA-GOCAD入门教程-第二节

软件启动及项目设置

江洋大葱的博客 1148

vue - 学习笔记

vue - 学习笔记1. 初始化一个vue项目2. 引入一些基本库并且使用2.1参考链接: [vue中导入bootstrap.css](https://www.cnblogs.com/BLACKJT/p/12204737.html) 1. 初始化一个vue项目 序号 说明 命令 1 初始化一个项目 vue init webpack 项目名称 2 初始化完成后不要选择使用npm下...

Prometheus的博客 1379

芒果YOLO11改进176:2025最新顶会论文|尺度动态损失函数Scale-based Dynamic Loss,即插即用|以减少标签不准确对损失函数稳定性的影响

芒果YOLO11改进186:2025最新顶会论文|尺度动态损失函数Scale-based Dynamic Loss,即插即用|以减少标签不准确对损失函数稳定性的影响

包括YOLOv5、YOLOv7、YOLOv8等模型改进 2136

基于FPGA的时间数字转换(TDC)设计(五:基于Carry4的高精度TDC设计)

基于FPGA的时间数字转换(TDC)设计,此为第五篇:基于Carry4的高精度TDC设计。提供工程文件及MATLAB测试分析代码

sdau2005的博客 8808

自从上了 Prometheus,睡觉真香!

《Prometheus监控系统全面指南》 摘要:Prometheus作为云原生时代的监控标准工具,彻底改变了传统监控系统的局限性。本文系统介绍了Prometheus的核心架构、数据模型和安装配置方法,详细解析了其多维数据采集、PromQL查询语言和告警管理体系。通过NodeExporter等组件实现各类系统指标的采集,结合Alertmanager实现智能告警管理,并展示了与Grafana的可视化集成方案。文章还深入探讨了大规模场景下的高可用架构设计,包括联邦集群和远程存储方案,以及Kubernetes环境中

油墨香^-^的博客 586

在 SAP BAS 中扩展标准 SAP Fiori 应用并部署到 ABAP 环境的完整实践指南

SAPUI5 Adaptation Project 摘要(148字) SAPUI5 Adaptation Project 提供了一种高效扩展标准Fiori应用的方式,通过创建应用变体(Application Variant)实现差异化定制。开发者可在SAP BAS中使用可视化编辑器修改UI元素(如隐藏字段、调整表格布局、添加按钮等),而无需重写业务逻辑。变体部署到ABAP环境后,可与标准应用并行使用,且能随原应用升级保持同步。典型应用场景包括为不同用户角色定制简化界面或增强特定功能,既满足个性化需求,又保留

2007 年 ~ 2025 年,深耕 SAP 技术 18 年 188

自从上了 Prometheus 监控,睡觉真香!

点击关注公众号,Java干货及时送达对很多人来说,未知、不确定、不在掌控的东西,会有潜意识的逃避。当我第一次接触 Prometheus 的时候也有类似的感觉。对初学者来说, Prometh...

Java技术栈,分享最主流的Java技术 1070

精雕软件(JDpaint) 5.5 绿色版

精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版

OV9734 DATASHEET,完整规格书

OV9734完整规格书,包括电气参数,尺寸规格,寄存器配置表等

SpringCloud 微服务 grafana prometheus alertmanager 可视化监控告警平台

grafana 安装: docker stop grafana docker rm grafana docker run -d \ -p 3000:3000 \ --name=grafana \ -e "GF_SECURITY_ADMIN_PASSWORD=admin" \ -e "GF_INSTALL_PLUGINS=grafana-clock-p...

zhaoyang10的专栏 4236

lwip-2.0.3

lwip是瑞典计算机科学院(SICS)的Adam Dunkels 开发的一个小型开源的TCP/IP协议栈。实现的重点是在保持TCP协议主要功能的基础上减少对RAM 的占用。

netty 要点简单记录

简单记录下netty 要点 eventloop 可以用于使用scheduler模式定期执行某些动作,如下示意代码 ScheduledFuture<?> future = ch.eventLoop().scheduleAtFixedRate( new Runnable() { @Override public void run() { System.out.prin

weixin_40455124的博客 793

Prometheus + Grafana微服务监控<四>:Prometheus自定义埋点

目录 一、Prometheus自定义指标类型 1.1 Counter(计数器) 1.2Gauge(仪表盘) 1.3 Histogram(直方图) 1.4Summary(摘要) 二、PromQL语句 2.1查询结果类型(3种) 2.2 查询语句 三、gateway自定义埋点 3.1 引入jar包 3.2 项目添加配置 3.3 gateway创建全局过滤器 四、Grafana自定义图表 五、参考资料 一、Prometheus自定义指标类型 共4种指标类型:Counter、G...

爱我所爱0505 3100

vue - 项目部署到 nginx中

vue - 项目部署到 nginx中 1. 服务器接口配置 #端口和访问路径配置 server: port: 8888 servlet: context-path: /api #访问的路径api与下面的nginx配置一致 2. vue项目axios的baseUrl配置 import axios from 'axios'; const request = axios.creat...

Prometheus的博客 506

微服务框架(二十四)Prometheus 监控埋点

此系列文章将会描述Java框架Spring Boot、服务治理框架Dubbo、应用容器引擎Docker,及使用Spring Boot集成Dubbo、Mybatis等开源框架,其中穿插着Spring Boot中日志切面等技术的实现,然后通过gitlab-CI以持续集成为Docker镜像。 本文为Prometheus 监控埋点 本系列文章中所使用的框架版本为Spring Boot 2.0.3-REL...

若明天不见 7970

Spring WebFlux中的响应式编程系列(十六):日志与监控

在前十五篇文章中,我们探讨了Spring WebFlux的基础概念、Reactor、错误处理、数据流转换、响应式数据库访问、性能优化、安全性、测试、部署与运维、最佳实践与常见陷阱、与微服务架构的集成以及实时数据推送。本篇文章将深入探讨如何在Spring WebFlux应用中实现有效的日志记录与监控,以确保系统的可观测性和稳定性。监控是确保系统稳定性和性能的关键。在Grafana中添加Prometheus数据源,并创建仪表盘以监控Spring WebFlux应用的关键指标,如响应时间、请求数量、错误率等。

阿里渣渣java研发组-群主 1438

7步实现Vue.Draggable性能监控:从拖拽到Prometheus数据可视化

拖拽交互是现代Web应用的核心体验,但你是否遇到过大型列表拖拽卡顿、用户操作无响应的问题?本文将带你从零构建Vue.Draggable组件的性能监控系统,通过7个实战步骤实现拖拽行为追踪、性能指标采集,并最终导出为Prometheus格式数据,为前端性能优化提供数据支撑。 ## 为什么需要监控拖拽性能? Vue.Draggable作为基于Sortable.js的Vue组件[src/vuedra...

gitblog_00686的博客 986

Prometheus/Metrics监控dubbo线程池状态

代码里用了一个AtomicBoolean inited变量,因为一个项目里大概率是有多个service的,每一个service都会去做export操作,所以这里的onApplicationEvent方法,会进来多次,但实际上netty进程只会创建一次,就是在第一个service的export动作里完成的,所以只要第一个通知进来,就可以了。然后第一篇文章里,为了获取dubbo线程池,通过一个死循环去不断的去获取,然后注册到Registry里,因为不知道dubbo线程池实例化好的时机。

miaokezhang的博客 2558
上一篇: @RequestBody 接收数组、List 参数、@Deprecated 标记废弃方法
下一篇: 5 月底,Java 又涨薪了!
公众号-芋道源码
博客等级 码龄10年 1639粉丝 377原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值