prometheus+grafana+全方位立体监控redis

ONNX模型服务化实战:封装、API与立体监控 机器学习模型部署不是简单启动一个API,而是构建可维护、可观测、可回滚的生产级服务。核心在于模型封装的确定性(如ONNX格式替代Pickle)、服务契约的严谨性(OpenAPI+结构化错误码)以及覆盖基础设施、服务与模型三层的立体监控体系。ONNX Runtime凭借跨框架兼容性与高性能推理能力,成为生产环境模型服务化的关键技术选型;而FastAPI+Kustomize+Grafana组合则提供了轻量、稳定、GitOps友好的落地路径。本文聚焦真实业务场景下的MLOps工程实践,涵盖灰度发布、数据漂移检测、 阅读详情

Prometheus 概述

Prometheus(普罗米修斯)是一套开源的监控&报警&时间序列数据库的组合,起始是由SoundCloud公司开发的。随着发展,越来越多公司和组织接受采用Prometheus,社会也十分活跃,他们便将它独立成开源项目,并且有公司来运作。Google SRE的书内也曾提到跟他们BorgMon监控系统相似的实现是Prometheus。现在最常见的Kubernetes容器管理系统中,通常会搭配Prometheus进行监控。

Prometheus基本原理是通过HTTP协议周期性抓取被监控组件的状态,这样做的好处是任意组件只要提供HTTP接口就可以接入监控系统,不需要任何SDK或者其他的集成过程。这样做非常适合虚拟化环境比如VM或者Docker 。

Prometheus应该是为数不多的适合Docker、Mesos、Kubernetes环境的监控系统之一。输出被监控组件信息的HTTP接口被叫做exporter 。目前互联网公司常用的组件大部分都有exporter可以直接使用,比如Varnish、Haproxy、Nginx、MySQL、Linux 系统信息 (包括磁盘、内存、CPU、网络等等),具体支持的源看:https://github.com/prometheus

Prometheus的主要特点是:

多维数据模型(时序列数据由metric名和一组key/value组成)
在多维度上灵活的查询语言(PromQl)
不依赖分布式存储,单主节点工作.
通过基于HTTP的pull方式采集时序数据
可以通过push gateway进行时序列数据推送(pushing)
可以通过服务发现或者静态配置去获取要采集的目标服务器
多种可视化图表及仪表盘支持
Prometheus通过安装在远程机器上的exporter来收集监控数据,后面我们将使用到redies_exporter收集系统数据架构:
在这里插入图片描述

Grafana介绍

Grafana是一个跨平台的开源的度量分析和可视化工具,可以通过将采集的数据查询然后可视化的展示,并及时通知。它主要有以下六大特点:

1、展示方式:快速灵活的客户端图表,面板插件有许多不同方式的可视化指标和日志,官方库中具有丰富的仪表盘插件,比如热图、折线图、图表等多种展示方式;

2、数据源:Graphite,InfluxDB,OpenTSDB,Prometheus,Elasticsearch,CloudWatch和KairosDB等;

3、通知提醒:以可视方式定义最重要指标的警报规则,Grafana将不断计算并发送通知,在数据达到阈值时通过Slack、PagerDuty等获得通知;

4、混合展示:在同一图表中混合使用不同的数据源,可以基于每个查询指定数据源,甚至自定义数据源;

5、注释:使用来自不同数据源的丰富事件注释图表,将鼠标悬停在事件上会显示完整的事件元数据和标记;

6、过滤器:Ad-hoc过滤器允许动态创建新的键/值过滤器,这些过滤器会自动应用于使用该数据源的所有查询

效果

使用Grafana和Prometheus以及redis_exporter对redis节点进行监控。下面图监控某个redis节点:
在这里插入图片描述

安装
Redis_export下载并解压

下载地址:https://github.com/oliver006/redis_exporter

redis_exporter-v1.13.1.darwin-amd64.tar.gz

tar -zxvf redis_exporter-v1.13.1.darwin-amd64.tar.gz

使用默认配置

redis_exporter 常用的选项:

-redis.addr:指明一个或多个 Redis 节点的地址,多个节点使用逗号分隔,默认为 redis://localhost:6379

-redis.password:验证 Redis 时使用的密码;

-redis.file:包含一个或多个redis 节点的文件路径,每行一个节点,此选项与 -redis.addr 互斥。

-web.listen-address:监听的地址和端口,默认为 0.0.0.0:9121

启动单节点:

./redis_exporter redis//127.0.0.1:6379 &

启动多节点:

./redis_exporter -redis.addr xx.x.xxx.214:7000 xx.x.xxx:7001 xx.x.xxx.215:7002 xx.x.xxx.216:7003 &

Prometheus下载并解压

下载地址:https://prometheus.io/download

prometheus-2.22.2.darwin-amd64.tar.gz

tar -zxvf prometheus-2.22.2.darwin-amd64.tar.gz

prometheus.yml加入redis节点

  • job_name: redis

    static_configs:

    - targets: ['127.0.0.0:9121']
    
      labels:
    
        instance: redis-mac
    

./prometheus

prometheus默认端口9090

ip+9090访问

Grafana下载并解压

下载地址:https://github.com/grafana/grafana

grafana-6.4.3.linux-amd64.tar.gz

tar -zxvf grafana-6.4.3.linux-amd64.tar.gz

启动

./bin/grafana-server 默认端口3000 默认用户名admin 密码 admin

ip+3000

  • 第一步:
    在这里插入图片描述
    添加data sources
  • 第二步:
    在这里插入图片描述
    选择Prometheus
  • 第三步:
    在这里插入图片描述
  • 第四步:
    在这里插入图片描述
  • 第五步:
    在这里插入图片描述
  • 第六步:
    在这里插入图片描述
  • 第七步:
    在这里插入图片描述
  • 第八步:

在这里插入图片描述

  • 第九步:

在这里插入图片描述
导入 查看

  • 第十步:

在这里插入图片描述
最终结果页

  • 第十一步:

在这里插入图片描述

Java安全与监控实战:Spring Security+JWT+Prometheus构建VR看房系统 在现代分布式系统架构中,用户认证授权与系统可观测性是保障应用安全与稳定的两大基石。其核心原理在于,通过统一的安全框架管理身份验证与权限控制,并借助指标采集与可视化工具实现系统状态的实时监控。从技术价值看,这不仅提升了系统的安全防护能力,还能在出现性能瓶颈时快速定位问题,保障业务连续性。在诸如电商、金融、在线教育等高并发、重体验的应用场景中,这一技术组合尤为重要。以VR看房这类对流畅度与数据安全要求极高的业务为例,其典型实践便是整合Spring Security实现细粒度权限管理,利用JWT实现无状态令牌认证 阅读详情

相关推荐

用Trivy给K8s做安全体检:从YAML扫描到Prometheus监控全攻略

本文详细介绍了如何使用Trivy对Kubernetes集群进行全方位安全扫描,包括YAML清单、Helm Chart和容器镜像的检测,并结合Prometheus实现漏洞指标的可观测性。通过立体检测矩阵和性能优化技巧,帮助安全团队构建从基础设施即代码到运行时的全生命周期防护体系,提升云原生环境的安全性。

weixin_29306317的博客 193

redis集群监控

1、下载https://github.com/oliver006/redis_exporter/releases/download/v1.39.0/redis_exporter-v1.39.0.linux-amd64.tar.gz。vim /usr/local/prometheus-2.32.1.linux-amd64/prometheus.yml ,添加如下信息。Prometheus内置了一个web界面,我们可通过http://ip:9090进行访问。3、编写systemctl启动脚本。

liu_xue_xue的专栏 6713

Faraday漏洞管理平台监控与日志分析实战:从部署到优化的10个核心技巧

在软件开发和运维领域,可观测性是保障系统稳定性和业务连续性的基石。其核心原理在于通过指标、日志和追踪三大支柱,对系统的内部状态进行主动、多维度的度量与呈现。这项技术的核心价值在于将系统从“黑盒”变为“白盒”,使团队能够快速定位性能瓶颈、及时发现异常、清晰进行审计追溯,并基于数据驱动容量规划,从而提升整体运维效率与系统可靠性。在应用场景上,可观测性尤其适用于像Faraday这类复杂的业务应用平台。Faraday作为开源的漏洞管理与协同平台,其稳定运行直接关系到安全团队的工作流效率与漏洞修复周期。本文聚焦于如何

weixin_29324877的博客 303

Grafana Prometheus系统监控Redis服务

Grafana Prometheus系统监控Redis服务一、Grafana Prometheus系统监控Redis服务1.1流程1.2安装redis_exporter1.3配置prometheus1.4grafana配置1.5下载redis仪表盘模板1.6转载原文链接二、搭建相关博文 一、Grafana Prometheus系统监控Redis服务 1.1流程 collectd/telegraf...

爱是与世界平行 1047

ML模型生产化实战:ONNX封装、FastAPI服务与三层监控体系

机器学习模型部署不是简单导出pkl文件,而是涉及模型序列化、API服务化和全栈监控的系统工程。核心在于将训练好的模型转化为可复现、可扩展、可观测的生产级服务。ONNX作为跨框架标准格式,解决了模型可移植性与安全问题;FastAPI结合线程池与异步调度,平衡了CPU密集型推理与高并发响应需求;而分层监控(基础设施、服务、模型)则覆盖延迟、错误率、数据漂移、置信度衰减等关键指标,实现从‘能跑’到‘稳跑’的跃迁。本文聚焦真实产线中高频出现的OOM、延迟抖动、预测不一致等典型问题,提供可直接落地的MLOps工程方案

baichuan9723的博客 401

Prometheus实战篇:Prometheus监控redis

由于之前的触发器是全部写在了一个yml里面就是alert.yam,这样随着后面配置的触发器越来越多最终会变得难以维护.这里我们让它去读rules目录下所有的yml文件即可。一定记住这里需要仔细校对yaml语法,最好是能去在线验证yaml语法的网站上看看.yaml语法还是比较严格的一点缩进错误都不能有。配置Prometheus去采集(拉取)nginx_exporter的监控样本数据。grafana展示Prometheus从redis_exporter收集到的数据。因为是单机所以未配置集群的触发器。

helloworld工程师的博客 2873

Grafana+Prometheus系统监控之Redis

转载自:https://yq.aliyun.com/articles/251478 介绍 REmote DIctionary Server(Redis) 是一个由Salvatore Sanfilippo写的key-value存储系统。 Redis是一个开源的使用ANSI C语言编写、遵守BSD协议、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库,并提供多种语言的API。 ...

johnhuster的专栏 1393

Prometheus 采集redis监控数据

【代码】Prometheus 采集redis监控数据。

极致,细节 1299

Java设备数据采集Redis,Grafana+Prometheus系统监控之Redis【数据采集监控4】

介绍REmote DIctionary Server(Redis) 是一个由Salvatore Sanfilippo写的key-value存储系统。Redis是一个开源的使用ANSI C语言编写、遵守BSD协议、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库,并提供多种语言的API。它通常被称为数据结构服务器,因为值(value)可以是 字符串(String), 哈希(Map),...

weixin_35125159的博客 466

Prometheus监控Redis

Redis是一个广泛使用的内存数据库和缓存系统。使用Prometheus监控Redis可以帮助我们实时了解Redis的性能和健康状况。本文将详细介绍如何使用Prometheus来监控Redis。

探索云原生与智能化驱动下的安全运维新范式。关注DevSecOps、可观测性、AIOps等前沿领域,与您共赴技术前沿。 969

保姆级教程:用STM32CubeMX HAL库搞定ESP8266连接,附串口printf调试全流程

本文提供了一份详细的STM32CubeMX HAL库教程,指导开发者如何实现ESP8266无线模块的连接与调试。从开发环境搭建、串口配置到AT指令通信解析,涵盖了物联网开发中的关键步骤和常见问题解决方案,帮助开发者快速掌握STM32与ESP8266的集成技术。

weixin_28273593的博客 503

从零构建开源API监控平台:Celery+Prometheus+Grafana实战指南

在现代分布式系统和微服务架构中,API作为服务间通信的核心纽带,其可用性、性能和正确性直接影响业务连续性与用户体验。API监控的原理在于通过主动、周期性的探测请求,从网络层、协议层到业务层进行多维度的健康检查,并收集响应时间、状态码、响应体等关键指标。其技术价值在于变被动为主动,实现故障的快速发现与定位,避免因第三方服务或自身API异常导致的业务中断与数据不一致。典型的应用场景包括支付网关、短信服务、地图接口等关键外部依赖的可用性保障,以及内部微服务接口的性能基线监控与SLA度量。本文基于Python、Ce

weixin_33692284的博客 502

ComfyUI面部修复FaceDetailer保姆级教程:从模型选择到参数调优全解析

本文提供ComfyUI面部修复FaceDetailer的保姆级教程,深度解析从模型选择到参数调优的全过程。针对常见的五官模糊、肤色不均等问题,详细对比了BBox与Segm检测器的优劣,并给出SD1.5与SDXL模型的核心参数联动策略与实战方案,帮助用户精准掌控AI绘画中的面部修复效果。

weixin_29073241的博客 471

从RS485到Prometheus:构建机房自动化监控体系的实战指南

在IT基础设施运维领域,自动化监控是实现系统稳定与高效运行的核心基石。其基本原理是通过数据采集、传输、存储与分析,将物理设备与虚拟服务的状态转化为可度量的指标,从而实现对IT环境全景式的感知与洞察。这项技术的核心价值在于将运维人员从被动的“救火式”响应中解放出来,转向主动的预测与预防,极大提升了运维效率与系统可靠性。典型的应用场景覆盖从数据中心的动力环境(如温湿度、UPS)、网络设备,到服务器、虚拟化平台乃至上层应用服务的全栈监控。本文将聚焦于如何利用**Prometheus**监控生态与**RS485/M

weixin_42629671的博客 252

论文超详细精读|万字:2s-AGCN

1. 提出了一种新的双流自适应图卷积网络(2S-AGCN)用于基于骨架的动作识别。**模型中的图的拓扑既可以统一地学习,也可以通过BP算法以端到端的方式单独学习。** 2. 提出了一种同时对**一阶和二阶信息(骨架的长度与方向)建模的双流框架**,在识别精度上有了显著的提高。 它将骨架数据的图结构参数化,并嵌入到网络中,与模型共同学习和更新。 3. 文章主要创新点有两个,一个是双流网络,另外一个是自适应。

IanYue的博客 6382

UOS忘记密码别慌!用LiveCD工具5分钟搞定,附命令行救援模式详细步骤

本文详细介绍了UOS系统密码遗忘时的两种解决方案:图形化LiveCD工具和命令行救援模式。针对普通用户,LiveCD工具提供5分钟快速重置密码的便捷操作;而技术人员可通过命令行深度解析系统分区挂载与密码修改流程。文章还包含安全加固建议,帮助用户预防类似问题发生。

weixin_27032989的博客 588

从零开始搭建ELK+GPE监控预警系统

前言 本文可能不会详细记录每一步实现的过程,但一定程度上可以引领小伙伴走向更开阔的视野,串联每个环节,呈现予你不一样的效果。 业务规模 8个平台 100+台服务器 10+个集群分组 微服务600+ 用户N+ 面临问题 随着分布式微服务容器技术的发展,传统监控系统面临许多问题: 容器如何监控 微服务如何监控 集群性能如何进行分析计算 如何管理agen...

weixin_34032779的博客 144

PLC模糊控制模糊PID(梯形图实现+算法分析)

博途PLC的模糊PID控制详细内容请查看下面的博客文章:Matlab仿真+博途PLC模糊PID控制完整SCL源代码参考(带模糊和普通PID切换功能)_博途怎么实现模糊pid_RXXW_Dor的博客-优快云博客模糊PID的其它相关数学基础,理论知识大家可以参看专栏的其它文章,这里不再赘述,本文就双容水箱的模糊PID问题做详细讲解(包括所有源代码和模糊规则设置参数)。

RXXW_Dor的博客 5883

基于Spring Boot与OPC UA的堆垛机立体库WMS系统开发实战

自动化立体仓库(AS/RS)是现代物流与制造业提升空间利用率和作业效率的核心解决方案,其核心原理在于通过高层货架、堆垛机等自动化设备实现货物的高密度存储与精准存取。这一技术的核心价值在于将物理仓储空间与信息化管理系统深度融合,从而满足汽车制造、零部件仓储等行业对实时库存管理和快速响应的严苛要求。在软件层面,仓储管理系统(WMS)扮演着“大脑”的角色,负责库存管理、任务调度与策略执行。本文聚焦于如何利用**Java Spring Boot**框架构建高可用的WMS后端服务,并通过**OPC UA**这一工业标

weixin_30856725的博客 346

ABAP CDS View 从入门到精通教程目录:ABAP CDS View 在 SAP 技术体系中的重要地位

学习 ABAP CDS View 的开发技术,体会其背后的设计理念,也就掌握了 SAP S/4HANA 底层数据模型的设计精髓。

2007 年 ~ 2025 年,深耕 SAP 技术 18 年 4772

性能调优秘籍——让OpenClaw运行速度提升10倍(2026优化版)

OpenClaw性能优化核心摘要 本文详细介绍了提升OpenClaw系统性能的关键技术,包括: 使用性能分析器进行代码级性能诊断 内存优化与高效缓存策略 并发处理优化技术 数据库查询性能提升方法 重点内容包括: 全面的性能分析工具实现(计时、内存监控、错误跟踪) 自动生成性能报告和优化建议 操作耗时与内存占用分析算法 关键性能指标(平均耗时、内存增长)计算 通过系统性的性能分析优化,可使OpenClaw运行速度提升10倍以上。

博客 899
上一篇: redis 单台服务集群搭建
下一篇: JedisCluster分布式锁
狂野弘仁
博客等级 码龄8年 34粉丝 81原创
评论 1
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值