猫头虎分享已解决Bug || Logging and Monitoring Gaps: Missing logs or metrics

关注

原创最新推荐文章于 2026-11-09 13:28:12 发布 1.3k 阅读 AI 写同款· GEO 优化 ›

CI/CD——在Jenkins中pipeline解析与使用pipeline流水线自动化构建部署JavaWeb项目本文介绍在Jenkins中使用pipeline流水线自动化构建与部署的CI/CD流程。通过声明式Pipeline定义流水线，涵盖代码拉取、Maven编译、远程部署等阶段，结合Jenkinsfile实现流程代码化、可追溯。利用Agent、Environment、Tools等核心概念，支持多环境并行部署与异常处理，提升开发效率与发布可靠性。推荐采用声明式语法，结合PublishOverSSH插件完成安全部署，适用于企业级标准化交付场景。阅读详情

猫头虎分享已解决Bug || Logging and Monitoring Gaps: `Missing logs or metrics` 🐱🐯

摘要

👋 大家好，我是猫头虎！在云原生世界中，日志和监控是我们稳定运行的基础。但有时候，我们会遇到日志缺失或监控指标缺失的问题，这让调试变得异常困难。今天我们就来深入探讨这个话题，帮助大家轻松解决这个棘手的Bug！🎉

关于猫头虎

大家好，我是猫头虎，别名猫头虎博主，擅长的技术领域包括云原生、前端、后端、运维和AI。我的博客主要分享技术教程、bug解决思路、开发工具教程、前沿科技资讯、产品评测图文、产品使用体验图文、产品优点推广文稿、产品横测对比文稿，以及线下技术沙龙活动参会体验文稿。内容涵盖云服务产品评测、AI产品横测对比、开发板性能测试和技术报告评测等。

目前，我活跃在优快云、51CTO、腾讯云开发者社区、阿里云开发者社区、知乎、微信公众号、视频号、抖音、B站和小红书等平台，全网拥有超过30万的粉丝，统一IP名称为猫头虎或者猫头虎博主。希望通过我的分享，帮助大家更好地了解和使用各类技术产品。

原创作者：猫头虎

博主猫头虎的技术博客

全网搜索关键词：猫头虎
了解更多猫头虎的编程故事！
作者微信号： Libin9iOak
作者公众号： 猫头虎技术团队
更新日期： 2024年6月22日
🌟 欢迎来到猫头虎的博客 — 探索技术的无限可能！

专栏链接：

🔗 精选专栏：

《面试题大全》 — 面试准备的宝典！
《IDEA开发秘籍》 — 提升你的IDEA技能！
《100天精通鸿蒙》 — 从Web/安卓到鸿蒙大师！
《100天精通Golang（基础入门篇）》 — 踏入Go语言世界的第一步！
《100天精通Go语言（精品VIP版）》 — 踏入Go语言世界的第二步！

领域矩阵：

🌐 猫头虎技术领域矩阵：
深入探索各技术领域，发现知识的交汇点。了解更多，请访问：

猫头虎技术矩阵
新矩阵备用链接

在这里插入图片描述

一、问题描述 🧐

在云原生环境中，日志和监控是关键工具。然而，由于种种原因，我们常常会遇到以下问题：

缺少日志：某些服务没有记录日志，导致无法追踪问题。
监控指标缺失：关键指标没有被收集，无法进行有效监控。

二、原因分析 🔍

1. 日志配置错误 📝

日志系统需要正确的配置。如果某个服务未按规定记录日志，那么这部分日志就会缺失。

2. 监控系统未覆盖全部服务 📉

有时候，监控系统未能覆盖所有服务，导致某些关键指标无法收集。

3. 日志和监控系统故障 ⚠️

即使配置正确，如果日志和监控系统本身出现故障，也会导致数据缺失。

三、解决方法 🔧

1. 实施全面的日志和监控方案 🛠️

使用如ELK栈（Elasticsearch, Logstash, Kibana）、Prometheus和Grafana等工具，确保所有应用和服务都发送日志和指标到中央系统。

# 示例：使用Logstash配置日志收集
input {
  file {
    path => "/var/log/*.log"
    start_position => "beginning"
  }
}

output {
  elasticsearch {
    hosts => ["localhost:9200"]
  }
  stdout { codec => rubydebug }
}

2. 定期检查和更新配置 📅

确保所有配置定期检查和更新，避免因配置错误导致的日志或指标缺失。

# Prometheus配置示例
global:
  scrape_interval: 15s

scrape_configs:
  - job_name: 'kubernetes-apiservers'
    kubernetes_sd_configs:
      - role: endpoints
    relabel_configs:
      - source_labels: [__meta_kubernetes_namespace, __meta_kubernetes_service_name, __meta_kubernetes_endpoint_port_name]
        action: keep
        regex: default;kubernetes;https

3. 监控日志和监控系统本身 🔄

通过实施自我监控机制，确保日志和监控系统运行正常。

# Grafana报警规则示例
apiVersion: 1

alert:
  - name: HighErrorRate
    rules:
      - alert: HighErrorRate
        expr: job:request_latency_seconds:mean5m{job="myjob"} > 0.5
        for: 10m
        labels:
          severity: page
        annotations:
          summary: "High request latency"
          description: "Request latency is above 0.5s for more than 10 minutes."

四、操作步骤 🛠️

配置ELK栈：确保所有服务日志都发送到Elasticsearch。
配置Prometheus和Grafana：收集和展示所有服务的监控指标。
定期检查配置：使用脚本或工具定期检查配置文件。
实施自我监控：设置监控规则，确保日志和监控系统正常运行。

五、如何避免此类问题 🚫

严格遵循最佳实践：遵循官方文档和社区推荐的配置方法。
自动化部署和配置：使用CI/CD工具，确保配置的一致性和正确性。
定期培训和审计：对团队成员进行培训，并定期审计配置和运行状态。

六、代码案例演示 💻

以下是一个完整的示例，展示如何配置ELK和Prometheus来解决日志和监控缺失的问题：

# 安装Elasticsearch
docker run -d --name elasticsearch -p 9200:9200 -e "discovery.type=single-node" elasticsearch:7.6.2

# 安装Logstash
docker run -d --name logstash --link elasticsearch:elasticsearch -p 5044:5044 -p 9600:9600 -v ~/logstash.conf:/usr/share/logstash/pipeline/logstash.conf logstash:7.6.2

# 安装Kibana
docker run -d --name kibana --link elasticsearch:elasticsearch -p 5601:5601 kibana:7.6.2

# 安装Prometheus
docker run -d --name prometheus -p 9090:9090 -v ~/prometheus.yml:/etc/prometheus/prometheus.yml prom/prometheus

# 安装Grafana
docker run -d --name grafana -p 3000:3000 grafana/grafana