新手学习Prometheus监控Day06

最新推荐文章于 2024-08-27 15:16:21 发布
最新推荐文章于 2024-08-27 15:16:21 发布
阅读量852 收藏 21
点赞数 7
CC 4.0 BY-SA版权
文章标签： 学习 prometheus 贪心算法
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/weixin_40319231/article/details/141570207

文章目录

Prometheus Operator部署

Prometheus部署对比

Prometheus Operator 是 Kubernetes 原生的工具，它通过将 Prometheus 资源定义为 Kubernetes 对象（CRD）来简化 Prometheus 集群的管理。它自动化了在 Kubernetes 中配置和扩展 Prometheus 实例时涉及的常见任务，并提供了在 Kubernetes 环境中部署、配置和管理 Prometheus 的简单方式。

  • 通过 kubectl 或 Kubernetes API 创建 Prometheus Operator Custom Resource Definition (CRD)。
  • 使用 kubectl 或 YAML 文件创建 Prometheus 实例的定义。
  • Prometheus Operator 观察配置更改并创建、更新或删除 Prometheus 实例。
  • 官方安装文档： https://prometheus-operator.dev/docs/user-guides/getting-started/ 需要Kubernetes版本至少在v1.16.x以上。
  • 官方Github地址：https://github.com/prometheus-operator/prometheus-operator

kube-prometheus 提供基于Prometheus & Prometheus Operator完整的集群监控配置示例，包括多实例Prometheus & Alertmanager部署与配置及node exporter的metrics采集，以及scrape Prometheus target各种不同的metrics endpoints，并提供Alerting rules一些示例，触发告警集群潜在的问题。

  • 使用 YAML 文件或 Helm chart 安装 Kube-Prometheus。
  • Kube-Prometheus 部署 Prometheus、Alertmanager、Grafana 和 Pushgateway 等组件。
  • 使用 Prometheus Operator 观察和管理 Prometheus 和相关组件。
  • 官方安装文档：https://prometheus-operator.dev/docs/prologue/quick-start/
  • 安装要求：https://github.com/prometheus-operator/kube-prometheus#compatibility
  • 官方Github地址：https://github.com/prometheus-operator/kube-prometheus

helm chart prometheus-community/kube-prometheus-stack 提供类似kube-prometheus的功能，但是该项目是由Prometheus-community来维护。

  • 安装 Helm 并添加 Prometheus Helm chart 存储库。
  • 使用 Helm 安装 Prometheus chart，包括 Prometheus、Alertmanager 和 Pushgateway 等组件。
  • 具体信息参考https://github.com/prometheus-community/helm-charts/tree/main/charts/kube-prometheus-stack#kube-prometheus-stack

总体来讲区别如下:

  • Prometheus Operator 可以更加自动化的管理 Prometheus 集群；
  • Kube-Prometheus 则提供了更加全面的监控解决方案，包括 Prometheus、Grafana 和 Alertmanager 等组件；
  • Helm chart 则通过一个命令即可快速部署 Prometheus 及其相关组件，但无法方便地进行各个组件的管理。

Kube-Prometheus：目前是k8s集群监控的主流项目，主要使用Prometheus做集群监控，使用Prometheus Operator做监控的运维管理，也就是以上二者的结合。

Prometheus-Operator CRD资源

CRD Custom Resource Definition

以Deployment为例，Deployment并没有直接创建Pod，而是管理RS， RS 管理 Pod，这就是控制器模式。控制器模式允许基于已有的资源定义更高阶的控制器，用来实现更复杂的能力。
在这里插入图片描述
CDR的特点

  • CRD 本身是 Kubernetes 的一种资源，允许用户自定义新的资源类型；
  • CRD 允许用户基于已有的 Kubernetes 资源，例如 Deployment、Configmap 等，拓展集群能力；
  • CRD 可以自定义一套成体系的规范，自造概念；

可以使用kubectl get crd查看当前集群下的crd资源

Prometheus通过CRD如何做资源管控

Prometheus Operator的本职就是一组用户自定义的CRD资源以及Controller的实现，Prometheus Operator负责监听这些自定义资源的变化，并且根据这些资源的定义自动化的完成如Prometheus Server自身以及配置的自动化管理工作。主要包括以下几个功能：

  • Kubernetes 自定义资源：使用 Kubernetes CRD 来部署和管理 Prometheus、Alertmanag
最低0.47元/天 解锁文章

200万优质内容无限畅学
Prometheus 采集vCenter7监控数据
极致，细节
12-01 3068
vmware_exporter 是一个开源软件，用于将 VMware vSphere 环境的性能指标暴露给 Prometheus 监控系统。它充当一个代理，运行在与 VMware vSphere 实例相同的主机上，并通过查询 vSphere 提供的 API 来获取有关虚拟机、主机、存储等方面的信息。
Prometheus监控（一）
m0_49265034的博客
08-28 566
优势监控数据的精细程度：1～4秒使用监控脚本部署集群的速度快插件丰富功能多样，包括exporter、pushgateway等本身基于数学模型，有大量的实用模型，可以实现很多复杂功能的监控业务逻辑图形展示优美，可视化出众不足如果集群数量太大，那么单点的监控有性能瓶颈 目前尚不支持集群 只能workaround对磁盘资源也是耗费的较大，这个具体要看 监控的集群量 和 监控项的多少 和保存时间的长短。
prometheus监控VShereClient7.0_EXSi7.0主机状态
遥襟的博客
06-19 4015
[root@monitor vmware_exporter]# ls docker-compose.yaml [root@monitor vmware_exporter]# cat docker-compose.yaml services: vmware-exporter: image: pryorda/vmware_exporter:v0.11.1 container_name: vmware-exporter restart: unless-stopped port.
Prometheus（四）：VMware Vsphere监控及数据展示
dl_11的博客
03-21 2567
VMware exporter是一个用于 Prometheus 的 VMware vCenter 导出器（Exporter）。Prometheus 是一个开源的系统监控和警报工具包，而 Exporter 则是用于将特定服务或系统的度量指标转换为 Prometheus 可以理解的格式的工具。1.基础虚拟机（VM）和主机（Host）的度量指标：这可能包括 CPU 使用率、内存使用情况、磁盘 I/O 等基础性能指标。
Prometheus通过VMware_exporter代理实现监控VMwareVcenter
wh00000001的博客
01-09 3612
访问9090端口，有网页出来则正常启动，192.168.11.109就是安装Prometheus的centos的IP地址：↓。node_exporter安装在，你所需要的监控的机子上，现在在主控主机上，作用即为，自己监控自己。下载完后，不管用什么方法，上传至你所需要安装的主机中，然后开始安装。还是刚刚的页面，然后往下拉，找到node_exporter。如果出现了错误，大概率是多了（少了）几个空格，仔细检查。其中0是临时关闭，重启电脑后会再次开启，1则为开启。③填写完URL，拉至最低，点击保存。
新手学习Prometheus监控Day07
胖胖的博客
08-27 1917
Prometheus-operator 通过定期循环watch apiserver，获取到CRD资源（比如servicemonitor）的创建或者更新，将配置更新及时应用到运行中的prometheus pod中转换成标准promethesu配置文件供prometheus server使用。各个CRD以及operator之间的关系使用CRD做prometheus配置，“匹配” 是一个很重要的细节，详细匹配关系如图，任何地方匹配失败会导致转化成的标配prometheus文件无法识别到targets。
新手学习Prometheus监控Day02
胖胖的博客
08-21 1748
Prometheus使用各种Exporter来监控资源。Exporter可以看成是监控的agent端，它负责收集对应资源的指标，并提供接口给到Prometheus读取。
新手学习Prometheus监控Day01
胖胖的博客
08-20 780
官网介绍https://prometheus.io/docs/prometheus/latest/getting_started/Prometheus架构图时间序列数据：按照时间顺序记录系统状态变化的数据称为时序数据时间序列数据引擎优势：①适用于大规模数据处理，性能 > NoSQL > 关系型数据库；②高效压缩算法，可以有效降低IO和存储空间。
新手学习Prometheus监控Day04
胖胖的博客
08-22 571
Exporter > Prometheus > Prometheus Rules > AlterManager > Wehook > PrometheusAlter > Routes > 钉钉、微信、飞书…官方站点：https://github.com/feiyu563/PrometheusAlert。手册：https://feiyu563.gitbook.io/prometheusalert。更新alertmanager配置，将所有的告警均指向告警分发平台。数据保持在持久化存储中，先创建持久化存储。
（一）prometheus 监控系统
！
03-29 1655
文章目录prometheus 基本介绍prometheus 整体架构prometheus 数据采集prometheus 指标类型prometheus 组件组成总结 prometheus 基本介绍 Prometheus 是一套开源的监控，报警、时间序列数据库的组合，起始是由 SoundCloud 公司开发的。随着发展，越来越多公司和组织接受采用Prometheus，社区也十分活跃，他们便将它独立成开...
VMware exporter收集Vcenter实现Prometheus监控-2023-10
Fu__Yan的博客
10-28 3473
本文章不做调整，直接使用重写标签 replacement : locahost:9272;vcenter.company.com可修改为VcenterIP。这里的账户密码为 SSO账户密码，不是Esxi 的系统密码。替换其中账户、密码、Vcenter IP。a.装有Docker环境；部分配置需要根据环境修改。
prometheus监控服务器、网络设备、Vmware-esxi
2303_77150012的博客
04-24 3582
采用prometheus方式进行部署，监控本地服务器、网络线路、域名访问达到阈值触发告警，从而快速定为问题源加快响应速度。
监控系统-Prometheus（普罗米修斯）（四）存储机制（Long-Term Storage）
西京刀客
08-12 7922
本地存储也限制了Prometheus的可扩展性，带来了数据持久化等一系列的问题。为了解决单节点存储的限制，prometheus没有自己实现集群存储，而是提供了远程读写的接口，让用户自己选择合适的时序数据库来实现prometheus的扩展性。...
prometheus存储
k8seasz的博客
06-25 7017
prometheus
prometheus监控数据持久化
red_sky_blue的专栏
05-09 1256
prometheus监控数据持久化
总结：Prometheus长期存储方案
热门推荐
w2009211777的专栏
07-27 1万+
prometheus存储梳理
Prometheus Operator（五） 修改数据存储时间
qq_23435961的博客
12-11 7417
Prometheus Operator（五） 修改数据存储时间 前面说了prometheus operator持久化的问题，但是还有一个问题很多人都忽略了，那就是prometheus operator数据保留天数，根据官方文档的说明，默认prometheus operator数据存储的时间为1d，这个时候无论你prometheus operator如何进行持久化，都没有作用，因为数据只保留了1天，那么你是无法看到更多天数的数据 官方文档可以配置的说明 图片来自官方文档 如果你的prometheus ope
高可用 Prometheus 的常见问题
云原生实验室
10-12 4098
监控系统的历史悠久，是一个很成熟的方向，而 Prometheus 作为新生代的开源监控系统，慢慢成为了云原生体系的事实标准，也证明了其设计很受欢迎。本文主要分享在 prometheus ...
一个完整的程序项目应该有哪些内容
最新发布
04-02
<think>嗯，用户现在问的是“一个完整的程序项目应该有哪些内容”。首先，我需要理解用户的需求。可能用户是一个刚入门的开发者，或者正在计划开始一个项目，想要确保自己覆盖了所有必要的部分。用户可能对项目结构、开发流程或者软件工程的基本组成部分不太清楚，需要全面的指导。 接下来，我需要回忆一下软件开发生命周期的各个阶段以及项目管理的常见内容。通常，一个完整的项目不仅仅包括代码，还包括需求分析、设计、测试、部署、文档等部分。可能用户想了解的是从零开始到项目上线的整个流程，以及每个阶段需要完成的任务和产出物。 然后，考虑用户可能的背景。如果用户是学生或新手开发者，可能需要更基础的解释，强调每个部分的重要性和如何具体实施。如果是更有经验的开发者，可能需要更深入的细节，比如持续集成/持续部署（CI/CD）、自动化测试、监控日志等。 另外，用户之前的问题是关于预防XSS攻击的后端开发，所以可能用户现在转向更广泛的项目管理或结构问题，可能是在扩展他们的知识面，或者正在规划一个完整的项目，需要全面的指导。 需要确保回答结构清晰，分步骤或分模块介绍，这样用户容易理解。同时，可能需要举一些例子或使用场景，帮助用户更好地理解每个部分的重要性。例如，在需求分析阶段，需要明确用户故事；在架构设计时，选择合适的技术栈等。 还要注意用户提到的“完整”项目，可能包括开发之外的内容，比如文档撰写、团队协作工具、版本控制等。这些都是确保项目可维护性和协作效率的重要部分。 最后，需要检查是否有遗漏的部分，比如安全性、性能优化、错误处理等，这些虽然在前一个问题中提到过XSS防御，但在整个项目中也是不可或缺的。可能需要在回答中强调这些方面的重要性，尤其是在不同阶段如何整合进去。 总结下来，回答需要涵盖项目生命周期的各个阶段，从需求到维护，每个阶段的关键内容，以及支撑项目的工具和最佳实践，帮助用户构建一个全面且健壮的项目结构。</think>一个完整的程序项目需要涵盖技术实现、项目管理、协作流程和长期维护等多个维度。以下是详细的结构框架和关键内容： --- ### 一、**项目前期准备** #### 1. 需求分析 - **用户故事**：明确目标用户的核心需求（如："作为用户，我希望登录后能看到个人订单列表"） - **功能清单**：用优先级矩阵（如MoSCoW法则）区分 *Must Have* 和 *Nice to Have* - **非功能性需求**：性能（响应时间≤2s）、安全性（HTTPS强制）、兼容性（支持Chrome/Firefox最新3个版本） #### 2. 技术选型 - **架构设计**： - 单体架构 vs 微服务（如电商系统选Spring Cloud微服务） - 前后端分离（React + RESTful API） - **技术栈**： ```markdown - 前端：React + TypeScript + Vite - 后端：Java/Spring Boot 或 Python/Django - 数据库：MySQL（关系型） + Redis（缓存） - 基础设施：Docker + Kubernetes（容器化部署） ``` --- ### 二、**开发阶段核心内容** #### 1. 代码结构 - **模块化分层**（示例）： ```bash src/ ├─ api/ # 接口定义 ├─ service/ # 业务逻辑 ├─ dao/ # 数据库操作 ├─ model/ # 数据实体 └─ utils/ # 工具类 ``` - **代码规范**： - ESLint/Prettier（前端） - Checkstyle/PMD（Java） - 提交信息格式（如：[feat]-用户登录） #### 2. 核心功能实现 - **关键代码示例**： ```python # 使用JWT实现登录（Django示例） from rest_framework_simplejwt.tokens import RefreshToken def login(request): user = authenticate(username=request.data['username'], password=request.data['password']) refresh = RefreshToken.for_user(user) return Response({ 'access': str(refresh.access_token), 'refresh': str(refresh) }) ``` #### 3. 数据管理 - **数据库设计**： - ER图（使用[dbdiagram.io](https://dbdiagram.io/)工具） - 索引优化（如对`user.email`添加唯一索引） - **数据迁移**： - 使用Flyway或Liquibase管理SQL变更历史 --- ### 三、**质量保障体系** #### 1. 自动化测试 - **分层测试策略**： ```markdown - 单元测试（JUnit/pytest）：覆盖核心逻辑 - 集成测试（TestContainers）：验证数据库/第三方API交互 - E2E测试（Cypress/Playwright）：模拟用户完整操作流 ``` - **覆盖率要求**：核心模块≥80%（通过JaCoCo/Pytest-cov统计） #### 2. 持续集成（CI） - **Pipeline示例**（GitLab CI）： ```yaml stages: - test - build - deploy unit_test: stage: test script: - mvn test docker_build: stage: build script: - docker build -t app:v1 . ``` --- ### 四、**部署与运维** #### 1. 基础设施 - **环境隔离**： - 开发环境（本地Docker） - 测试环境（K8s集群） - 生产环境（AWS EKS + RDS） - **监控告警**： - 使用Prometheus收集指标 - Grafana配置仪表盘（关注HTTP错误率>5%） #### 2. 日志管理 - **结构化日志**（JSON格式）： ```json { "timestamp": "2023-08-20T14:32:01Z", "level": "ERROR", "message": "支付服务调用超时", "trace_id": "abc123" } ``` - 使用ELK（Elasticsearch+Logstash+Kibana）集中分析 --- ### 五、**文档体系** #### 1. 必须包含的文档类型 | 文档类型 | 内容示例 | 工具建议 | |------------------|-----------------------------------|-----------------| | API文档 | Swagger/OpenAPI规范 | Swagger UI | | 架构设计文档 | 系统上下文图+C4模型 | Draw.io/PlantUML| | 运维手册 | 部署步骤+灾备方案 | Markdown | #### 2. 文档自动化 - 通过代码注释生成API文档（如JavaDoc/TypeDoc） - 架构图代码化（使用C4-PlantUML） --- ### 六、**协作与流程管理** #### 1. 开发流程 - **Git工作流**： - Feature分支开发 - Pull Request代码评审 - Semantic Versioning（版本号遵循`MAJOR.MINOR.PATCH`） #### 2. 项目管理 - 使用JIRA管理用户故事和缺陷 - 每日站会同步进度（15分钟限时） --- ### 七、**典型项目目录结构示例** ```bash project-root/ ├─ docs/ # 所有文档 ├─ src/ # 源代码 ├─ tests/ # 测试代码 ├─ scripts/ # 部署脚本 ├─ .gitlab-ci.yml # CI配置 ├─ Dockerfile # 容器化配置 ├─ README.md # 项目总览 └─ Makefile # 常用命令封装 ``` --- ### 八、**长期维护关键点** 1. **技术债务管理**：定期开展代码重构日（Tech Debt Day） 2. **依赖升级策略**：使用Dependabot自动检测漏洞依赖 3. **用户反馈循环**：建立issue模板收集用户问题 --- ### 扩展思考 - **如何评估项目完整性？** → 使用《微软软件质量检查清单》逐项核对需求/代码/测试覆盖率 - **小型项目 vs 大型企业级项目的差异？** → 小型项目可简化文档和流程，但必须保留核心测试和版本控制
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值