Go服务监控搭建入门 | 教程

【go-monitor】开源一个轻量的golang服务质量统计告警工具 简介 go-monitor基于golang开发,是一个轻量的,用于服务质量监控并实现分析告警的工具。go-monitor目前并不是一个独立的服务,而是希望被大多数基于golang开发的项目如同引入一个日志组件一样使用。 go-monitor能做什么 通过上报接口、函数、或者是任意调用服务的耗时以及其成功状态,go-monitor将按照设定的周期自动进行服务质量分析,统计,并输出详细的 阅读详情

前言

一直以来都想知道现在「Go服务监控」是如何搭建和工作的,于是最近就抽了点时间去学习下这服务监控的搭建过程。

我选用的技术栈是「prometheus + grafana」。

架构简介

整体的简易架构如下:

  • Grafana:作为UI,提供了丰富的监控面板。

  • Prometheus:Prometheus是一个监控&时序数据库。

  • 需要被监控的服务:需要被监控的服务按照标准提供一个metrics接口,Prometheus会去通过暴露的这个接口拉取数据。Go已经有封装好的包github.com/prometheus/client_golang/prometheus,我们直接采用就可以了。

准备镜像

选取Prometheus镜像,如下:

docker pull bitnami/prometheus:2.26.0
docker run -d -p 9090:9090 bitnami/prometheus:2.26.0

选取Grafana镜像,如下:

docker pull bitnami/grafana:7.5.4
docker run -d -p 3000:3000 bitnami/grafana:7.5.4

Go服务demo代码镜像:

首先我们选用现有封装好的代码包,如下:

// 选用现有的prometheus包
go get github.com/prometheus/client_golang/prometheus
go get github.com/prometheus/client_golang/prometheus/promauto
go get github.com/prometheus/client_golang/prometheus/promhttp

demo代码如下:

package main

import (
	"net/http"

	"github.com/prometheus/client_golang/prometheus/promhttp"
)

func main() {
	// 对外提供/metrics接口
	http.Handle("/metrics", promhttp.Handler())
	http.ListenAndServe(":2112", nil)
}

启动Go服务,curl请求接口:

curl http://localhost:2112/metrics

获取到监控指标数据如下:

# HELP go_gc_duration_seconds A summary of the pause duration of garbage collection cycles.
# TYPE go_gc_duration_seconds summary
go_gc_duration_seconds{quantile="0"} 2.8697e-05
go_gc_duration_seconds{quantile="0.25"} 3.8094e-05
go_gc_duration_seconds{quantile="0.5"} 0.000125819
go_gc_duration_seconds{quantile="0.75"} 0.000190862
go_gc_duration_seconds{quantile="1"} 0.0098972
go_gc_duration_seconds_sum 0.025042382
go_gc_duration_seconds_count 45
......略

通过prometheus的配置文件prometheus.yml注册我们Go样例服务,如下

# 略...
scrape_configs:
  # prometheus自身的监控
  - job_name: 'prometheus'

    static_configs:
    - targets: ['prometheus:9090']

  # 重点是这里 
  # 注册我们Go服务的job
  - job_name: 'go-demo'

    static_configs:
	# go服务的地址 IP:端口
    - targets: ['go-demo:2112']

编写Go服务的dockerfile,如下:

FROM amd64/golang:1.16.3-alpine3.12

RUN mkdir -p /home/deploy/go-demo

CMD ["/home/deploy/go-demo/run.sh"]

启动脚本/home/deploy/go-demo/run.sh,如下:

#!/bin/sh

cd /home/deploy/go-demo \
    && go run main.go \
    && sleep 100000

服务编排(docker-compose)

上面我们是单独启动每个容器来实现的,接着我们用docker-compose来编排服务。

首先,创建network:

// 创建network
docker network create example_default

接着,编写docker-compose.yaml文件如下:

version: "3"

services:
  prometheus:
    image: bitnami/prometheus:2.26.0
    container_name: prometheus
    volumes:
      - ./prometheus/prometheus.yml:/opt/bitnami/prometheus/conf/prometheus.yml
    ports:
      - "9090:9090"
    privileged: true
    networks: 
      - default
  grafana:
    image: bitnami/grafana:7.5.4
    container_name: grafana
    ports:
      - "3000:3000"
    privileged: true
    networks: 
      - default
  go-demo:
    container_name: go-demo
    build: ./go-demo
    volumes:
      - ./go-demo:/home/deploy/go-demo
    ports:
      - "2112:2112"
    privileged: true
    networks: 
      - default
networks: 
  default:
    external: 
      name: example_default

最后,启动服务:

// 启动服务
docker-compose up -d

Grafana监控面板配置

首先prometheus其实自己是有监控面板的,我们可以通过下面的地址访问:

prometheus http://localhost:9090

举个例子,比如通过如下的操作,我们就可以看见我们Go服务的Goroutines监控。

但是呢,Grafana提供了更丰富的监控面板,接着我们来搭建一个简单的Go服务监控。

访问如下地址:

使用grafana的UI
grafana http://localhost:3000

初始账号密码:

admin
admin

进入首页:

添加数据源:

选择数据源为Prometheus:

填写Prometheus服务的地址:

点击添加:

切换到Dashboards面板,选择导入一个面板:

接着我们就可以看见一个已经存在的面板了,这个面板是Prometheus自身监控的面板。

接着,我们来创建一个我们自己Go服务的面板,首先创建一个Go服务的目录(保证隔离和可读性,相当于namespace):

创建一个Go服务的面板:

创建一个指标视图:

选择视图类型为折线统计图,选择数据指标为go_gotoutines:

只展示我们的Go样例服务数据,这里采用的是 语法:

以此类推,我们就创建了一些列监控视图数据,比如goroutine数量、线程数量、heap内存数据、stack内存数据、mcache数据、mspan数据、GC数据等等,如下:

总结

如上我们就成功搭建了一个入门级别的「Go服务监控」,但是这还不能够上生产环境,为什么,留下两个课后思考:

  • 除了系统、性能指标外,业务指标怎么统计?

  • 上面注册服务是通过人工修改的,实际我们的服务都是动态服务发现了,所以配合服务发现我们怎么注册服务到prometheus呢?

关于我的常用画图软件:

1. Balsamiq Mockups 3
2. Processon

Go轻松进阶系列 更多文章

go-zero入门 go-zero 是一个集成了各种工程实践的 web 和 rpc 框架。通过弹性设计保障了大并发服务端的稳定性,经受了充分的实战检验。go-zero 包含极简的 API 定义和生成工具 goctl,可以根据定义的 api 文件一键生成 Go, iOS, Android, Kotlin, Dart, TypeScript, JavaScript 代码,并可直接运行。强大的工具支持,尽可能少的代码编写极简的接口完全兼容 net/http支持中间件,方便扩展高性能面向故障编程,弹性设计。 阅读详情

相关推荐

带你十天入门 Go 微服务系列(一)

本文开始,我们会出一个系列文章跟大家详细展示一个 go-zero 微服务示例,整个系列分十篇文章,目录结构如下: 环境搭建(本文) 服务拆分 用户服务 产品服务 订单服务 支付服务 RPC 服务 Auth 验证 服务监控 链路追踪 分布式事务 期望通过本系列带你在本机利用 Docker 环境利用 go-zero 快速开发一个商城系统,让你快速上手微服务。 完整示例代码:GitHub - nivin-stud

我心飞翔 2025

Golang 应用集成 Prometheus 统计数据支持

基本概念 Prometheus 所有采集的监控数据均以指标(metric)的形式保存在内置的时间序列数据库当中(TSDB):属于同一指标名称,同一标签集合的、有时间戳标记的数据流。除了存储的时间序列,Prometheus 还可以根据查询请求产生临时的、衍生的时间序列作为返回结果。 样本在时间序列中的每一个点称为一个样本(sample),样本由以下三部分组成: 指标(metric):指标名称和描述当前样本特征的 labelsets; 时间戳(timestamp):一个精确到毫秒的时间戳; 样本值(v

a1510841693的博客 3049

Go-Spaceship:构建多人游戏后端框架的Golang实践

Go-Spaceship后端框架创立的初衷是为了提供一种高并发、易扩展、快速开发的后端服务解决方案。随着互联网技术的发展,对于后端服务的性能要求越来越高,传统的框架很难满足日益增长的性能和开发效率需求。因此,Go-Spaceship应运而生,旨在为开发者提供一个简洁、高效、可扩展的开发环境。Go-Spaceship框架将应用分解为多个模块化的组件,每个组件都有明确的职责范围。比如,框架可能包含以下几个核心组件:路由组件(Router):负责处理HTTP请求,并将其分发到对应的处理函数。

weixin_33628677的博客 1247

Golang 连接ETCD 监控数据变化

Golang代码连接etcd, 并监听指定key的动态变化。

yinjl123456的博客 926

脑电分析:为什么大脑信号会“变同步”?——事件相关同步化与去同步化 (ERS/ERD) 全景解析

脑电分析中的事件相关同步化(ERS)和去同步化(ERD)是研究大脑动态节律的重要方法,反映特定任务下脑电频段能量的变化。ERD表示神经元活动分散(功率下降),提示脑区活跃处理信息;ERS则反映神经元同步(功率增强),常与静息状态相关。本文详解了ERS/ERD的生理机制、计算流程(包括基线校正和功率谱分析),并提供了Python实现示例,展示如何通过Welch法和STFT进行时频分析,生成ERD/ERS热力图。该技术广泛应用于运动想象脑机接口、癫痫检测等领域,为理解大脑功能状态提供了量化工具。

qq_32516809的博客 1400

STM32驱动SPL06-001气压传感器:I2C通信与温度补偿实战

气压传感器在无人机定高、室内定位和气象监测中至关重要。SPL06-001凭借±0.06 hPa相对精度和I2C接口,成为STM32项目的理想选择。通过I2C总线读取原始数据,并利用出厂校准系数进行温度补偿和气压解算,可输出高精度气压值。本文详细解析SPL06-001的寄存器操作、校准系数拼接及补偿算法,并分享I2C上拉电阻、地址配置等避坑经验,帮助开发者快速实现气压测量与高度解算。

weixin_29188043的博客 342

Go微服务实战——服务的监控与链路追踪(监控数据可视化)

go语言整合otel实现简易的链路追踪

个人学习笔记库,一篇一篇记录成长的足迹 2608

【中英双语】Illumina测序原理详解 | 边合成边测序/Sequencing by Synthesis

很多朋友们问我视频讲解时用的笔记可不可以分享,那当然必须是可以呐!但我当时其实没有好好记录,只是打了个草稿就开讲啦!既然大家有需求,俺就重新整理了一下,希望可以帮到大家!

weixin_43843918的博客 7879

使用go-zero微服务框架实现云监控后台(一.后台微服务搭建)

接上一篇文章,按照”终端出厂实现自动化运维方案"思路,https://blog.youkuaiyun.com/yyz_1987/article/details/118358038 以上送终端状态为例,记录下go-zero微服务的简单使用,实现一个简易的后台监控云服务。 新建一个Golang服务后台项目代码的目录,取名monitor。 网关层实现 按照goctl这一代码生成神器的使用方式,首先定义一下终端需要上送的接口字段信息: statusUpload.api type ( //终端状态上报内容 St

猫哥 的沉淀、积累、总结。天天学习,好好向上...c/c++,嵌入式 linux,Android,HarmonyOS,AIOT) 2656

【STM32-DSP库的使用】基于Keil5 + STM32CubeMX + CMSIS-DSP 手动添加、库添加方式

CMSIS-DSP库在工程中应用遇到的所有问题进行归纳终结

洋洋的博客 1万+

CNN+LSTM+Attention+DNN模型实战:pytorch搭建CNN+LSTM+Attention+DNN行车速度预测

CNN+LSTM+Attention+DNN模型实战:pytorch搭建CNN+LSTM+Attention+DNN行车速度预测

6045

在 Go 语言微服务中实现服务监控

在 Go 语言微服务中,实现服务监控是非常重要的。我们可以使用 Prometheus 和 Grafana 进行指标监控,使用日志监控工具进行日志监控,使用健康检查机制检查服务的健康状态。通过这些监控手段,我们可以及时发现和解决问题,提高系统的可靠性和稳定性。

m0_57836225的博客 1394

Qt + windows + Linux+QtInstallerFramework打包教程

本文介绍了使用Qt Installer Framework在Windows和Linux系统下打包Qt应用程序的完整教程。Windows部分详细说明了从下载安装框架、配置环境变量、生成release版本,到创建安装包目录结构和修改配置文件的完整流程。Linux部分则重点讲解了环境变量设置、桌面应用配置(.desktop文件)以及两种打包方案:一种使用linuxdeployqt生成AppImage文件,另一种采用类似Windows的安装包方式。教程提供了关键配置文件(config.xml、package.xml

Qt历险记,专注Qt技术,三年医疗设备研发经验,1年机器视觉研发经验,半年柔性传感研发经验。 517

go-micro项目实战五 服务监控

服务监控 可能读者会问,链路追踪和服务监控不是一个东西么?以下知识普及来源于网上。 我这里从网上找到一张图 很形象。 Logging - 用于记录离散的事件。例如,应用程序的调试信息或错误信息。它是我们诊断问题的依据。 Metrics - 用于记录可聚合的数据。例如,队列的当前深度可被定义为一个度量值,在元素入队或出队时被更新;HTTP 请求个数可被定义为一个计数器,新请求到来时进行累加。 Tr...

一个不靠谱的程序员 5678

基于深度学习YOLOv8的商品识别系统(深度学习 + UI界面 + 训练数据集 + Python代码)

如果使用自定义数据集,可以通过图像标注工具如LabelImg来标注每个商品的类别和边界框,并保存为YOLO格式的文本文件。bash复制编辑/dataset/images/train/val/labels/train/val这样,我们就准备好了数据集,可以开始训练YOLOv8模型。本文介绍了如何使用YOLOv8构建一个商品识别系统,包括从数据准备到模型训练,再到UI界面的开发。通过深度学习技术,尤其是YOLOv8的高效目标检测能力,我们能够快速实现商品识别并集成到实际应用中。

YOLO 303

第4章--CANoe library开发 - 诊断功能

因为专栏要做的是汽车ECU自动化测试程序,测试的是ECU的诊断和刷新,因此就需要利用CANoe的接口,开发一些方便使用的诊断报文收发函数。

j187067046的博客 1401

golang:使用go-redis连接并操作Redis

连接 1、下载安装包 目前有两种redis方式支持go操作,一种是go-redis,该方式支持连接哨兵及集群模式的Redis。其包获取命令如下: go get -u github.com/go-redis/redis 还有另外一种比较常用的redigo方式,其包获取命令如下: go get -u github.com/garyburd/redigo/redis 本文章采用第一种go-redis,若想看第二种redigo方式操作redis可以移步另一篇文章:https://blog.youkuaiyun.com/l

lena blog 8343

RU DOS版、EFI版32bit/64bit BIOS常用工具

DOS版、EFI版的RU工具,可用来查看IO、MEM、PCI、SMBIOS等资源。亲测在EFI SHELL下可用。

探秘Gossm:一款现代化的Go服务监控工具

探秘Gossm:一款现代化的Go服务监控工具 项目简介 是一个轻量级、高效的Go语言编写的服务监控系统,旨在帮助开发者轻松管理和监控他们的Go应用程序。它提供了实时性能指标、日志查看、异常检测等功能,让运维工作变得更简单、更直观。 技术分析 核心特性 多维度监控 - Gossm 支持收集CPU使用率、内存使用情况、网络IO和goroutine数量等关键性能指标。 自定义仪表盘 - 用户可以自由配...

gitblog_00002的博客 472

假人有限元模型

假人模型,车辆碰撞假人有限元模型,适合做乘员安全的研究者利用

计算机控制技术及应用

《计算机控制技术及应用》通过总结作者的科研成果和吸收国内外的先进理论、方法和技术,以计算机控制系统的网络化、开放化、智能化和集成化发展趋势为主线索,主要介绍计算机控制系统的基本概念和计算机控制系统的典型形式,计算机控制系统的数学描述与基本分析方法,以及数字PID控制器、最少拍控制系统、达林算法、状态变量设计法等设计方法及其各种改进算法。重点突出计算机控制系统输入输出通道接口的设计方法和典型控制系统的设计案例与实现方法等。

Go服务监控

使用Golang可以开发出高性能的HTTP、GRPC服务。一般项目运行后,我们也需要监控服务的性能或者进行调试。除了打日志,还有没有其他可视化的方案呢?答案是有的。 本文将会介绍几种常用的监控方案。 pprof 这个是go语言自带的。启用很简单: _ "net/http/pprof" 仅需显式的在 main 包的 import 里增加上面一行即可。完整使用示例: package mai...

技术研究中心 1018

最新的sdio 4.0 spec 协议标准 带书签 高清完整PDF版

Part-E1-SDIO-Specification-Ver4.00-Final-120220.pdf:最新的sdio 4.0 spec 协议标准 带书签 高清完整PDF版,包括SDIO 接口的外设,SDIO 接口官方协议等。

Golang(go)+mongodb开发个人遇到坑及用法总结汇总

Golang(go)+ mongodb开发个人遇到坑及用法总结汇总 用享

justtest02的博客 1388

40分钟学 Go 语言高并发教程目录

40分钟学 Go 语言高并发教程目录

weixin_40780178的博客 1364

go-zero-looklook项目中的服务监控方案详解

在现代分布式系统架构中,服务监控是确保系统稳定性和可靠性的关键环节。go-zero-looklook项目采用了当前流行的Prometheus+Grafana监控组合方案,为微服务提供全方位的监控能力。 ### 1.1 技术选型优势 - **Prometheus**:开源的系统监控和警报工具包,特别适合微服务架构 - **Grafana**:功能强大的可视化工具,支持多种数据源 - **go-z...

gitblog_01141的博客 370

Prometheus client_golang:5分钟为Go应用添加专业监控能力

在当今微服务架构盛行的时代,**应用监控**已成为保障系统稳定性的关键环节。你是否曾为Go应用缺少专业的**监控指标**而烦恼?是否在寻找一个简单易用且功能强大的**监控解决方案**?Prometheus client_golang正是你需要的答案!作为Prometheus官方推出的Go语言客户端库,它让应用监控变得前所未有的简单高效。🎯 ## 1. 项目价值定位:为什么需要Prometheu

gitblog_00213的博客 975

go-zero docker-compose 搭建课件服务(七):prometheus+grafana服务监控

1、什么是prometheusPrometheus是一个开源的系统监控和警报工具包。自2012年启动以来,许多公司和组织都采用了Prometheus,该项目拥有非常活跃的开发人员和用户社区。它现在是一

liuyuede123的博客 722

40分钟学 Go 语言高并发:服务监控与追踪

【代码】40分钟学 Go 语言高并发:服务监控与追踪。

weixin_40780178的博客 1026
上一篇: 图解设计模式
下一篇: PHP转Go速学手册
TIGERB_Blog
博客等级 码龄10年 109粉丝 65原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值