go:pprof 性能分析

【Go知识专栏】pprof 简说 pprof pprof 是一个可视化和分析数据的工具。该工具可读取分析样本并生成可视化报告,从而帮助程序分析。 1. 使用场景 查找分析程序中的错误,如内存泄漏,race 冲突,协程泄漏 程序优化,分析程序性能瓶颈 2. 如何使用 方式一: 使用 net/http/pprof 监听相应的端口,并通过浏览器打开查看 package main import ( "fmt" "net/http" _ "net/http/pprof" ) func main(){ http.Ha 阅读详情

什么是pprof?

代码上线前可以通过压测可以获知系统的性能,例如每秒能处理的请求数,平均响应时间,错误率等指标。可以对性能有初步的估计

但是压测是线下的模拟流量,线上可能会遇到高并发、大流量,不靠谱的上下游,突发的尖峰流量等等场景,这些都是不可预知的。

线上突然大量报警,接口超时,错误数增加,除了看日志、监控,就是用性能分析工具分析程序的性能,找到瓶颈。当然,一般这种情形不会让你有机会去分析,降级、限流、回滚才是首先要做的,要先止损。回归正常之后,通过线上流量回放,或者压测等手段,制造性能问题,再通过工具来分析系统的瓶颈。

一般而言,性能分析主要关注 CPU、内存、磁盘 IO、网络这些指标。

Profiling 是指在程序执行过程中,收集能够反映程序执行状态的数据。在软件工程中,性能分析(performance analysis,也称为 profiling),是以收集程序运行时信息为手段研究程序行为的分析方法,是一种动态程序分析的方法。

1. 数据采样

pprof 采样数据主要有三种获取方式:

  • runtime/pprof: 采集程序(非server)的运行数据,手动调用runtime.StartCPUProfile或者runtime.StopCPUProfile等API来生成和写入采样文件,灵活性高
  • net/http/pprof: 采集HTTP server的运行数据,通过 http服务获取Profile采样文件,简单易用,适用于对应用程序的整体监控。

1.1 runtime/pprof

拿 CPU profiling 举例,增加两行代码,调用 pprof.StartCPUProfile 启动 cpu profiling,调用 pprof.StopCPUProfile() 将数据刷到文件里:


import "runtime/pprof"

var cpuprofile = flag.String("cpuprofile", "", "write cpu profile to file")

func main() {
    // …………
        
    pprof.StartCPUProfile(f)
    defer pprof.StopCPUProfile()
    
    // …………
}

1.2 net/http/pprof

启动一个端口(和正常提供业务服务的端口不同)监听 pprof 请求:

import _ "net/http/pprof"

go func() {
    log.Println(http.ListenAndServe("localhost:8080", nil))
}()

pprof 包会自动注册 handler, 处理相关的请求:

// src/net/http/pprof/pprof.go:71

func init() {
  http.Handle("/debug/pprof/", http.HandlerFunc(Index))
  http.Handle("/debug/pprof/cmdline", http.HandlerFunc(Cmdline))
  http.Handle("/debug/pprof/profile", http.HandlerFunc(Profile))
  http.Handle("/debug/pprof/symbol", http.HandlerFunc(Symbol))
  http.Handle("/debug/pprof/trace", http.HandlerFunc(Trace))
}

启动服务后,直接在浏览器访问:


http://127.0.0.1:8080/debug/pprof/

可以得到以下内容
在这里插入图片描述
可以直接点击上面的链接,进入子页面,查看相关的汇总信息

点击 profile 和 trace 则会在后台进行一段时间的数据采样,采样完成后,返回给浏览器一个 profile 文件,之后在本地通过 go tool pprof 工具进行分析。

当我们下载得到了 profile 文件后,执行命令:

go tool pprof ~/Downloads/profile

就可以进入命令行交互式使用模式。执行 help 可以查看帮助信息。

直接使用如下命令,则不需要通过点击浏览器上的链接就能进入命令行交互模式:

go tool pprof http://127.0.0.1:8080/debug/pprof/profile

当然也是需要先后台采集一段时间的数据,再将数据文件下载到本地,最后进行分析。上述的 Url 后面还可以带上时间参数:?seconds=60,自定义 CPU Profiling 的时长。

# 下载 cpu profile,默认从当前开始收集 30s 的 cpu 使用情况,需要等待 30s
go tool pprof http://127.0.0.1:8080/debug/pprof/profile
# wait 60s
go tool pprof http://127.0.0.1:8080/debug/pprof/profile?seconds=60

进入交互式模式之后,比较常用的有 top、 list、 web 等命令。

除了 cpu 使用情况外,线上问题排查还需要关注内存使用问题:

# 下载内存使用svg图到本地
go tool pprof -inuse_space -cum -svg http://ip:port/debug/pprof/heap > heap_inuse.svg

2. 可视化 svg 图操作

在上一节进入交互式模式之后,执行web 命令时,可以查看 svg 图,如果遇到以下错误

failed to execute dot. Is Graphviz installed? Error: exec: "dot": executable file not found in $PATH

说明需要安装 Graphviz。在mac上可以通过 brew install Graphviz 进行安装,并配置环境变量,在~/.zshrc中写入

export PATH="$PATH:/usr/local/Cellar/graphviz/2.40.1/bin"

其中2.40.1是版本号,随安装版本变化更改。写入文件之后保存,并执行source ~/.zshrc

额外说明一点,其中有依赖包可能需要安装svn,可以通过brew install svn进行安装

在交互模式下输入web 命令会自动下载 svg 文件,通过浏览器打开就可以看见图像
,大致如下
在这里插入图片描述

总结

  • 对频繁分配的小对象,使用 sync.Pool 对象池避免分配
  • 自动化的 DeepCopy 是非常耗时的,其中涉及到反射,内存分配,容器(如map)扩展等,大概比手动拷贝慢一个数量级
  • 用 atomic.Load/StoreXXX,atomic.Value, sync.Map等代替 Mutex。
  • (优先级递减) 使用高效的第三方库,如用fasthttp替代 net/http,github.com/gin-gonic/gin 代替 net/http/pprof
  • 在开发环境加上-race编译选项进行竞态检查 在开发环境开启 net/http/pprof,方便实时 pprof
  • 将所有外部IO(网络IO,磁盘IO)做成异步

参考文章

Go性能剖析工具:pprof实战指南 在构建高性能Go应用的征程中,我们常常需要一把"火眼金睛"来洞察程序的运行状态。就像医生需要各种检查设备来诊断病患一样,开发者也需要专业的性能剖析工具来找出应用的"病灶"。在Go语言生态中,性能优化不仅是一种追求,更是一种必要。随着业务规模的扩大,那些初期被忽略的小问题可能会成倍放大:API响应变慢、内存占用飙升、CPU使用率居高不下。这些问题直接影响用户体验,增加运维成本,甚至可能导致系统崩溃。 阅读详情

相关推荐

一文搞定golang 之 pprof 性能优化

pprof是Go语言自带的性能分析工具。它可以帮助开发者了解程序的性能瓶颈,包括CPU使用情况、内存分配情况等诸多方面。通过`pprof`生成的性能分析数据,能够以可视化的方式展示程序的运行时行为,例如使用火焰图(FlameGraph)来展示函数调用栈和CPU占用时间的关系。

追求幸福,探索未知的博客 1498

Go性能分析工具pprof详解

pprof是Go官方提供的性能分析工具,可以分析程序的运行情况,并且提供可视化的功能。本文主要涉及pprof的使用和具体示例的讲解。

nil 1万+

golang 使用pprof和go-torch做性能分析

软件开发过程中,项目上线并不是终点。上线后,还要对程序的取样分析运行情况,并重构现有的功能,让程序执行更高效更稳写。 golang的工具包内自带pprof功能,使找出程序中占内存和CPU较多的部分功能方便了不少。加上uber的火焰图,可视化显示,让我们在分析程序时更简单明了。pprof有两个包用来分析程序一个是net/http/pprof另一个是runtime/pprof,net/http/pprof只是对runtime/pprof包进行封装并用http暴露出来,如下图源码所示: 使用net/..

dz45693的专栏 1473

一文搞懂pprof

pprof是GoLang程序性能分析工具,prof是profile(画像)的缩写,用pprof我们可以分析下面9种数据真正分析时常用4种CPU Profiling:CPU 分析,按照一定的频率采集所监听的应用程序 CPU(含寄存器)的使用情况,可确定应用程序在主动消耗 CPU 周期时花费时间的位置Memory Profiling:内存分析,在应用程序进行堆分配时记录堆栈跟踪,用于监视当前和历史内存使用情况,以及检查内存泄漏Block Profiling:阻塞分析,记录 goroutine 阻塞等待同步(包括

5835

golang-使用pprof进行性能分析

pprof是golang自带的性能分析工具,在程序运行过程中,可以记录程序的运行信息,像CPU使用情况、内存使用情况、协程的情况等等。 pprof主要有两种使用方式: 通过文件方式输出Profile http 通过文件方式输出profile 下面给出一个简单的示例程序(例子摘自网上): package main import ( "log" "math/rand" "os" "runtime/pprof" "time" ) const ( row = 10

流承钧的博客 2164

Go最全Golang性能分析神器:pprof与火焰图实战揭秘_golang 火焰图(2),2024年最新含泪整理面经

在性能分析中,火焰图(Flame Graph)是一种非常直观的工具,它可以帮助我们快速识别出程序中的热点函数。火焰图通过堆叠的方式展示函数调用,其中每个“火焰”的大小代表了函数在CPU采样中所占的比例,颜色的深浅则表示调用的深度。在前面的章节中,我们已经了解了如何使用pprof进行性能分析,并且通过火焰图来识别性能瓶颈。为了更好地理解pprof的采样机制,我们可以通过一个实际的例子来演练。在pprof的Web界面中,我们可以生成火焰图,帮助我们快速识别出性能瓶颈。内存采样关注的是程序的内存分配情况。

2401_84920056的博客 1771

golang性能分析 pprof的使用 graphviz_go pprof 查看cpu占用情况 graphviz

pprof:是golang 自带性能剖析工具,可以帮助定位程序中可能存在的问题,是go服务程序异常时辅助排查问题的有效工具。Graphviz:是开源的图形可视化软件。图形可视化是一种将结构信息表示为抽象图形和网络图的方法。它在网络,生物信息学,软件工程,数据库和网页设计,机器学习以及其他技术领域的可视化界面中具有重要的应用。因为pprof是原始输出数据,使用 Graphviz 可以将数据图形化展示。

2401_84248479的博客 849

Golang pprof 性能分析与火焰图

文章目录1. 安装graphviz1.1 下载 graphviz (windows 环境)1.2 测试graphviz是否安装成功2. 使用pprof2.1 修改代码2.2 火焰图生成3. Gin框架使用pprof3.1 安装需要包3.2 启动程序3.3 火焰图3.4 pprof命令行参考文档 1. 安装graphviz 1.1 下载 graphviz (windows 环境) https://graphviz.gitlab.io/_pages/Download/windows/graphviz-2.38

Gcaptain 3463

golang 性能分析(pprof)

性能分析 从业务目标角度,通常我们的瓶颈出现在业务的通量和时延两个问题上 比如一个MySQL数据库,你从其他机器上对它发请求,每秒它能处理10万个请求,这个就是通量性能;每个请求的反应时间是0.5ms,这个就是时延性能 通量和时延是相互相承的两个量,当通量达到系统上限,时延就会大幅提高 一般而言,性能分析主要关注 CPU、内存、磁盘 IO、网络这些指标 runtime/pprof 适用...

firefly 5626

go性能分析工具pprof

背景 自己写的代码在运行时,如何进行性能分析呢?go提供了一个叫pprof的工具,可以帮助我们分析 pprof介绍 Go语言内置了获取程序运行数据的工具,包括以下两个标准库: runtime/pprof: 采集工具型应用运行数据进行分析 net/http/pprof: 采集服务型应用运行时数据进行分析 pprof开启后,每隔一段时间(10ms)就会收集当前的堆栈信息,获取各个函数占用的CPU以及内存资源,然后通过对这些采样数据进行分析,形成一个性能分析报告。 性能优化主要有一下几个方面: ...

哇哦~ 7602

MaixCAM2 4K AI相机硬件解析与开发实战

嵌入式AI视觉开发中,边缘计算设备的选择直接影响项目落地效果。以NPU为核心的AI加速技术通过专用指令集优化,可在低功耗下实现10+TOPS算力,典型应用包括工业质检、智能门禁等实时场景。MaixCAM2作为新一代4K AI相机,搭载AX630 SoC芯片,其双核Cortex-A53与NPU的异构架构,在运行YOLOv11n模型时可达113FPS,显著优于传统方案。开发时需注意模型量化部署技巧,如INT8量化需500+张校准图片覆盖多光照条件,避免准确率下降。设备扩展性方面,PMOD接口支持热成像、ToF传

weixin_30819085的博客 692

golang入门笔记——pprof性能分析

golang性能分析工具pprof的8个指标1.性能分析的5个方面:CPU、内存、I/O、goroutine(协程使用情况和泄漏检查)、死锁检测以及数据竟态分析2.两种程序性能指标采集pprof开启后,每隔一段时间(10ms)就会收集下当前的堆栈信息,获取各个函数占用的CPU以及内存资源;最后通过对这些采样数据进行分析,形成一个性能分析报告。3.交互式终端性能分析。

qq_43716830的博客 1437

2025红队实战:Win11环境下ZAP、CobaltStrike与免杀套件深度评测

在网络安全领域,渗透测试与红队行动是评估系统防御能力的关键手段。其核心原理在于模拟真实攻击者的技术与流程,以发现潜在的安全漏洞。这项技术的价值在于主动识别风险,提升整体安全防护水平,广泛应用于企业安全评估、漏洞挖掘和攻防演练等场景。随着Windows 11系统普及,其增强的安全机制(如内存完整性、基于虚拟化的安全)对传统攻击工具链提出了新的挑战。本文聚焦于**CobaltStrike二开版**与**免杀套件**在Win11环境下的实战应用与深度对抗,探讨如何优化工具链以应对现代端点检测与响应(EDR)和高级

weixin_29315091的博客 311

Golang程序性能分析(一)pprof和go-torch

前言最近计划用三篇文章讲述一下Golang应用性能分析,本文是第一篇,先来介绍Go语言自带的性能分析库pprof怎么使用,后面两篇会讲解怎么用pprof对Echo或者Gin框架开发的应用...

kevin_tech的博客,微信搜「网管叨bi叨」 1818

xsens IMU配置

1.安装驱动 sudo apt-get update sudo apt-get install ros-kinetic-xsens-driver 2.配置IMU 设置输出四元数,加速度、角速度、地磁 cd /opt/ros/kinetic/lib/xsens_driver python mtdevice.py --configure "oq,aa,wr,mf" 3.启动IMU roslaunch xsens_driver xsens_driver.launch 转(https://www.cnblo

qq_41585680的博客 2326

OrthoFinder功能、流程和文件注释

OrthoFinder 的标准输出包括:直系同源组,直系同源基因,有根基因树,解析基因树,无根物种树、有根物种树,基因重复事件以及相关的统计数据。

hs6605015的博客 3048

golang性能分析工具pprof介绍

profile在计算机领域,我们可以将其理解为当前应用程序运行状态的画像。当程序性能不佳时,我们希望知道应用在 什么地方耗费了多少 CPU、memory等资源,golang是非常注重性能的语言,其内置的pprof就是为了分析调优程序运行性能而生。CPU profile:当前程序的CPU使用情况,pprof按照一定频率去采集应用程序在CPU和寄存器上面的数据Memory Profile(Heap Profile):当前程序的内存使用情况,可查看heap和alloc的情况。

技术控的笔记 8294

PCout(n) -- STM32F103RCT6 位带操作

位带操作,sys.h,PCout,PAout,PAout

weixin_50212044的博客 4026

golang--性能分析pprof

pprof开启后,每隔一段时间(10ms)就会收集下当前的堆栈信息,获取各个函数占用的CPU以及内存资源;最后通过对这些采样数据进行分析,形成一个性能分析报告。注意,我们只应该在性能测试的时候才在代码中引入pprof。

IT艺术家-rookie的博客 1129

AutoSAR MemMap模块详解及使用注意事项

在本文中,我们将深入探讨MemMap模块的实例解析,并介绍在使用该模块时需要注意的一些事项。在上述代码中,我们使用了MEMMAP_START_SEC_VAR_32BIT和MEMMAP_START_SEC_CODE来定义MemMap区域的起始位置,使用MEMMAP_STOP_SEC_VAR_32BIT和MEMMAP_STOP_SEC_CODE来定义MemMap区域的结束位置。1.合理划分MemMap区域:根据实际需求,合理划分MemMap区域,将不同类型的变量放置在不同的区域中,以便于管理和访问。

weixin_50547796的博客 2534

基于STM32设计的掌上游戏机(运行NES游戏模拟器)详细开发过程

利用STM32单片机移植NES游戏模拟器,完成NES游戏开发,可以玩标准的NES游戏,已测试超级玛丽、魂斗罗之类的都可以正常运行。

4万+

利用pprof对golang进行性能分析

通过HTTP服务集成的方法,利用pprof进行性能分析。

weixin_60214397的博客 1284

【AI编程】Codex 进阶与高阶技巧:从熟练到精通——2026 最新教程

Skill 是 Codex 的「插件」—— 一段 Markdown 定义触发条件、输入参数和执行流程。比自定义命令更强大,支持参数化、多步骤、条件判断。

十年老程序猿,AI 疯狂研究专家,前沿硬核知识分享 197

golang pprof 性能分析工具

性能优化是个永恒的话题,而很多时候我们在作性能优化的时候,往往基于代码上面的直觉,把所有能想到的优化都优化了一遍,不错过任何小的优化点,结果整个代码的逻辑变得极其复杂,而性能上面并没有太大的提升。事实上,性能问题往往集中在某些小点,有时候很小的改动就能有巨大的提升,所以问题的关键是是怎么去找出这些优化点,幸运的是 golang 在设计的时候就考虑了这个问题,原生提供了性能分析的工具,可以很方便地帮

Go中国 3688

jre9下载 jdk9

(Java SE Runtime Environment 9.0) 9.0u175 官方最新版 【x86|x64】

ET2012新版免狗免安装绿色软件

ET2012新版免狗免安祖昂绿色软件。,新界面,新视觉,

上一篇: mac:brew安装配置mysql,创建用户用进行授权
下一篇: 读书笔记(SRE:Google运维解密):第1章 概览
github_37320188
博客等级 码龄10年 24粉丝 86原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值