ebpf 之巅 探测cpu性能(下)

原创 已于 2022-05-05 23:43:58 修改 · 1.4k 阅读 · 3 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#ebpf

于 2022-05-05 23:39:06 首次发布
本文详细介绍了多个Linux内核性能分析工具，包括runqslower（监控线程延迟）、cpudist（测量CPU执行时长）、cpufreq（查看CPU频率信息）、profile（采集高CPU使用率的调用栈）、offcputime（统计线程阻塞时间及原因）、syscount（系统调用统计）、argdist和trace（分析系统调用参数频率）、funccount（函数调用频率统计）、softirqs和hardirqs（软硬中断CPU时间消耗）、smpcalls（跨CPU调用分析）、llcstat（最后一级缓存命中率监测）。这些工具帮助开发者深入理解系统性能瓶颈，进行优化。

读书笔记，只记录核心要点，书中的核心例子

1、runqslower

列出运行队列中等待延迟超过阈值的线程，默认是超过了10毫秒

记录的距离是ttwu_do_wakeup()到finish_task_switch的时间。也就是说是发起唤醒某一个线程到这个线程被唤醒的延迟

 唤醒5号任务，从ttwu_do_wakeup发起，一直到完成5号任务finish_task_switch，完成切换的时间延迟。

2、cpudist

唤醒之后在cpu上执行的时长

在cpu运行的时间 

3、cpufreq

展示cpu的频率信息

4、profile

定时采集调用栈出现频率的bcc 工具，可以采集到cpu使用高的栈

5、offcputime

用于统计线程阻塞和脱离cpu运行的时间，同时输出调用栈信息，来理解阻塞的原因

统计从调度出去，进入睡眠，一直到io完成唤醒经历的时间

6.syscount

可以统计哪一些系统调用在某一时刻使用的比较

最低0.47元/天 解锁文章
序冢--磊
关注
5.65 BCC工具之offcputime.py解读
从0到1，突破自己
03-14 718
此程序显示被阻塞的堆栈跟踪以及它们被阻塞的总时长。它的工作原理是跟踪线程何时被阻塞以及何时返回CPU，同时测量它们被阻塞的时间（也称为“非CPU时间”）和被阻塞的堆栈跟踪以及任务名称。此数据通过内核进行汇总，按唯一的堆栈跟踪和任务名称汇总阻塞时间。
C++(Qt)软件调试---VS性能探查器（27）
mahuifa的博客
12-29 1749
使用vs自带的性能探查器分析排查C++程序的CPU性能、内存泄漏等问题。
BPF性能分析之CPU篇
大吉
05-05 2550
BPF工具 BPF中用于分析CPU性能问题的工具如下图所示。 CPU分析命令清单 命令 来源 分析对象 描述 适用场景 execsnoop BCC/BT 调度 列出新进程的运行信息 追踪高频出现、消耗资源的短期间进程 exitsnoop BCC 调度 列出进程运行时长和退出的原因 协助调试短时进程的问题，从退出的角度定位问题 runqlat BCC/BT 调度 统计CPU运行队列的延迟信息 当CPU资源处于饱和状态时，识别和量化问题的严重性 runqlen BCC/BT 调度
off time cpu profile原理（bcc/tools/offcputime.py）
fjs的专栏
05-13 1395
常见的profile都on cpu的，也即是程序在CPU上运行时候的情况，例如基于运行时的栈采样输出火焰图。还有一种profile概念，与上述的概念正好相反，记录的是放弃CPU的情况，它的用处一般是拿来查程序为啥吞吐，响应表现不佳，通过off cpu的数据可以定位程序都是什么原因放弃了CPU。 要拿到on cpu的数据可能方式很多，但是要拿到off cpu的情况就需要从调度着手了， ...
基于eBPF的实时系统性能分析与故障诊断
最新发布
Mxsoft619的博客
10-22 653
eBPF（extended Berkeley Packet Filter）是一种革命性的内核技术，允许用户态程序在内核中安全运行沙箱代码。其核心优势在于：实时性：无需修改内核源码即可动态注入观测程序低开销：通过JIT编译优化执行效率，典型场景下CPU开销<5%跨平台：支持Linux 3.18+内核，兼容主流云原生环境图1: eBPF在操作系统中的层级关系（上层用户工具→内核虚拟机→硬件）eBPF技术正在重塑系统观测领域，其优势体现在：实现零侵入式诊断（无需修改应用代码）支持纳秒级时间戳追踪。
ebpf.zip -- linux 性能巅峰之作
05-17
BPF (eBPF) tracing is a superpower that can analyze everything, and I'll show you how in my upcoming book BPF Performance Tools: Linux System and Application Observability, coming soon from Addison Wesley. The book includes over 150 BPF observability tools that you can run to find performance wins and troubleshoot software, and also shows you how to write your own.
eBPF助力：10分钟学会快速调优线上服务器CPU利用率
eBPF_Kindling的博客
02-09 634
一位不愿透露姓名的开发同学大言不惭的说： “我只要10分钟就能快速调优生产环境机器的CPU利用率”
eBPF实战教程七 | 性能监控工具—bpftop
DBdoctor_off的博客
10-09 1241
bpftop是一个强大的工具，使用bpftop工具可以直观地监控系统中正在运行的eBPF程序，极大提升了开发eBPF程序时对其自身性能优化的效率。
第13届PG大会精彩演讲『DBdoctor，基于eBPF的数据库性能可观测解决方案 』(附PPT和视频下载)
DBdoctor_off的博客
07-15 1299
eBPF的探测功能实现比较简单，难点适配成本比较高，需要确认源码探测的函数高低频、内核kernel版本、ARM CPU架构、数据库源码小版本等多种因素，比如PostgreSQL的小版本有400+个版本，工作量非常大。采集探测数据库SQL的完整执行过程，采集资源消耗、锁事件、事务维度的全量SQL、Cost统计信息等更细粒度的数据，实现性能问题可量化，精准定位问题根因SQL，并提供最佳优化建议。作为在数据库技术领域，率先掌握前沿eBPF技术的企业，7月13日上午，DBdoctor产品负责人。
1.4 Android下使能eBPF
从0到1，突破自己
05-31 1406
由于eBPF可运行用户提供的eBPF程序来扩展内核，这些程序可以附加到内核中的探测点或事件，用于收集有用的内核统计信息，监控和调试。eBPF使用bpf(2)系统调用加载到内核中，并作为eBPF机器指令的二进制块由用户来提供。Android构建系统支持使用本文所述的build文件语法将C程序编译为eBPF程序。并且Android包含了一个eBPF加载器和库，这样Android可以在启动初始化阶段加载eBPF程序。
使用ebpf 监控mysqld 内核
qq_32783703的博客
01-24 2261
我们使用ebpf 监控mysql的话有两个思路去做这件事情1、kprobe -> hook 掉tcp_sendmsg 和 tcp_recvmsg 一类的内核函数去分析网络协议2、uprobe -> hook 掉 mysqld 的api函数，然后在此基础上进行统计。
洞悉linux系统与应用性能,BPF之巅：洞悉Linux系统和应用性能
weixin_35714577的博客
05-14 1401
第1章 引 言11.1 BPF和eBPF是什么 11.2 跟踪、嗅探、采样、剖析和可观测性分别是什么 21.3 BCC、bpftrace和IO Visor 31.4 初识BCC：快速上手 41.5 BPF跟踪的能见度 71.6 动态插桩：kprobes和uprobes 81.7 静态插桩：tracepoint和USDT 91.8 初识bpftrace：跟踪open() 101.9 再回...
使用 eBPF 增强监控和可观测性
观测云的博客
06-16 1369
将代码注入 Linux 内核的能力开辟了一个全新的可能性世界。您可以轻松改进很多东西——安全性、网络、可观测性等等。BPF（伯克利包过滤器）使您能够编写可以从内部利用 Linux 内核功能的程序。BPF 传统上用于在将原始网络数据包发送到用户空间之前对其进行过滤，以提高系统的整体安全性。eBPF是 BPF 的扩展版本，具有一系列安全实现，以防止 BPF 程序破坏内核。在本指南中，您将了解如何使用 eBPF 在基于 Kubernetes 的基础架构中实现增强的可观测性。eBPF 代表扩展 BPF。顾名思义，它
eBPF在云原生监控中的源码级实践：从Cilium到BPF性能探针
2501_91980039的博客
06-04 558
eBPF正在彻底变革云原生监控的技术栈。通过本文的源码级解读和实践方案，开发者可基于Cilium构建高性能数据平面，并利用最新内核特性开发低损耗探针。未来的eBPF将向更安全的热补丁（livepatch）、跨内核版本可移植（CO-RE）方向演进。
ebpf入门---监听所有新进程
azraelxuemo的博客
03-08 1139
eBPF 全称 extended Berkeley Packet Filter，中文意思是 扩展的伯克利包过滤器。一般来说，要向内核添加新功能，需要修改内核源代码或者编写 内核模块 来实现。而 eBPF 允许程序在不修改内核源代码，或添加额外的内核模块情况下运行。
BPF——CPU分析工具
0 error(s)
06-01 1742
下面是在笔者电脑上使用execsnoop的一个例子：笔者在terminal 1开启execsnoop程序监听新创建的且进程名称中含有字符gr的进程，然后再terminal 2连接远程Linux，下面是这个过程中系统所创建的进程信息。对于传统的CPU分析工具，比如说top。其对于运行时间十分短的进程是无法做到检测的，在这种场景下就可以考虑使用execsnoop来捕获这些进程。
《system performance》&《BPF PerformanceTools》读书笔记（三）CPU
xyin_kevin的博客
05-08 558
背景及概念 1.指令与指令周期 2.CPU cache 3.CPU Performance counters 4.User-time/Kernel-time 5.CPU scheduler 分析方法及策略 1.USE 2.负载描述 3.采样分析（perf） 4.关注硬件中断 5.指令周期分析 监测工具 调整方法 ...
Linux内核SMP机间中断（三）
热门推荐
11-23 1万+
在飞腾cpu平台上，本地cpu端的核心发送函数smp_cross_call，即函数__ipi_send_mask。 static void smp_cross_call(const struct cpumask *target, unsigned int ipinr) { trace_ipi_raise(target, ipi_types[ipinr]); __ipi_send_mask(ipi_desc[ipinr], target); } 其中，cpumask *ta...
eBPF 学习路径总结
RToax
09-12 2772
BPF 学习路径总结 • Feiskyhttps://feisky.xyz/posts/2021-01-06-ebpf-learn-path/ 目录 1. 为什么要学习 BPF 2. BPF 应该怎么学习 2.1 BPF 书籍 2.2 BPF 学习样例 3. BPF 资料汇总 3.1 介绍系列 3.2 深入系列 3.3 Linux 资源 作者简介：狄卫华，趣头条资深架构师，主要关注云原生相关领域，目前聚焦在 BPF 技术及实践. 1. 为什么要学习 BPF 可以先从ebpf.i.
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值