超强的系统挖掘工具sysdig

Monitor tools of sysdig Sysdig 是一款强大的系统分析工具,能够监控和捕捉到大量的系统状态信息。它可以用来监控包括但不限于以下状态:CPU 使用率:可以监控整体系统或者特定进程的CPU使用情况。内存使用:能够检查系统的内存使用率,包括物理内存、交换分区等。I/O 活动:监控磁盘I/O活动,如读写操作和I/O等待时间,可以用于诊断性能瓶颈。文件操作:捕捉对文件的打开、读写、关闭等操作,用于分析文件使用情况或未授权访问。网络活动:监听所有网络活动,包括连接的建立与断开、数据包的传输等。 阅读详情

2017-11-15 17:56:12

sysdig是sysdig cloud 出品的主要基于Lua语言开发一个超强的工具,就像其在站点首页上所描述的“ Sysdig is open source, system-level exploration: capture system state and activity from a running Linux instance, then save, filter and analyze. Think of it as strace + tcpdump + lsof + awesome sauce. ” ,sysdig相当于strace + tcpdump + lsof + htop + iftop 以及其他工具的合集 ,除此之外其还能对容器如docker、coreOS、LXC进行监控,是不是感觉牛皮吹的很大?到底功能如何,看下面。

注:另外该工具也支持windows平台和mac平台,由于平时工作主要涉及linux平台,有兴趣的可以自行测试。

一、安装

本篇主要介绍在centos下的用法安装和测试,后面也会提到在ubuntu类平台下的安装。其支持在centos6和centos7上安装,安装方法十分简洁:

1、centos下的安装

1.1一键安装

curl -s https://s3.amazonaws.com/download.draios.com/stable/install-sysdig | sudo bash

上面是一个shell 脚本,会识别常用的linux发行版本,并根据对应的版本配置源,最后是安装sysdig包。在redhat/centos上首先会配置的是epel 源 ,配置该源的目的是安装dkms包;然后会配置draios源,通过该源可以安装sysdig包。最后在装sysdig包之前还会先安装kernel-devel包。

1.2、分步安装

由于使用的源都是国外源,会出现安装比较慢的情况,所以使用一键安装失败时,可以使用分解步骤安装。在内网环境下的也可以将依赖包都下下来再安装。

 

#导入draios源
rpm --import https://s3.amazonaws.com/download.draios.com/DRAIOS-GPG-KEY.public
curl -s -o /etc/yum.repos.d/draios.repo http://download.draios.com/stable/rpm/draios.repo
#导入epel 源
rpm -i http://mirror.us.leaseweb.net/epel/6/x86_64/epel-release-6-8.noarch.rpm
 
#装包
yum -y install kernel-devel*  dkms  sysdig

sysdig依赖的两个包,一个是kernel-devel ,一个是dkms包,DKMS全称是Dynamic Kernel Module Support (动态内核模块支持),即在内核版本变动之后可以自动重新生成新驱动模块。想要了解的可以自行GOOGLE 。

2、ubuntu下的安装

 

curl -s https://s3.amazonaws.com/download.draios.com/DRAIOS-GPG-KEY.public | apt-key add -
curl -s -o /etc/apt/sources.list.d/draios.list 
apt-get update
apt-get -y install linux-headers-$(uname -r)
apt-get -y install sysdig

windows、Mac OS及其他linux发行版的安装,可以参看官方安装文档。

二、常用用法

默认按上面的方法安装好以后,执行sysdig是会出错的。提示如下:

 

# sysdigUnable to load the drivererror opening device /dev/sysdig0. Make sure you have root credentials and that the sysdig-probe module is loaded.

所以执行之前还需要使用/usr/bin/sysdig-probe-loader命令装载内核模块,该命令也是一个shell脚本,执行时会从aws s3上下载一个ko模块文件。不过我在linux测试主机上下载多次都未成功。查看该脚本文件后,发现其调用下载的地址是:https://s3.amazonaws.com/download.draios.com/stable/sysdig-probe-binaries/sysdig-probe-0.6.0-x86_64-2.6.32-504.el6.x86_64-e065a96a1a7343d57e26548de23096e3.ko

注:该ko文件的URL不用记,执行该脚本时会有相应的提示“Trying to download precompiled module from” ,而且不同的内核版本下的对应ko文件也是不同的。我这里的内核版本是2.6.32-504.el6 。下载完成后会存放在~/.sysdig 目录。

完成后再执行sysdig-probe-loader命令就可以执行sysdig命令了,而且开机后不会自动加载,所以在不使用的情况下,该包是对主机无影响的。

1、网络

查看占用网络带宽最多的进程:

sysdig -c topprocs_net

显示主机192.168.0.1的网络传输数据:

as binary:sysdig -s2000 -X -c echo_fds fd.cip=192.168.0.1
as ASCII:sysdig -s2000 -A -c echo_fds fd.cip=192.168.0.1

这里显示网络传输功能,实际效果和tcpdump抓包是一样的。而且其本身也支持sysdig -w dump.scap抓包保存(可以配置-X或-A使用),抓好包也支持sysdir -r dump.scap读取。

查看连接最多的服务器端口:

in terms of established connections:sysdig -c fdcount_by fd.sport "evt.type=accept"
in terms of total bytes:sysdig -c fdbytes_by fd.sport

查看客户端连接最多的ip:

in terms of established connectionssysdig -c fdcount_by fd.cip "evt.type=accept"
in terms of total bytessysdig -c fdbytes_by fd.cip

列出所有不是访问apache服务的访问连接:

sysdig -p"%proc.name %fd.name" "evt.type=accept and proc.name!=httpd"

2、硬盘 I/O

查看使用硬盘带宽最多的进程:

sysdig -c topprocs_file

列出使用大量文件描述符的进程

sysdig -c fdcount_by proc.name "fd.type=file"

See the top files in terms of read+write bytes

sysdig -c topfiles_bytes

Print the top files that apache has been reading from or writing to

sysdig -c topfiles_bytes proc.name=httpd

Basic opensnoop: snoop file opens as they occur

sysdig -p "%12user.name %6proc.pid %12proc.name %3fd.num %fd.typechar %fd.name" evt.type=open

See the top directories in terms of R+W disk activity

sysdig -c fdbytes_by fd.directory "fd.type=file"

See the top files in terms of R+W disk activity in the /tmp directory

sysdig -c fdbytes_by fd.filename "fd.directory=/tmp/"

Observe the I/O activity on all the files named 'passwd'

sysdig -A -c echo_fds "fd.filename=passwd"

Display I/O activity by FD type

sysdig -c fdbytes_by fd.type

 

3、进程和CPU使用率

See the top processes in terms of CPU usage

sysdig -c topprocs_cpu

See the top processes for CPU 0

sysdig -c topprocs_cpu evt.cpu=0

Observe the standard output of a process

sysdig -s4096 -A -c stdout proc.name=cat

 

4、应用

查看机器所有的HTTP请求

 sudo sysdig -s 2000 -A -c echo_fds fd.port=80 and evt.buffer contains GET

查看机器所有的SQL select查询

 sudo sysdig -s 2000 -A -c echo_fds evt.buffer contains SELECT

See queries made via apache to an external MySQL server happening in real time

 sysdig -s 2000 -A -c echo_fds fd.sip=192.168.30.5 and proc.name=apache2 and evt.buffer contains SELECT

5、性能和错误

See the files where most time has been spent

sysdig -c topfiles_time

See the files where apache spent most time

sysdig -c topfiles_time proc.name=httpd

See the top processes in terms of I/O errors

sysdig -c topprocs_errors

See the top files in terms of I/O errors

sysdig -c topfiles_errors

See all the failed disk I/O calls

sysdig fd.type=file and evt.failed=true

See all the failed file opens by httpd

sysdig "proc.name=httpd and evt.type=open and evt.failed=true"

See the system calls where most time has been spent

sysdig -c topscalls_time

See the top system calls returning errors

sysdig -c topscalls "evt.failed=true"

snoop failed file opens as they occur

sysdig -p "%12user.name %6proc.pid %12proc.name %3fd.num %fd.typechar %fd.name" evt.type=open and evt.failed=true

Print the file I/O calls that have a latency greater than 1ms:

sysdig -c fileslower 1

6、安全

Show the directories that the user "root" visits

sysdig -p"%evt.arg.path" "evt.type=chdir and user.name=root"

Observe ssh activity

sysdig -A -c echo_fds fd.name=/dev/pretmx and proc.name=sshd

Show every file open that happens in /etc

sysdig evt.type=open and fd.name contains /etc

Show the ID of all the login shells that have launched the "tar" command

sysdig -r file.scap -c list_login_shells tar

Show all the commands executed by the login shell with the given ID

sysdig -r trace.scap.gz -c spy_users proc.loginshellid=5459

7、容器

查看机器上运行的容器列表及其资源使用情况

 sudo csysdig -vcontainers

查看容器上下文的进程列表

 sudo csysdig -pc

查看运行在wordpress1容器里CPU的使用率

 sudo sysdig -pc -c topprocs_cpu container.name=wordpress1

查看运行在wordpress1容器里网络带宽的使用率

 sudo sysdig -pc -c topprocs_net container.name=wordpress1

查看在wordpress1容器里使用网络带宽最多的进程

 sudo sysdig -pc -c topprocs_net container.name=wordpress1

查看在wordpress1 容器里占用 I/O 字节最多的文件

 sudo sysdig -pc -c topfiles_bytes container.name=wordpress1

查看在wordpress1 容器里网络连接的排名情况

 sudo sysdig -pc -c topconns container.name=wordpress1

显示wordpress1容器里所有命令执行的情况

 sudo sysdig -pc -c spy_users container.name=wordpress1

功能是不是很强大,不过记起来有点麻烦,可以在使用的时候使用sysdig -l 查看所支持的事件列表,使用sysdig -L 查看事件所支持的过滤列表。具体也可以参看官方guide文档。

三、csysdig交互式处理

感觉上面的方法还是比较麻烦怎么办?可以不可以交互式选择呢?当然没问题,在sysdig包里还提供了一个工具csysdig,该工具执行后,效果和top命令类似 ,见下图:

csysdig

通过F1~F8 及crtl + F 等功能键可以方便的切换视图和filter过滤。该功能可以参看youtube上的官方出的视频 :https://www.youtube.com/watch?v=UJ4wVrbP-Q8 (需翻墙)

理解并使用 sysdig sysdig 是一个强大的系统分析工具,专注于系统调用的捕获与分析。它通过拦截Linux系统调用和内核事件来收集有关进程、网络、文件、内存等方面的信息,帮助用户深入理解系统行为,解决性能瓶颈、安全隐患及故障排查等问题。其核心原理是利用内核机制(如tracepoint或eBPF)实时捕捉系统调用,并在用户空间处理展示。 阅读详情

相关推荐

Linux系统监控与分析工具Sysdig:安装与使用

Sysdig是一个超级有用的系统工具,运行在Linux环境上,比 strace、tcpdump、lsof 加起来还强大。Sysdig可用来捕获系统状态信息,保存数据并进行过滤和分析。本文主要介绍在Linux上安装Sysdig的基本步骤,然后以监控某个特定程序的系统调用(system call)为例来简单演示一下它的使用

白马负金羁 7429

Sysdig 安装

sysdig在linux(以ubuntu为例)上安装 1.自动安装 以root用户执行: curl -s https://s3.amazonaws.com/download.draios.com/stable/install-sysdig | sudo bash 然后install-sysdig脚本会下载对应的系统版本进行自动安装。 2.手动安装 curl -s https://s...

gam0n的博客 1288

容器跟踪调试工具Sysdig,Tracee相关文章

Sysdig vs DTrace vs Strace: A technical discussion. – Sysdig超强的系统挖掘工具sysdig_weixin_34242509的博客-优快云博客tracee源码初探 - shininglight - 博客园 (cnblogs.com)深入浅出 eBPF 安全项目 Tracee_dwh0403的博客-优快云博客_ebpf 安全使用tracee编写规则追踪系统安全事件 - FreeBuf网络安全行业门户深入浅出 eBPF 安全项目 Tracee -阿里

SHELLCODE_8BIT的博客 212

Linux超强的系统挖掘工具sysdig

Linux超强的系统挖掘工具sysdig 2015年12月28日admin发表评论阅读评论 sysdig是sysdig cloud 出品的主要基于Lua语言开发一个超强的工具,就像其在站点首页上所描述的“Sysdig is open source, system-level exploration: capture system state and activity from a runni...

yangbosos的博客 4593

手把手教你用vivado2018.3为复旦微JFMQL15T打IP补丁(含环境变量配置技巧)

本文详细介绍了在Vivado 2018.3环境中为复旦微JFMQL15T开发板打IP补丁的全流程,包括环境变量配置、IP缓存管理等关键步骤。通过实战验证的解决方案,帮助工程师快速搭建开发环境,解决国产芯片开发中的常见问题,提升开发效率。

weixin_30374009的博客 735

【数据分析生命周期全揭秘】从零开始打造你的数据科学项目 | 最全指南

在当今数据驱动的世界中,数据科学正在颠覆传统行业,成为企业决策和价值创造的重要引擎。然而,如何科学、系统地开展一个数据分析项目?这是很多人关心的核心问题。本篇文章基于经典数据分析课程内容,深入解读数据分析生命周期的每个阶段,让你快速掌握从“发现问题”到“落地应用”的完整流程。如果你正在学习或准备从事数据分析领域,这篇文章一定会对你大有帮助!数据分析生命周期的六大阶段数据分析生命周期的六个阶段相辅相成,每个阶段都至关重要:发现问题:明确需求,提出假设。数据准备:清洗、转换和可视化数据。

AI手套的博客 1743

sysdig_超强的系统挖掘工具sysdig

sysdig是sysdig cloud 出品的主要基于Lua语言开发一个超强的工具,就像其在站点首页上所描述的“Sysdig is open source, system-level exploration: capture system state and activity from a running Linux instance, then save, filter and analyze...

weixin_39628498的博客 355

【ESP32-IDF】I2S音频协议实战:从PDM麦克风到PCM扬声器的全链路解析

本文深入解析ESP32-S3的I2S音频协议,从PDM麦克风采集到PCM扬声器输出的全链路实现。详细介绍了硬件PDM转PCM、Standard模式配置及混合模式协同工作,提供实战代码与性能优化建议,助力开发者高效完成嵌入式音频项目开发。

pea55的博客 890

docker ip限制_原创 | Confine 拍了拍你,问要不要强化下你的 docker 容器

作者|绿盟科技 NS-SRC 潘雨晨刚才那个拍了拍你的 Confine 是一个可为Docker镜像生成Seccomp配置文件的框架,它通过减小容器可能遭受的Linux内核攻击面来强化容器。总体目标是在保证容器及其内部应用正常运行的前提下,过滤掉容器不需要的所有系统调用(syscalls),以缓解来自内核的漏洞攻击。那么问题来了, docker 已经有默认的 Seccomp 配置文件,...

weixin_28721917的博客 857

API安全攻防实战:从信息搜集到漏洞利用的完整路径

本文详细解析了API安全攻防实战的全过程,从信息搜集到漏洞利用,涵盖了渗透测试的核心技巧和工具使用。通过真实案例展示如何发现和利用API漏洞,如HTTP方法滥用、内容类型转换攻击等,并提供企业级防御策略和测试心得,帮助安全研究人员提升API安全防护能力。

weixin_30394981的博客 435

使用Transformer实现自动调制识别(RML2018)

image_size = 1024 # resize重置输入大小patch_size = 16 # 从输入图片中将被提取的块大小# 分成 num_patches 个块num_patches = (image_size // patch_size) #(72/6)**2 横着裁剪),],return x})

QAQIknow的博客 1325

docker ip限制_Confine 拍了拍你,问要不要强化下你的 docker 容器

作者|绿盟科技 NS-SRC 潘雨晨刚才那个拍了拍你的 Confine 是一个可为Docker镜像生成Seccomp配置文件的框架,它通过减小容器可能遭受的Linux内核攻击面来强化容器。总体目标是在保证容器及其内部应用正常运行的前提下,过滤掉容器不需要的所有系统调用(syscalls),以缓解来自内核的漏洞攻击。那么问题来了, docker 已经有默认的 Seccomp 配置文件,...

weixin_35334000的博客 1651

RT-DETR训练前的准备,将数据集划分成训练集、测试集验证集(附完整脚本及使用说明)

在计算机视觉领域,当我们着手训练一个模型时,。其中,将数据集划分为和更是一项基础性且关键的操作。这篇博客分析了这一划分背后的原因、其重要意义以及如何通过代码实现,帮助大家更好地理解和运用这一技巧,。

Limiiiing的博客 913

Kubernetes (k8s)资源

Kubernetes系统架构简介 : https://mp.weixin.qq.com/s/GDiKrdHNOt6n05Z0hPWRyQ k8s 安全配置指南 : https://neuvector.com/container-security/kubernetes-security-guide/ Elasticsearch 入门教程 : https://mp.weixin.qq.com...

qq_40907977的博客 4264

会计引擎:交易与核算分离的前世今生

一、为什么需要会计引擎 金融产品的设计,一如一块硬币需要兼顾两面:一面是为客户提供好的金融服务,满足客户支付结算、借贷、资产保值增值等方面的需求,并在这个过程中,以数字化的方式做好客户资产的登记,登记的载体,则是“分户”或“台账”,如客户存款户,是一种典型的分户--资金的增减变化都在一个账户中进行体现,而客户购买的银行理财,因为收益率、期限、投资标的不同,每一笔持有就形成一行记录,即为“台账”--这当然是不严谨但相对形象的表述。但是,“分户”和“台账”并没有必然的区别,以贷款为例,一些银行仍然存在所谓“

银行信息系统应用架构详解 986

枪支/刀具检测 (gun, knife) - SIXray, Clasp Dataset,YOLOv11+UI界面+数据集

python复制编辑# 计算 CIoU 损失。

YOLO 541

全自主AI勒索软件JADEPUFFER来袭,微隔离凭什么守住内网底线?

在真实的攻击记录中:JADEPUFFER在入侵过程中遇到了报错,它没有像传统脚本那样直接宕机退出,而是自主读取了报错信息,并仅仅用31秒自行诊断根因、切换方案、重新执行,最终成功端掉了受害者的核心数据库,过程一气呵成。从ChatGPT帮写钓鱼邮件,到如今JADEPUFFER这样的全自主Agent,勒索病毒从“死板的代码”进化成了具备独立思考能力的“黑客替身”。无论是手工时代的漏洞扫描、RaaS时代的自动化探测,还是AI时代的智能资产嗅探,攻击者的第一件事就是找到那些暴露在公网或内网边界的脆弱资产。

蔷薇灵动 219

ssm框架搭建

这个是一个在idea上成功跑起来的ssm框架项目,保存在这里方便以后使用直接下载

【Linux】开源的系统监控和故障排除工具Sysdig:用于系统监控、故障排除和安全审计,从下周、安装、入门到精通的全面教程

Sysdig 是一个开源的系统监控和故障排除工具,可以捕获和分析系统调用,帮助你深入了解系统的运行状态。无论是开发人员、运维工程师还是安全专家,Sysdig 都是进行系统监控、故障排除和安全审计的理想工具。本文将详细介绍 Sysdig 的安装、基本使用方法以及一些高级用法,并通过具体示例帮助你快速上手。

科技改变人类,技术成就未来 4349

OV9734 DATASHEET,完整规格书

OV9734完整规格书,包括电气参数,尺寸规格,寄存器配置表等

Devexpress16.2.6破解工具

Devexpress16.2.6破解工具Devexpress16.2.6破解工具Devexpress16.2.6破解工具Devexpress16.2.6破解工具

sysdig_系统分析工具 Sysdig 详解

Sysdig 是 Sysdig Cloud 开发的主要基于Lua语言的一个开源系统分析工具。Sysdig 能从运行的系统中,获取系统状态和行为,做过滤分析,功能上超同类开源工具。Sysdig 可以看做是 strace + tcpdump + lsof + htop + iftop 以及其他系统分析工具的合集 。此外 Sysdig 还能对容器(如docker、coreOS、LXC)进行监控。 Sys...

weixin_39530647的博客 2749

VB摄像头监控

该VB模块可对摄像头捕获的画面进行录像等,可在创建的窗口进行控制

K8s进阶7——Sysdig、Falco、审计日志

1、Sysdig收集分析系统调用,配合Chisels工具使用实战。 2、Falco监控容器运行时,编写监控策略+web页面展示实战。 3、审计日志策略编写+实战

百慕卿君博客 4508

sysdig安装和使用介绍

安装步骤1)安装资源库rpm --import https://s3.amazonaws.com/download.draios.com/DRAIOS-GPG-KEY.publiccurl -s -o /etc/yum.repos.d/draios.repo http://download.draios.com/stable/rpm/draios.repo 2)安装epel包rpm -...

aipoqiu2566的博客 891

sysdig命令使用

一、安装 本篇主要介绍在centos下的用法安装和测试,后面也会提到在ubuntu类平台下的安装。其支持在centos6和centos7上安装,安装方法十分简洁: 1、centos下的安装 1.1一键安装 curl -s https://s3.amazonaws.com/download.draios.com/stable/install-sysdig | sudo bash 上 面是一个she...

测试 877

kubernetes--分析容器系统调用:Sysdig

Sysdig是一个非常强大的系统监控分析和故障排查工具。汇聚strace+tcpdump+iftop+lsof工具功能为一身。sysdig除了能获取系统资源利用率、进程、网络连接、系统调等信息,还具备了很强的分析能力,例如:1.按照CPU使用率对进程排序2.按照数据包对进程排序3.打开最多文件描述符进程4.查看进程打开了哪些文件5.查看进程HTTP请求报文6.查看机器上容器列表及资源使用情况项目地址:https://github.com/draios/sysdig。

m0_57911290的博客 3586
上一篇: Kubernetes搭建 Helm 与 Swift 环境
下一篇: TestLink的使用实例
hxpjava1
博客等级 码龄19年 1365粉丝 511原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值