Linux磁盘爆满排查指南:如何用du命令揪出隐藏的‘空间杀手‘

Linux磁盘空间排查与清理实战指南 磁盘空间管理是Linux系统运维中的基础技能,涉及文件系统原理与存储资源分配机制。通过df/du/lsof命令组合可以快速定位空间异常,其中df显示分区使用率,du分析目录占用空间,lsof处理被删除但未释放的文件。这些技术在服务器运维、日志管理和容器环境中尤为重要,能有效解决日志暴增、临时文件堆积等常见问题。结合find和logrotate等工具,可实现自动化空间维护,避免因磁盘满导致的MySQL等关键服务故障。本文以生产环境案例演示如何排查inode耗尽、LVM扩容等复杂场景,并分享Prometheus 阅读详情

Linux磁盘空间深度排查:揭秘隐藏文件与高阶du命令实战

当服务器磁盘空间告急时,常规检查往往只能看到冰山一角。那些以点号开头的隐藏文件、被进程占用的已删除文件,以及分散在各处的日志碎片,才是真正的"空间杀手"。本文将带您深入Linux存储管理的核心,掌握一套完整的空间排查方法论。

1. 磁盘空间告急的典型症状与初步诊断

"磁盘已满"的警报就像突如其来的洪水警报,但比洪水更棘手的是,我们往往不知道水从何处来。上周还运行良好的服务器,今天突然拒绝写入新数据,使用df -h查看发现根分区使用率已达100%,而常规检查du -sh *显示的文件总量却不足磁盘容量的一半——这种矛盾现象正是隐藏文件作祟的典型特征。

为什么常规检查会漏掉关键信息? 在Linux系统中,以点号(.)开头的文件默认不会在普通ls或du命令中显示。这些文件包括:

  • 用户配置文件(如.bashrc、.vimrc)
  • 缓存数据(如.cache目录)
  • 临时文件(如.vimswap)
  • 各种应用的隐藏状态文件

更隐蔽的是那些"已删除但未释放"的文件——当进程仍在访问某个文件时,即使执行了rm命令,磁盘空间也不会立即释放。这种情况在长期运行的Java应用、数据库服务中尤为常见。

初步诊断三板斧:

# 查看磁盘整体使用情况
df -hT

# 检查被进程占用的已删除文件
lsof | grep deleted

# 快速扫描大文件分布(含部分隐藏文件)
du -h --max-depth=1 / 2>/dev/null | sort -hr | head -20

2. 高阶du命令组合技:定位隐藏的空间占用者

常规的du -sh *命令就像手电筒,只能照亮明处的文件。要全面扫描存储空间,我们需要组合使用通配符和排序技巧。

2.1 精准匹配隐藏文件的通配符艺术

.[!.]*这个看似神秘的表达式,实际上是匹配隐藏文件的关键:

  • 第一个点匹配隐藏文件的开头
  • [!.]表示第二个字符不是点(排除"."和".."目录)
  • 最后的*匹配剩余部分

完整扫描命令示例:

# 显示当前目录所有文件(含隐藏)并按大小排序
du -sh .[!.]* * 2>/dev/null | sort -hr

常见问题处理:

  • 当出现"参数列表过长"错误时,改用:
    find . -maxdepth 1 -exec du -sh {} + | sort -hr
    
  • 需要排除特定目录时:
    du -sh --exclude=".cache" .[!.]* * | sort -hr
    

2.2 多维度排序分析技术

不同场景需要不同的排序策略:

排序需求命令组合适用场景
按大小降序`du -sh *sort -hr`
按修改时间排序`du -sh *sort -h -k1,1`
按inode使用量`find . -printf "%i %s %p\n"sort -n`

进阶技巧:

# 同时显示大小和修改时间
find . -maxdepth 1 -type f -exec du -sh {} \; -exec stat -c "%y" {} \; | paste - -

3. 特殊场景深度处理方案

3.1 已删除但未释放空间的处理

当lsof | grep deleted显示有文件被标记为deleted时,解决方案有:

  1. 重启占用文件的进程(最直接)
  2. 清空文件而不重启进程:
    truncate -s 0 /proc/[pid]/fd/[fd_num]
    
  3. 对于日志文件,使用logrotate配置自动轮转

3.2 稀疏文件与磁盘占用的误区

使用du和ls查看大文件时,结果可能不一致:

# 创建1GB稀疏文件
dd if=/dev/zero of=sparse_file bs=1 count=0 seek=1G

# 对比查看
ls -lh sparse_file  # 显示1G
du -h sparse_file   # 显示0

此时应使用du --apparent-size查看逻辑大小。

3.3 自动化监控脚本实现

定期扫描的脚本示例:

#!/bin/bash
LOG_FILE="/var/log/disk_audit.log"
THRESHOLD=80

check_disk() {
    local usage=$(df -h / | awk 'NR==2 {print $5}' | tr -d '%')
    if [ $usage -ge $THRESHOLD ]; then
        echo "[$(date)] Disk usage alert: ${usage}%" >> $LOG_FILE
        echo "Top 10 space consumers:" >> $LOG_FILE
        du -h --max-depth=1 / 2>/dev/null | sort -hr | head -11 >> $LOG_FILE
        echo "Deleted but held files:" >> $LOG_FILE
        lsof +L1 | awk '$5=="REG" && $7=="0t0" {print $9}' >> $LOG_FILE
    fi
}

check_disk

将脚本加入cron定时任务:

0 * * * * /path/to/disk_monitor.sh

4. 可视化工具与替代方案

当命令行操作不够直观时,可以考虑:

ncdu - 终端下的可视化利器

# 安装
apt install ncdu  # Debian/Ubuntu
yum install ncdu  # RHEL/CentOS

# 扫描包含隐藏文件
ncdu --include-hidden /

图形化方案对比表:

工具名称安装方式特点适用场景
ncdu包管理器直接安装交互式操作,支持删除操作服务器环境
BaobabGNOME桌面自带图形化扇形展示桌面环境
QDirStat需要图形界面类似Windows的TreeSize可视化分析
GdMapapt install gdmap基于矩阵的热图展示大目录结构分析

实际案例: 某次排查中发现.audit.log文件增长到30GB,原因是审计配置错误导致无限记录。通过ncdu快速定位后,用logrotate配置每日轮转解决了问题。

掌握这些技巧后,当再次面对磁盘空间告急时,您将能像经验丰富的外科医生一样,精准找到问题根源,而不是盲目地删除文件。记住,在Linux系统中,看不见的往往才是最耗空间的——这正是系统管理员需要时刻警惕的。

宝塔面板磁盘爆满别慌!5个隐藏垃圾文件夹定位与清理技巧(附命令) 本文详细介绍了宝塔面板磁盘空间爆满时的5个隐藏垃圾文件夹定位与清理技巧,包括/var/cache、/tmp、/var/log等关键目录的深度清理方法。通过专业命令和实用脚本,帮助运维人员有效释放磁盘空间,同时提供自动化清理方案和预防措施,确保服务器高效运行。 阅读详情

相关推荐

服务器磁盘空间告急诊断与高效清理实战指南

磁盘空间管理是Linux系统运维中的基础技能,其核心原理在于文件系统对存储块的分配机制。当inode或数据块耗尽时,系统将触发'No space left on device'告警,直接影响服务可用性。通过df/du/lsblk等命令组合,可以快速定位大文件或日志暴增问题。在容器化环境中,Docker存储驱动配置和定期prune操作尤为重要。最佳实践包括配置logrotate实现日志自动轮转,建立Prometheus监控预警体系,以及编写自动化清理脚本。针对高并发场景下的Nginx日志暴增问题,采用trun

shirlly 473

Linux磁盘空间排查:find、du、sort命令组合定位与清理大文件

在Linux系统管理与运维中,磁盘空间管理是一项基础且关键的技能。其核心原理在于通过文件系统元数据索引与磁盘块统计,实现对存储资源的有效监控。掌握高效的空间分析技术,对于保障系统稳定、优化存储成本具有重要价值,尤其适用于服务器运维、应用部署及开发环境等场景。本文聚焦于运用 find、du 与 sort 命令的组合策略,快速定位系统中的大文件与目录,并介绍安全清理的工程实践方法,帮助解决因日志膨胀、缓存堆积或临时文件未清理导致的磁盘空间告警问题。

weixin_33423874的博客 264

eNSP网络构建—建立小型局域网

企业私有网络构建运维 实战案例——使用模拟器构建局域网络 案例分析 1.架构分析 (1)需求分析 本实验的目的在于建立小型局域网。由于公司由不同部门组成,并分布在不同地点,因此需要划分不同网络实现互联互通。设计以下网络:两个部门各使用一台交换机连接,然后连接到总交换机,再通过路由器与外网以及其他部门网络相连。为了控制网络上的广播风暴,增加网络的安全性,在交换机上需要设置VLAN,在路由器与交换机之...

_ 4万+

linux指令——查询文件夹包括隐藏文件夹的大小

通过上述方法,可灵活应对包含隐藏文件的文件夹大小查询与排序需求。在Linux系统中,查询包含隐藏文件的文件夹大小并排序,需结合。

小墨迹的博客 1917

【OTDR曲线工具箱】04 批量生成sor文件

软件下载地址:http://120.78.150.214:9999/isora.zip 通过一个测试数据sor文件,批量生成多个测试文件(基于Bellcore GR196及SR-4731标准)。主要考虑哪些问题: 1、sor测试是否符合要求(主要是衰减系数) 2、多个文件的创建时间 3、文件必须随机处理,不要看省去一模一样。 来说说怎么操作的 第一步:选择参考曲线 参考曲线的选择由两种方法:从文件中导入、从曲线库中选择。 其中曲线库分为公共库和个人库两种,平时浏览的sor文件都可以加载到库中。 第二步

夜晚是传说的博客 5280

字节跳动消息队列深度剖析:从BMQ架构到重复消费实战

消息队列作为分布式系统的核心基础设施,承担着解耦、异步、削峰填谷的关键职责。从Kafka到自研BMQ,字节跳动通过存储计算分离架构与EC纠删码技术解决了海量数据下的存储成本与扩展性难题。深入理解Topic、Partition、Consumer Group与Offset机制,是掌握消息队列原理的基础。消息重复消费无法完全避免,需通过幂等设计、手动提交Offset等手段兜底。同时,从嵌入式FreeRTOS消息队列到分布式消息中间件,生产者-消费者模型一脉相承。本文结合字节跳动内部实践,剖析消息队列架构演进、重复

weixin_29061509的博客 222

Linux 显示隐藏目录或隐藏文件的占用空间

du -sh .[!.]* du命令用来看文件size .[!.]* 是正则式, 意思是第一位是点, 第二位是除了点以外的字符, 第三位是任意字符或者不存在 后面可以再加一个" *"来包括非隐藏文件 后面还可以接 sort -h来对占用空间进行排序(sort 的 -k2 可以指明根据第二列来排序) 下面这条命令就是显示所有隐藏文件和非隐藏文件的大小并根据占用空间排序的语句 d

rav009的专栏 4万+

FC7300 SPI MCAL配置引导

Example - QMI8A01z外设:Example - QMI8A01z外设:

舊梦的博客 261

linux 查看隐藏文件大小

linux 查看隐藏文件及文件夹大小

weixiao的博客 4989

信贷系统学习总结(6)—— 贷前、贷中、贷后全流程核心模型解析

本文系统解析了金融风控模型的技术演进与应用实践。从贷前、贷中到贷后全流程,详细介绍了A卡、B卡、C卡三类核心评分模型,以及反欺诈、动态监控、催收优化等关键技术的实现路径。重点阐述了特征工程设计、模型验证指标、联邦学习等创新应用,并提供了多个实战案例数据。同时提出了算法选择的"黄金三角"原则和分阶段技术演进路线,强调数据治理、模型全生命周期管理和复合型团队建设的重要性。文章指出未来风控将向决策智能化、数据无感化和风险预知化方向发展,需要平衡技术创新与合规要求。

科技D人生 1227

DeepSeek+Dify之一安装部署

DeepSeek添加知识库

yilvyangguang520的博客 1548

du 命令计算隐藏文件夹或文件

du -sh * .[^.]*    转载于:https://www.cnblogs.com/sweet22353/p/9481217.html

weixin_30955341的博客 3823

SAR成像概述

1. 发展概述 雷达是英文Radar(Radio detection and ranging)的音译,原意为“无线电探测与测距”。雷达的发明是无线电发展史上的里程碑,二战时,英国急需通过雷达探测空中金属物体来帮助搜寻德国飞机,这期间,雷达技术飞速发展,发展出了地对空、空对地轰炸、空对空火控、敌我识别等功能。雷达在第二次世界大战中发挥了重大作用,至今仍是军用和许多民用领域的重要传感器。 早期雷达系统通过时间延迟来测距,通过天线指向来测角,通过多普勒频移测速。1951年,Carl Wiley发现,通..

5081

du -sh查看隐藏文件的大小

du -sh ./* 可以查看可见文件的大小,.开头的不可见文件大小不可查,使用新命令 du -sh .[!.]*

qq_37668436的博客 3199

Unity最强动作战斗框架?Combat System Framework 深度解析

Combat System Framework 并不是一个简单的角色控制器,而是一套完整的动作游戏战斗开发框架。它借鉴了现代 AAA 游戏常见的架构思想,以 Gameplay Tag 为核心,结合 ScriptableObject 数据驱动设计,将技能、属性、Buff、伤害、武器、动画通知等系统有机整合在一起。同时,配套的可视化动画时间轴、Root Motion 工具和实时预览窗口,大幅优化了动作开发流程。当然,这套框架也有一定的学习门槛。

2403_88403568的博客 687

Probability and Statistics - 4th edition

Probability and Statistics - 4th edition

Linux根分区爆满?掌握这些排查命令,瞬间找出磁盘空间的“真凶”!

Linux服务器根分区满载时会导致系统崩溃。本文提供完整的排查方案:1)使用df -h和du命令快速定位大文件;2)针对性检查Docker、日志、缓存等常见占用源;3)推荐使用ncdu可视化分析;4)给出安全清理策略,包括Docker、日志和临时文件清理;5)建议设置监控和优化配置预防问题。涵盖从诊断到解决的完整流程,帮助管理员高效处理磁盘空间危机。

携梦问道的博客 530

VB摄像头监控

该VB模块可对摄像头捕获的画面进行录像等,可在创建的窗口进行控制

Linux磁盘空间管理:df与du命令实战解析

磁盘空间管理是Linux系统运维的核心基础技能,涉及文件系统监控、存储资源分配和空间回收等关键技术。通过df命令可以快速查看文件系统挂载点及使用情况,而du命令则能深入分析目录层级的具体空间占用。合理使用这两个工具能有效预防'No space left on device'等常见问题,特别是在处理日志文件、容器存储等易产生空间异常的场景时尤为关键。本文结合典型故障案例,详解如何通过find、lsof等命令定位大文件或未释放空间,并给出logrotate配置、Docker清理等工程实践方案,帮助开发者构建完善

weixin_34393428的博客 418

win10 跳过U8环境检测的IE WebControls.rar

win10 安装u8的时候 提示IE WebControls 不通过,这个工具可以欺骗u8的检查。 跳过U8环境检测的IE WebControls。提示导入失败后,重新检测通过。

Statistics and Machine Learning Toolbox

Statistics and Machine Learning Toolbox(带书签),MATLAB统计学习工具

Linux磁盘空间告警排查与优化实战指南

磁盘空间管理是Linux系统运维的核心技能之一,其原理涉及文件系统inode分配、块存储机制等底层技术。当磁盘使用率达到阈值时,合理的排查策略能有效避免服务中断。通过分层扫描工具(如du/gdu)可快速定位大文件,而lsof能发现已删除但未释放的'幽灵文件'。在日志治理方面,logrotate实现自动化轮转,结合tmpwatch可清理过期临时文件。对于容器场景,需特别关注docker日志配置。建议建立包含实时监控、自动化清理和架构优化三位一体的长效预防机制,将被动救火转为主动运维。本文以典型磁盘爆满事故为例

weixin_33922670的博客 431

磁盘告急?3分钟掌握Linux磁盘空间排查神技!运维新手必看

Linux磁盘空间排查终极指南——运维必备命令合集 当磁盘告急时,快速定位问题: 1️⃣ 基础命令:df -h查看全局使用情况,du -sh扫描目录大小 2️⃣ 精准排查: 用du -ah | sort -rh | head找出TOP10大文件 find命令按大小筛选文件(如+100MB) 3️⃣ 特殊场景: lsof | grep deleted处理已删未释放空间 统计小文件数量解决隐形占用 4️⃣ 自动化方案:提供日志清理脚本范例,建议定期巡检 提示:关键分区使用率超80%需及时处理,每周例行检查可防患

sg_knight的专栏 554

Linux故障排查实战:从命令到系统化思维

Linux故障排查是运维工程师的核心能力之一,其本质是通过系统化的思维和工具定位问题根源。理解操作系统原理、网络协议栈和应用程序行为是排查的基础,而像strace、perf、bpftrace这样的动态追踪工具则能深入分析系统调用、CPU使用和内核行为。在实际应用中,故障排查通常涉及CPU、内存、磁盘和网络等核心组件,例如通过top分析CPU热点,或使用lsof查找未释放的磁盘空间。掌握这些技能不仅能快速解决生产环境问题,还能提升系统设计的容错能力。本文通过真实案例,展示了如何从黄金指标监控到具体问题定位的全

weixin_30983353的博客 328

超全整理!Linux文件排序的7种姿势:从du到ncdu的隐藏文件处理方案

本文全面解析Linux文件排序的7种方法,重点介绍如何利用du和ncdu命令处理隐藏文件,帮助用户高效管理磁盘空间。从基础命令到高级工具实战,涵盖文件夹大小分析、隐藏文件排查及性能优化技巧,适合运维和开发人员提升工作效率。

weixin_30660027的博客 222

Linux服务器磁盘明明有空间,为啥还报‘No space left’?教你排查inode和watch限制

本文深入解析Linux服务器报错'No space left on device'的三大隐藏原因:block空间耗尽、inode资源枯竭和inotify watch限制。通过详细的排查方法和解决方案,帮助运维工程师快速定位问题,特别针对ENOSPC错误提供了从基础检查到高级诊断的完整指南。

weixin_30530339的博客 400

Linux ls命令实战:从基础到高阶的磁盘管理技巧

在Linux系统中,文件管理是系统运维的基础操作,其中ls命令作为最常用的文件列表工具,其强大功能常被低估。理解inode机制和文件权限体系后,ls配合参数组合能实现精确的磁盘空间分析和安全隐患排查。通过-l参数查看详细属性、-h参数智能转换文件大小单位、-t/-S等排序参数,运维人员可以快速定位大文件、异常修改或权限问题。在生产环境中,结合grep/awk等工具进行二次过滤,能有效应对日志暴增、恶意文件检测等典型场景。掌握ls命令的进阶用法,是提升Linux服务器管理效率的关键一步。

weixin_34252090的博客 371

【工具】ncdu进阶技巧:5个高效清理Linux磁盘空间的实战场景

本文详细介绍了ncdu工具在Linux系统中高效清理磁盘空间的5个实战技巧,包括精准定位日志文件、优化容器存储、深度清理用户目录等。通过交互式可视化界面,ncdu帮助用户快速发现并管理大文件,提升磁盘空间管理效率。文章还提供了安装指南、使用技巧和避免误删的安全建议。

i8j9k0l1的博客 198

别再只会用df -h了!用ncdu可视化揪出Linux服务器磁盘爆满的元凶(附Docker日志清理脚本)

本文介绍了如何使用ncdu工具高效定位Linux服务器磁盘空间爆满的问题,替代传统的df -h和du命令。通过可视化界面快速识别大文件,并提供Docker日志清理脚本,帮助运维人员彻底解决磁盘空间不足的困扰。

weixin_42634811的博客 280

Linux LVM 根目录 100% 磁盘打满:3步定位 MySQL 日志并安全清理

本文详细介绍了Linux LVM环境下根目录磁盘爆满的紧急处理方法,重点针对MySQL日志文件进行精准定位与安全清理。通过三步诊断法锁定问题根源,对比分析Binary Log的三种清理方案,并提供Error Log的日志轮替技巧,帮助运维人员高效解决磁盘空间危机。

weixin_30225755的博客 383
上一篇: 彻底解决VMware与Hyper-V/Device Guard冲突的完整指南
下一篇: 用NuMaker-PFM-M487KM玩转Arduino生态:兼容性测试与扩展模块开发实录
随身带U盘
博客等级 码龄4年 31粉丝 1526原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符  | 博主筛选后可见
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值