shell递归遍历目录删log

批量删除文件与目录的Shell脚本实践

原创已于 2022-01-23 13:33:37 修改 · 575 阅读

1 ·

CC 4.0 BY-SA版权

文章标签：

#shell #xarg #grep #递归 #printf

于 2021-07-06 00:25:37 首次发布

环境专栏收录该内容

97 篇文章

订阅专栏

本文介绍了两个Shell脚本示例，用于递归删除特定类型的文件和目录。Example1展示了如何删除以.e或.o为扩展名且带有数字的文件，以及通过grep和正则表达式筛选。Example2则演示了如何删除events.out.tfevents.*和.pth文件，同时打印遍历的目录结构，并屏蔽ls和rm的错误输出。这两个脚本在清理工作目录或自动化任务中非常实用。

Example 1

遍历删 *.e<一串数字> 和 *.o<一串数字> 文件，在 grep 用正则表达式筛选要删的文件^[2,3]。

#!bin/bash

clean()
{
    echo "->" cleaning: $1
    ls -d $1/* | grep -E "*.[oe][0-9]+" | xargs rm
    for f in `ls -a $1`; do
        if [ -d $1/$f ]; then
            if [[ $f != '.' && $f != '..' ]]; then
                clean $1/$f
            fi
        fi
    done
}

clean $(pwd)

Example 2

递归删 events.out.tfevents.* 和 *.pth，同时打印遍历的目录结构（用 printf 格式化输出）。
用 2>/dev/null 屏蔽 ls 和 rm 在无匹配时的报错输出^[9]。rm 也可以用 -f 参数，但这用起来有点怕删错。（windows 下的屏蔽见 [10,11]）
不启用 set -e，因为 ls 和 rm 虽然被屏蔽输出，在无匹配时依然会报错，如果用了 set -e 就可能会因为报错中途退出。

#!/bin/bash

# set -e  # 关掉，否则会因 ls、rm 在无匹配时的报错而退出

clean()
{
    # print directory tree
    if [ $2 -gt 1 ]; then
        printf "|  %.0s" $(seq 2 $2)
    fi
    if [ $2 -gt 0 ]; then
        printf "|- "
    fi
    echo $1/

    # clean log
    cd $1
    rm events.out.tfevents.* 2>/dev/null
    rm *.pth 2>/dev/null
    for d in `ls -d */ 2>/dev/null`; do
        clean `basename $d` `expr $2 + 1`
    done
    cd ..

    # remove folder if it's empty
    rmdir $1 2>/dev/null
}

for d in `ls -d */ | grep log`; do
    clean `basename $d` 0
done