shell执行保留最新的10份文件

最新推荐文章于 2025-05-13 16:34:41 发布
原创 最新推荐文章于 2025-05-13 16:34:41 发布 · 1k 阅读 · 4 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#linux

文章讨论了两种自动备份后的数据删除策略：一种是基于时间，保留最近10天的文件；另一种是基于数量，始终保持10份最新备份。第一种方法存在风险，如果备份中断超过10天，所有文件会被删除。第二种方法则确保始终有10个备份文件，通过ls和awk命令实现。

在做自动备份的时候，通常需要做自动删除，需要保留多少天的数据。
第一种：保留最近10天的文件

命令： find /data/backup -mtime +10 |xargs rm -rf

用上面的命令会删除/data/backup目录下10天前的数据，用这个语句有一个问题，如果自动执行脚本出问题了，超过10天没有备份了，等我们发现的时候备份文件都会被删除了。

第二种：保留最新的10份文件
备份文件始终保留10个，对文件先排序再删除
ls -t 对文件进行排序，NR当前输入的记录行数

命令：  ls -t /data/backup/*.tar.gz |awk 'NR>10' |xargs rm -rf
Shell中删除某些文件外所有文件的3个方法
09-15
本文将详细介绍在Shell中删除某些文件外所有文件的三种方法，确保在保留特定文件的同时安全地删除其他不需要的文件。 ### 方法1：模式匹配法 这种方法依赖于bash的扩展globbing（extglob）功能。`extglob`允许我们...
精选资源
Linux使用shell脚本定时删除历史日志文件
01-09
总结起来，Linux系统中的日志文件清理可以通过编写shell脚本并配合`crontab`进行定时执行，实现自动化清理，提高系统效率。通过理解并自定义`del_history_files`脚本及其配置文件，我们可以根据实际需求调整日志保留...
linux下保留文件系统下剩余指定数目文件的shell脚本
09-15
本文介绍下，用于保留文件系统下剩余指定数量的文件的一个shell脚本，感兴趣的朋友可以参考下
shell根据最新时间保留目录下的十个文件夹
醉世老翁的博客
12-13 1974
#!/bin/bash dir_list=`ls /home/test/Test` #获取目录下有几个不同的目录， echo $dir_list # T1,T2,T3 exe(){ #定义函数 all_dir=(`ls -t /home/test/Test/$1/`) #根据最新时间排序，获取$i目录下的所有目录 c=`expr ${#all_dir[*]} - 1` #减一，减去/home/test/Test，如果不减一，会把这一层列出来，删除的时候就直接删除整个目录了 for i in `...
shell脚本-保留目录下最新的几个文件，其他删除
打卤的博客
11-27 9073
#!/bin/bash #保留文件数 ReservedNum=5 FileDir=/data/bak date=$(date "+%Y%m%d-%H%M%S") FileNum=$(ls -l $FileDir|grep ^- |wc -l) while(( $FileNum > $ReservedNum)) do OldFile=$(ls -rt $FileDir| head...
Linux shell命令 批量删除子目录下的文件，保留指定数量的最新文件
seowen的开发 小本子
04-17 1431
#!/bin/bash #保留文件数 ReservedNum=2 #要删除文件的，父级目录 FileDir=/usr/docker/springCloud/project/ #循环子目录列表 for element in `ls $FileDir` do # 拼接成完成目录 （父目录路径/子目录名） dir_or_file=$FileDir$element # 获取子...
shell脚本保留目录内最近的三个文件
weixin_42324368的博客
03-08 784
【代码】shell脚本保留目录内最近的三个文件。
仅保留最新，最近的10000条日志 ，这条语句作用删除 多余的日志(mysql)日志表你自己定义 _rowid关键字是核心技巧
zy103118的博客
04-12 256
DELETE FROM t_send_log WHERE id IN ( SELECT * FROM ( SELECT id FROM t_send_log WHERE _rowid > 10...
Shell脚本实践(修改文件，修改配置文件，执行jar包)
fen_fen的专栏
05-13 1080
需要编写一个shell脚本支持1、修改.so文件2、修改配置文件3、执行jar包。
PHP执行普通shell命令流程解析
10-14
这些函数在默认情况下可能被禁用，因为它们可能带来安全风险，例如执行恶意的shell命令。若需使用，你需要在`php.ini`配置文件中找到`disable_functions`选项，移除这些函数的禁用状态，然后重启Apache服务器。 1. ...
linux shell 清空文件,Linux Shell脚本，删除旧文件，保留最新的几个文件
weixin_42550614的博客
05-01 244
AudioSpecificConfig2个字节. 下面蓝色的为AudioSpecificConfig部分: 000001e0h: 00 00 00 00 00 AF 0011 9000 00 00 0F 09 00 02; .....? ...WCF入门一.概述 Windows Communication Foundation(WCF)是由微软发展的一组数据通信的应用程序开发接口,可以翻译为Wi...
Linux脚本保留指定文件下文件最新个数
weixin_38479398的博客
03-22 1484
#!/bin/sh #if [ -z $1 ] || [ -z $2 ];then # echo -e "usage: ./folder_save.sh [save num of int] [deal with path]" # exit #fi #echo -e "0=$0,1=$1, 2=$2" basedir=$(cd `dirname $0`;pwd) #dealwithdir=$2 #/home/afc/savefiles dealwithdir='/home/ap/webapp...
shell命令删除历史文件，仅保持最新的三个文件
非著名程序猿
12-08 1977
tarFolder='tar' #保留文件数 ReservedNum=2 FileDir=./$tarFolder date=$(date "+%Y%m%d-%H%M%S") # 获取副本数量 FileNum=$(ls -l $FileDir | grep ^- | wc -l) env="prod" # 统计当前文件夹下文件的个数 # 只保留PROD下副本数量为最新的 3个 if [ -n $1 ] && [ "$1" == "$env" ] && [ -d $tarF
linux shell 日志处理保留N天日志
王木头的博客
04-26 2362
背景 非业务必须日志每日新增一个，大小约60G，解决这个问题需要做两点： 1、短期方案：解决每日新增造成磁盘爆满的风险 2、根治方案：业务代码层面判断是否需要这些日志，如果不需要则代码不再生成即可；如果需要则通过分布式大容量组件存储（hdfs、kafka等）。 本方案解决短期方案 解决 1、写日志清理脚本 通过shell脚本+crontab定时执行删除日志文件的逻辑。 脚本名称：rizhiqingli.sh 脚本位置：/export/scripts #!/bin/env bash BAOLIUWENJIAN
【shell】shell定时清理日志文件，只保留文件下最近的60个
流氓兔的博客
11-08 4898
最近发现服务器磁盘空间使用超过90%，查看原因是起得服务日志很长时间没清理导致的，所以写个脚本，定时清理日志文件，只保存logs文件下最近日期的60个日志文件。 脚本如下 #vim /testweb/shell/taskClean.sh #!/bin/bash DIR=/testweb FILE_BAK=file_bak # 定时清理日志，保留最近日期的60个文件 ls -1t $DIR...
shell按照时间排序，保留最新的10个文件并删除其余文件
06-14 2735
shell按照时间排序，保留最新的10个文件并删除其余文件#!/bin/shbasedir=$(cd dirname $0;pwd)DATE=$(date "+%F %H:%M")path=/data/ceshisave_num=5line=$(ls -l $path|sed 1d|wc -l)if [ ! $basedir/del_name.log ];then touch $basedir...
删除脚本-保留目录下最新的几个文件或目录
cuiyong8723的博客
03-28 368
i_basedir=/archlog/cvbackup # backup base dir i_dbnm=SRPDB KEEP_BACKUP_NUM...
Shell 脚本：按日期排序和查找文件 / 删除指定时间范围内的文件
Laurence的技术博客
02-02 2507
有时候，我们会向一个文件夹里添加或删除文件，随着文件越来越多，操作历史越来越长，最初文件夹的状态可能就记不清了，某些时候，我们可能想恢复到文件夹的初始状态，重新来过，这时候就只能依靠文件修改时间来查找和过滤文件了。一个典型的场景就是：为了运行各种组件，我们会往一个 lib 文件夹中添加各种 Jar 包，有时候，时间久了，Jar 包可能会出现版本冲突，于是我们想清理到近期安装的各种 Jar 包，从初始状态重新开始。是以下字母的一些组合，但是在不同系统上，允许的组合种类也是不一样的，总得来说，
shell脚本实现定时删除，保留最新3份文件
qq_42716761的博客
04-04 1172
首先使用ls命令列出指定目录下的所有文件然后，通过tail命令选择最新的一个文件进行复制。在这个例子中，我们使用了变量yuanma来存储最新文件的文件名，以便在scp命令中使用。sleep命令用于休眠一段时间，单位为小时，因此在每次循环结束后等待1小时，然后重复同样的复制过程。在每个循环中，使用ls命令列出指定目录下所有的文件，并按照修改时间从新到旧排序。然后，通过计算需要删除的文件数量（即文件总数减去要保留的文件数），对旧文件进行删除。长青这里有两台服务器，A和B，A是运行网站的，B是用来存储数据的。
shell方法保留最新文件，删除所有较早文件
最新发布
11-02
<think>首先，用户查询的是：使用shell脚本保留最新文件并删除其他较早文件的解决方案。用户提供了三个引用，但强调了这些仅供参考，并不是真正的需求，我需要基于用户的问题优先考虑。 用户的问题："我想查找使用shell方法保留最新文件并删除所有较早文件的解决方案 请问使用shell脚本保留最新文件并删除其他较早文件的方法" 所以，核心是提供一个shell脚本来保留指定目录中最新的一些文件，并删除其他较早的文件。 来自引用的关键点： - 引用[1]：使用`ls -rt`列出文件，按时间逆序（旧到新），`head -1`取最旧的文件删除，保留一定数量的文件。 - 引用[2]：类似，但检查目录路径。 - 引用[3]：使用数组和循环删除多余的文件。 我需要构建一个清晰、可靠的脚本。结构如下： 1. 指定目录和要保留的文件数。 2. 列出文件按修改时间排序（从旧到新或新到旧）。 3. 计算需要删除的文件数。 4. 删除旧文件。 最佳实践：使用`ls -t`按修改时间排序（新到旧），然后保留前N个，删除其余。 在脚本中，为了避免文件名中有空格等问题，最好使用`find`或`ls -t | head -n -N`，但`head -n -N`不是标准选项。所以，使用循环或数组更安全。 参考引用[3]，它使用了数组来读取文件列表。 脚本步骤： 1. 定义变量：目录路径和保留文件数。 2. 切换到目录或使用绝对路径。 3. 获取文件列表按时间排序（新到旧）。 4. 计算需要删除的文件数量（总文件数减去保留数）。 5. 如果删除数量>0，则删除旧文件（列表末尾的文件）。 在引用[1]和[2]中，它们使用`ls -rt`（旧到新），然后删除最旧的。引用[3]使用`ls -t`（新到旧），然后删除索引较高的部分。 使用`ls -t`更直观，因为它直接列出最新的在前。 安全考虑：避免删除目录或隐藏文件。在脚本中，确保只针对文件操作。引用[1]使用了`grep ^-`来筛选普通文件，引用[2]和[3]没有明确指定。 改进：在脚本中添加筛选只针对文件，不包括目录。 用户没有指定是否包括子目录或只针对文件，假设是针对当前目录的文件。 脚本大纲： - 设置变量：`dir="/path/to/directory"` 和 `reserved_num=5` - 进入目录：`cd "$dir" || exit` - 获取文件列表：`files=($(ls -t))`，但注意空格问题。最好使用`find`或用`while read`循环。 - 替代方法：使用`ls -tp | grep -v '/$'`列出文件和目录但过滤掉目录，或者`find . -maxdepth 1 -type f -printf '%T@ %p\0' | sort -nz | cut -d' ' -f2- | tr '\0' '\n'`，但复杂。 简单方式：在脚本中使用`ls -t`并处理数组。 为了安全，参考引用[3]，使用数组。 完整脚本： ```bash #!/bin/bash # 指定目录 dir="/path/to/directory" reserved_num=5 # 保留最新的5个文件 # 检查目录是否存在 if [ ! -d "$dir" ]; then echo "目录不存在: $dir" exit 1 fi cd "$dir" || exit # 获取文件列表，按修改时间排序（新到旧） mapfile -t files < <(ls -t) # 总文件数 file_num=${#files[@]} # 如果需要删除的文件数大于0 if (( file_num > reserved_num )); then # 计算需要删除的文件数量 delete_num=$((file_num - reserved_num)) # 删除旧文件（从索引reserved_num开始） for (( i=reserved_num; i<file_num; i++ )); do file="${files[$i]}" echo "删除文件: $file" rm -f "$file" done else echo "文件数不足，无需删除。" fi ``` 在这个脚本中： - `mapfile -t files < <(ls -t)` 读取`ls -t`输出到数组，避免空格问题（假设文件名没有换行符）。 - 然后，删除索引从`reserved_num`到`file_num-1`的文件，这些是较旧的文件。 潜在问题：文件名中有空格或特殊字符。`ls -t`可能不处理得很好，但在这个上下文中，对于简单文件应该工作。 更健壮的方法：使用`find`和`stat`，但更复杂。 考虑到用户引用中的脚本使用类似方法，我认为这样可以。 用户引用[1]使用了`while`循环每次删除一个文件直到数量达标，但效率较低；直接删除多个更好。 现在，回答结构： - 系统指令要求使用中文回答。 - 结构清晰，逐步解决问题。 - 末尾添加相关问题。 - 使用LaTeX格式：这里没有数学表达式，所以可能不需要。 - 引用标识：由于用户提供了引用，我应该自然地引用它们。 在我的回答中，可以提到参考了提供的引用。 回答大纲： 1. 介绍问题：用户想保留最新文件并删除旧文件。 2. 提供一个shell脚本示例。 3. 解释脚本的关键部分。 4. 添加注意事项。 5. 最后，生成相关问题。 参考用户引用： - [^1] 使用了类似方法。 - [^2] 添加了目录检查。 - [^3] 使用数组和循环。 在我的脚本中，结合了这些元素。 最终脚本调整： - 使用`ls -t`获取列表。 - 使用数组处理。 - 添加错误处理。 脚本： ```bash #!/bin/bash # 设置目录和保留文件数 dir="/data/bak" # 替换为您的目录 reserved_num=5 # 保留最新文件的数量 # 检查目录存在 if [ ! -d "$dir" ]; then echo "错误: 目录 $dir 不存在" >&2 exit 1 fi cd "$dir" || { echo "无法进入目录 $dir" >&2; exit 1; } # 获取所有文件（不包括目录）按修改时间排序（新到旧） # 使用数组处理文件名 files=() while IFS= read -r -d $'\0' file; do files+=("$file") done < <(find . -maxdepth 1 -type f -printf '%T@ %p\0' | sort -nz | awk -F' ' '{print substr($0, index($0,$2))}' | cut -d' ' -f2- | tr '\<' '\n') # 简化：假设文件名安全，直接用 ls # 简化版：使用 ls -t mapfile -t files < <(ls -t 2>/dev/null) file_count=${#files[@]} if (( file_count > reserved_num )); then # 需要删除从索引 reserved_num 开始的文件 for (( i=reserved_num; i<file_count; i++ )); do file="${files[$i]}" echo "删除旧文件: $file" rm -f "$file" done echo "已保留最新的 $_reserved_num 个文件，删除了 $((file_count - reserved_num)) 个旧文件。" else echo "文件数 ($file_count) 少于或等于保留数 ($reserved_num)，无需删除。" fi ``` 为了简化，我将使用`ls -t`版本，因为引用中也这样做了。 在回答中解释： - `dir` 和 `reserved_num` 变量可以修改。 - 脚本进入目录，获取文件列表。 - 删除索引大于保留数的文件。 注意事项： - 文件名中有空格、换行符或特殊字符可能会导致问题。建议使用`find`方法更健壮。 - 确保脚本有执行权限。 - 可以先测试echo删除命令。 相关问题： 1. 如何处理文件名中有空格的情况？ 2. 如何扩展脚本以包括子目录？ 3. 如何添加日志记录或错误处理？ 4. 如何在定时任务（cron）中使用此脚本？ 最后，添加引用标识。 </think>### 使用 Shell 脚本保留最新文件并删除较早文件的方法 以下是实现保留指定目录中最新若干个文件并删除其他较早文件的完整解决方案。该方法基于您提供的引用内容[^1][^2][^3]，并结合 Shell 脚本最佳实践优化，确保安全性和可靠性。核心思路是： 1. **列出文件按修改时间排序**（新到旧） 2. **计算需保留的文件数量** 3. **删除超出保留数量的旧文件** #### 完整脚本代码 ```bash #!/bin/bash # 参数设置 target_dir="/data/bak" # 目标目录（替换为您的实际路径） reserved_num=5 # 保留最新文件的数量 # 1. 检查目录是否存在 if [ ! -d "$target_dir" ]; then echo "错误：目录 $target_dir 不存在" >&2 exit 1 fi # 2. 进入目录（失败则退出） cd "$target_dir" || { echo "无法进入目录: $target_dir" >&2; exit 1; } # 3. 获取文件列表（按修改时间倒序：最新在前） mapfile -t sorted_files < <(ls -t 2>/dev/null) # 4. 计算实际文件数量（排除目录） file_count=${#sorted_files[@]} if [ "$file_count" -eq 0 ]; then echo "目录为空，无需操作" exit 0 fi # 5. 删除旧文件（保留最新 reserved_num 个） if [ "$file_count" -gt "$reserved_num" ]; then echo "正在保留最新 $reserved_num 个文件..." for (( i=reserved_num; i<file_count; i++ )); do old_file="${sorted_files[$i]}" if [ -f "$old_file" ]; then # 确保是文件而非目录 echo "删除旧文件: $old_file" rm -f "$old_file" # 强制删除文件 fi done echo "完成：已删除 $((file_count - reserved_num)) 个旧文件" else echo "无需删除：文件数 ($file_count) 未超过保留数量 ($reserved_num)" fi ``` #### 关键步骤详解 1. **参数定义** - `target_dir`：目标目录路径（需自定义） - `reserved_num`：保留的最新文件数量（例如保留最新的 5 个文件） 2. **安全检查** - 检查目录是否存在 (`if [ ! -d ... ]`) - 使用 `cd || exit` 确保进入目录失败时脚本终止[^2] 3. **文件排序与筛选** - `ls -t`：按修改时间倒序列出文件（最新文件在最前） - `mapfile -t sorted_files`：将文件列表存入数组，避免文件名空格问题 4. **删除逻辑** - 仅当文件数超过保留数量时执行删除 - 循环从索引 `reserved_num` 开始删除（即保留前 N 个最新文件） - `-f` 参数确保只删除文件而非目录[^1][^3] #### 注意事项 1. **文件名安全性**： - 当前脚本假设文件名中**不含换行符或特殊字符**，若有此类文件，需改用 `find` 命令增强健壮性。 2. **测试建议**： - 首次运行前，将 `rm -f` 替换为 `echo` 模拟删除操作测试： ```bash echo "模拟删除: $old_file" # 替换实际 rm 命令 ``` 3. **定时任务集成**： - 如需定时执行，保存脚本为 `cleanup_files.sh`，添加执行权限： ```bash chmod +x cleanup_files.sh ``` - 在 cron 中添加任务（例如每天凌晨 3 点运行）： ```cron 0 3 * * * /path/to/cleanup_files.sh ``` #### 引用说明 此方案参考了站内提供的 Shell 脚本实现，优化了目录检查、数组处理和安全删除逻辑[^1][^2][^3]。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

javascript_good

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值