【shell】将每日产生的日志文件按照文件名称中的日期分割移动到指定文件夹

原创 已于 2023-09-05 16:44:03 修改 · 1.1k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#linux

于 2020-08-26 19:57:58 首次发布
本文介绍了一种日志文件的自动备份方案，具体为将每天产生的日志文件从/home/hadoop/logs/log/目录下，按照日期归档并保存到/usr/local/log/相应目录下，确保每天备份的是前一天的日志，实现日志的有效管理和存档。

需求：在/home/hadoop/logs/log/文件下，有文件名access.log.20200316的日志文件，而且是每天产生。 需要把这个日志文件保存到/usr/local/log/202003/16这个目录下。每天备份的是昨天的日志。
代码如下：在这里插入图片描述

Shell 把日志记录按天切割到不同的文件
夏已微凉、
10-15 1440
一、需求二、分析三、代码四、运行五、执行结果图片文件 test-2020-04-24.log 内容文件 test-2020-09-25.log 内容六、其他Shell 字符串拼接案例 一、需求 有一个日志文件 /www/test/test.log 我们需要把该日志文件今天以前的日志，按天拆分 到 不同的文件中。 拆分的文件位于 /www/test/split文件夹，文件格式为 test-Y-m-d.log 文件内容如下： 127.0.0.1 - - [24/Apr/2020:10:32:26 +080.
NetCore-Serilog 按模块区分日志目录
神奇海螺
05-08 4027
前段时间，项目有需求，需要将某些模块的日志单独记录文件夹，于是找了一下Serilog的目录配置。 如果是按照appsetting来配置，节点内容大概如下： { "Name": "RollingFile", "Args": { "pathFormat": "Logs/Warning/{Date}.txt", "RestrictedToMinimumLevel": "Warning", "rollingInterv
Linux应用输出日志文件按日期分割
steve0916的博客
10-11 3215
1、shell脚本 #!/bin/bash log="/opt/GB28181/videoServer/1011.log" daily_log="/opt/GB28181/videoServer/" cur_date="`date +%Y-%m-%d`" cp $log $daily_log$cur_date".log" cat /dev/null > $log 解释：1、cur_date=...
Shell 脚本案例：文件分类归档整理
2301_78349581的博客
12-21 941
c) 脚本首先接收用户输入的需要整理的目录路径，然后在需要整理的目录中创建三个分类目录分别是 text、img、music，然后把需要整理的目录中相应的文件归类到三个目录中。b) 需要划分类型为文本文件(.txt)、图像文件(.jpg)、音频文件(.mp3) 三种文件。a) 脚本能够对给定的目录下的文件按照文件类型进行分类（文件类型通过文件扩展名进行区别）
linux自动压缩日志脚本按日期,Linux 上使用 Linux Shell 脚本自动化按天分割、压缩（延迟压缩）和定期清理日志文件...
weixin_32171133的博客
05-02 598
2019-02-26 10:10:54最近 Hgh这边有一个需求，需要对Linux服务器上的日志进行相应地自动化处理：1) 定期清理：当分区的可使用空间超过一个预先设定好的阈值(如当分区的可使用空间超过 80 % 时)就自动清 理日志，清理周期是一天一次；2) 按天分割：有的日志文件如 access.log 会不断地增长，现在需要对其进行分割操作(假设今天的日期是 2019 年 1 月 25 日，...
一行 shell 脚本命令，按日期切割日志
热门推荐
保持热爱。
04-18 1万+
服务器环境 [uname -a] Linux VM_16_16_centos 3.10.0-862.el7.x86_64 #1 SMP Fri Apr 20 16:44:24 UTC 2018 x86_64 x86_64 x86_64 GNU/Linux 日志路径 [pwd] /data/www/cappu/storage/logs/laravel.log shell 脚本路径 [v...
深入解析Shell中文件内容修改技巧
- 文档可能介绍了如何编写shell脚本来批量重命名文件，并将它们移动到指定的目录。 7. shell awk一个编程问题_百度知道.htm - 文档可能提出了一个特定的编程问题，并提供了解决方案，展示了awk在编程问题中的应用...
shell命令（文件搜索、文件处理和压缩解压）
Liu1013216383的博客
06-18 1780
当然，之后出现 tar 程序的改进版本，可以实现在合并归档的同时进行压缩。使用“ ls –l” 命令可以查看到新创建的链接文件所指向的目标文件名。该运算符表示只要所给的条件中有一个满足 时，寻找条件就算满足 OPTIONS ：描述命令所有的参数或选项。软链接（符号链接）是利用文件的路径名建立链接。硬链接是利用 Linux 中为每个文件分配的物理编号—— inode 建立链接。①and ：逻辑与，在命令中用 -a 表示，是系统缺省的选项，表示只有当所给的条 件都满足时，寻找条件才算满足。
4、Linux文件系统与Shell命令全解析
river的博客
07-24 106
本文全面解析了Linux文件系统与Shell命令的核心知识。内容涵盖Shell命令基础、主流文件系统特性（如ext系列、XFS、Btrfs等）、硬链接与符号链接的区别、索引节点(inode)的作用、文件系统适用场景及选择建议等。通过学习本文，读者能够更高效地使用Linux系统，并掌握文件管理、目录结构分析及文件系统选择的实用技巧。
4、Linux 系统的 Shell 命令与文件系统详解
最新发布
open4的博客
08-20 81
本文详细介绍了 Linux 系统中的 Shell 命令使用技巧、文件系统的基础概念与常见类型，以及文件系统的操作与优化方法。内容涵盖 ext、ext2、ext3、ext4、JFS、XFS、Btrfs 等多种文件系统的特点与适用场景，同时讲解了硬链接与符号链接的区别和创建方法、文件系统的挂载与卸载操作、性能优化策略以及错误检查与修复工具。通过本文，用户可以更好地理解和管理 Linux 系统的文件系统结构，从而提高系统使用效率和数据管理能力。
sinks-rollingfile:一个serilog接收器，用于根据大小和时间滚动文件
05-13
Serilog滚动文件接收器（替代文件大小） 这是一个滚动文件接收器，可让您基于文件大小指定翻转行为。 入门 从NuGet安装软件包： Install-Package Serilog.Sinks.RollingFileAlternate 要使用C＃代码配置接收器，请在记录器配置过程中调用WriteTo.RollingFileAlternate() ： var log = new LoggerConfiguration () . WriteTo . RollingFileAlternate ( " . \\ logs " ) . CreateLogger (); log . Information ( " This will be written to the rolling file set " ); 接收器配置了日志文件集的文件夹路径： logs\2
【Linux系统】自制简易shell的实现日志
从不依靠，从不寻找，非常沉默，非常骄傲。 你必须非常努力，才能看起来毫不费力。
10-18 2097
超 2W 字详细讲解如何自制一个简易的shell，实现：调用并执行系统命令、运行几个内建命令等等功能
使用.bat将mysql中的日志文件拷贝到指定目录中出来(根据当前日期存放)
xioxi
04-21 746
打开mysql的日志保存目录地址,如D:\phpstudy_pro\Extensions\MySQL8.0.12\data，新建copy_log.txt文件，在文件中写入 @echo off for /r %%a in (binlog.*) do copy %%a D:\1 pause 完成后将文件后缀改为.bat,执行 (当前代码解释：for循环将当前目录下binlog.*文件拷贝到d盘1目录中，注意确保d盘有该目录) (1)for /r主要用于搜索指定路径及其所有子目录中符合要求的文件（/r后如果没有
利用shell脚本或者php移动某个文件夹下的文件到各自的日期组成的目录下
03-04 181
　　背景是这样的：网站一开始访问量比较小，大家就把所有的图片文件上传到一个目录下（比如是/data/images/）。后来访问量大了，图片也多了，这样就影响读取效率。所以有个这样的需求，把这些个图片文件移动到多个目录下，这个目录是图片的上传日期（就是文件属性中的修改日期filemtime）组成的。比如2012-12-20的修改日期，那么现在就该放在/data/images/2012/12...
Linux 上使用 Linux Shell 脚本自动化按天分割、压缩（延迟压缩）和定期清理日志文件...
weixin_34342578的博客
02-26 1257
2019-02-26 10:10:54最近 Hgh这边有一个需求，需要对Linux服务器上的日志进行相应地自动化处理：1) 定期清理：当分区的可使用空间超过一个预先设定好的阈值（如当分区的可使用空间超过 80 % 时）就自动清 理日志，清理周期是一天一次；2) 按天分割：有的日志文件如 access.log 会不断地增长，现在需要对其进行分割操作（假设今天的日期是 2019 年 1 月 25 日，...
Hadoop日志按天分割和开启审计日志
beijiqieyx的博客
04-22 511
Hadoop日志按天分割和开启审计日志 hadoop 各个组件默认日志是大小分割的，到一定大小就分割出 .1 .2 .3 .4这样的文件，这样我们在查找问题的时候不是好定位你要的那天日志在哪个文件中。要是一天一个文件，按照日志的话就很好定位了。 在这里介绍一下hadoop按天切分日志的方法。 https://sukbeta.github.io/hadoop-log-segmentation/#方法...
linux中shell脚本+定时任务实现日志按天切割
王林冲的博客
11-17 3485
举例 : 切割nginx的日志 vi runlog.sh #!/bin/bash # 设置日志文件存放目录 logs_path="/var/log/nginx/" backup_path="/var/log/nginx/logs/" # 设置pid文件 pid_path="/run/nginx.pid" # 重命名日志文件 mv ${logs_path}/access.log ${backup_path}/access_$(date -d "yesterday" +"%Y%m%d").log mv
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值