linux服务器压缩日志定时脚本

最新推荐文章于 2024-02-21 15:16:12 发布

原创最新推荐文章于 2024-02-21 15:16:12 发布 · 2.6k 阅读

0 ·

CC 4.0 BY-SA版权

操作系统同时被 2 个专栏收录

104 篇文章

订阅专栏

数据库技术

99 篇文章

订阅专栏

本文详细介绍了一套高效实用的日志管理方案，包括压缩与删除旧日志的方法，以及如何解析nginx访问日志，按URL访问量进行倒序排列，为网站运营与故障排查提供数据支持。

压缩日志：

nice -n 19 tar -czPf /data/logs/app.log.$(date -d last-day +"%y%m%d").tgz /data/logs/app.log.$(date -d last-day +"%y%m%d") && rm -f /data/logs/app.log.$(date -d last-day +"%y%m%d")

删除7天前的日志：

rm -rf `find /data/logs/ -name "*.log.*" -mtime +7`

将nginx访问日志access.log中的url按访问量倒序排列：

nice -n 19 gzip -cd access.log-20190816.gz | nice -n 19 awk -F"request_url\":" '{print $2}' | nice -n 19 awk -F"\"" '{print $2}' | nice -n 19 awk -F"?" '{print $1}' | nice -n 19 sed "s/\/\+/\//g" | nice -n 19 sort -n | nice -n 19 uniq -c | nice -n 19 sort -rn > /tmp/access.log-20190816.top