脚本过滤nginx日志是不是存在某个字符的IP及其访问次数

最新推荐文章于 2025-12-21 11:47:57 发布
原创 最新推荐文章于 2025-12-21 11:47:57 发布 · 170 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#nginx #chrome #运维

该文章介绍了如何使用Bash命令行工具grep和awk，结合sort和uniq，从access.log文件中查找包含XXXX的行，然后按IP地址计数每个IP的出现次数。 
#!/bin/bash

# Define the log file
logfile="access.log"

# Use grep to find lines containing 'XXXX', then awk to count occurrences by IP
grep 'XXX' "$logfile" | awk '{print $1}' | sort | uniq -c | sort -nr
如何查找访问 Nginx 的前 10 个 IP？
网络技术联盟站
03-17 1700
通过本文的介绍，您应该了解如何查找访问 Nginx 的前 10 个 IP 地址的几种方法，包括使用命令行工具、编写脚本以及使用日志分析工具。选择合适的方法取决于您的具体需求和偏好，但无论采用哪种方法，都应注意保护用户隐私和服务器安全。希望本文能够对您有所帮助，并提高您管理和维护 Nginx 服务器的效率和准确性。
运维36讲第21课：Shell 脚本如何作日志分析
sucaiwa的博客
03-21 1431
上个课时我们讲解了日志分析的一些 Linux 命令，如果想对一些偏大型或复杂场景进行分析，而又缺乏系统的日志收集检索系统，此时就需要借助脚本（Shell、Python、PhP 等）来帮助我们进行日志分析，本课时我们就讲解如何通过 Shell 来进行日志分析，并介绍一些比较高效的方法。
利用grep与cut只显示IP地址
yangyzc的专栏
09-03 1594
[root@localhost ~]# echo "This is IP = $(ifconfig | grep -o 'inet addr:[^[:space:]]*' | cut -d: -f2 | grep -v '127.0.0.1')"
SHELL编程----Nginx日志分析2-统计某个时间段的IP访问量
m0_65237356的博客
04-18 1009
输出说明：2020年04月23日20点至23点，共有 192.168.1.24、192.168.1.25、192.168.1.20、192.168.1.21、192.168.1.22 共 5 个 IP 访问了。1.使用grep过滤我们想要的数据，题目中要求时间段在2020年04月23日20点至23点之间。2.取出数据后，对其进行处理，题目只要求IP的访问量，所以使用awk只提取出ip。4.去重后的行数就是我们想要的答案，所以用wc -l统计行数。
nginx访问日志过滤IP和状态码
weixin_49763009的博客
12-15 3981
注意nginx版本必须大于等于1.70 自定义访问日志格式 log_format mylogformat '"$remote_addr" "[$time_local]" "$request_method" ' '"$uri" "$request_uri" "$request_time" "$status" "$body_bytes_sent"' '"$http_referer" "$http_x_forwarde
nginx 过滤ip
qq_36763236的博客
06-29 1115
nginx
分析nginx日志屏蔽攻击者ip
枫叶的博客
08-07 3846
最近，我分析了一下日志，发现有同一个ip不断地请求我的短信接口，然后就写一个脚本来自动分析日志对这些IP进行屏蔽，本文介绍如何利用nginx屏蔽ip来实现防止攻击，当然也可以通过iptable来实现。 首先，在nginx的安装目录下面,新建屏蔽ip文件，命名为blockip.conf，以后新增加屏蔽ip只需编辑这个文件即可，格式如下： deny 165.91.122.67; 再在nginx的...
【Shell牛客刷题系列】SHELL24 nginx日志分析2-统计某个时间段的IP
一起加油~
12-08 934
本文首先复习了grep、awk、sed、cut等命令的相关用法；然后，给出了五种题目的解决方案。
找出nginx请求日志中某个url请求总次数排名前十的ip地址
u014586999的博客
11-03 2446
答案如下： # 利用linux自带命令：sort、awk、grep、head、uniq组合得出相应的答案 awk '{print $1}' | grep 'www.xxxx.com' access.log | sort | uniq -c | sort -nr -k1 | head -n 10 命令说明 awk命令说明 AWK 是一种处理文本文件的语言，是一个强大的文本分析工具。之所以叫 AWK 是因为其取了三位创 始人 Alfred Aho，Peter Weinberger, 和 Brian
自动屏蔽频繁访问IP，提升服务器安全：实战脚本解析
陌潇
12-24 1126
本文将为大家介绍如何通过脚本自动屏蔽频繁访问和尝试SSH登录的IP，从而提升服务器的安全防护能力。
【Shell牛客刷题系列】SHELL25 nginx日志分析3-统计访问3次以上的IP
一起加油~
12-09 676
本文首先复习了grep、awk、sed、cut等命令的相关用法；然后，给出了五种题目的解决方案。
nginx日志ip筛选
weixin_49553825的博客
08-09 825
1、ip访问量统计 grep '09/Aug/2021' /var/log/nginx/access.log | awk '{ ip[$1]++ } END{for (i in ip){print ip[i]}}' 2、ip访问量及ip 统计 grep '09/Aug/2021' /var/log/nginx/access.log | awk '{ ip[$1]++ } END{for (i in ip){print ip[i],i}}' 各个状态码的统计 grep '09/Aug/2021' /
Nginx 日志记录过滤某些IP
琪琪的博客
06-12 4797
    有些时候我们可能会有一些特殊需求，比如不希望日志记录某些指定的IP或者我们需要在接受的请求Header中过滤默写IP值，我们知道Nginx中记录真实IP的参数是$remote_addr，记录代理层IP的是$proxy_add_x_forwarded_for    但是$proxy_add_x_forwarded_for记录的是真实IP+代理IP，如果需要隐藏真实IP那么我们就需要在Ngin...
Talend API Tester 接口测试插件 Google Chrome 浏览器的轻量级 API 测试插件
SSS01233210的博客
12-18 242
Talend API Tester 是一款 Chrome 浏览器插件，提供轻量级 RESTful API 测试功能。支持多种 HTTP 方法、Swagger 文档导入、环境变量管理和断言验证，可实现多接口串联测试。通过开发者模式安装，界面简洁易用，适合前端开发者和测试人员快速调试接口，满足日常测试需求。
谷歌安全告警（Chrome 红页）完整处理指南
最新发布
全栈川川
12-21 802
谷歌安全告警完整处理指南
Linux | Bash Shebang 在 Bash 和 Python 脚本中的实践
u013669912的博客
12-18 1020
……
Chrome Lighthouse优化
2401_89241768的博客
12-20 807
优先解决 Core Web Vitals：LCP（资源加载）、CLS（布局稳定）、INP（交互响应）是用户体验的核心，直接影响 Google 搜索排名，需重点优化。工程化落地优化：结合构建工具（Webpack/Vite）实现代码分割、资源压缩、图片转码；通过 SSR/SSG 提升首屏性能和 SEO。全维度覆盖：除性能外，兼顾可访问性、最佳实践、SEO，打造“高性能、高可用、高兼容”的前端产品。持续监控。
基于Chrome140的Quora账号自动化（关键词浏览）——脚本撰写（二）
守城小轩的技术窝棚
12-19 572
本文介绍了基于RPA框架的Quora自动化浏览系统开发方案。该系统采用状态机模式管理页面状态，通过权重化随机动作系统模拟真实用户行为。核心功能包括智能滚动、停留动作模拟、帖子识别与点击交互，以及返回导航等。系统通过QuoraSearchBrowsePage类实现页面控制，支持关键词搜索和状态识别，并配置了动作权重参数调控行为。基于成熟的RPA框架构建，该系统具有模块化设计、稳定性保障和可扩展性等优势，为Quora自动化浏览提供了高效自然的解决方案。
【测试开发】Selenium + Chrome 自动化中常用 ChromeOptions 参数说明（实践总结）
长期关注AI发展路径、技术价值转化与系统性落地。
12-17 1218
Chrome 的默认行为是为“真实用户”设计的，并不适合自动化系统级弹窗、浏览器提示条属于自动化必须在框架层解决的问题ChromeOptions 是测试框架二次开发的重要组成部分不建议在用例层通过 UI 操作去“修补”这些问题一个成熟的自动化测试框架，本质上是在“约束浏览器行为”，而不仅仅是“操作页面”。如果你后面想再写一篇**“Chrome 自动化常见坑位清单（踩坑实录）”，或者把这篇改成框架设计视角**的文章，我也可以继续帮你整理。
Linux如何提取客户端IP和域名，并统计访问次数
03-22
### 解析日志文件并统计客户端IP和域名访问次数 在 Linux 环境下，可以利用 `awk` 和其他命令行工具来解析日志文件中的客户端 IP 地址以及对应的域名，并进一步统计它们的访问频率。以下是实现这一目标的具体方法。...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

MonkeyKing.sun

对你有帮助的话，可以打赏

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值