04-nginx日志管理

最新推荐文章于 2021-07-27 19:50:58 发布

原创最新推荐文章于 2021-07-27 19:50:58 发布 · 235 阅读

0 ·

CC 4.0 BY-SA版权

nginx 专栏收录该内容

15 篇文章

订阅专栏

[root@tiejiang nginx]# vim /usr/local/nginx/conf/nginx.conf
#设定日志格式
log_format combined_realip '$remote_addr $http_x_forwarded_for [$time_local]'
' $host "$request_uri" $status'
' "$http_referer" "$http_user_agent"';
注释:远程IP- 远程用户/用户时间请求方法(如GET/POST) 请求体body长度 referer来源信息 http-user-agent用户代理/蜘蛛 ,被转发的请求的原始IP 192.168.0.102 - - [13/May/2018:20:54:33 +0800] "GET /favicon.ico HTTP/1.1" 404 571 "-" "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/57.0.2987.98 Safari/537.36 LBBROWSER"

给网站设置日志格式

[root@tiejiang nginx]# vim /usr/local/nginx/conf/nginx.conf server { listen 80; server_name z.com; location / { root z.com; index index.html; } access_log logs/z.com.access.logcombined_realip; #设置z.com的log名称及日志格式 } [root@tiejiang nginx]# ./sbin/nginx -s reload [root@tiejiang nginx]# ls logs/ #/usr/local/nginx/logs/目录下就有一个z.com.access.log的文件 access.log access.log.20180513 error.log nginx.pid z.com.access.log [root@tiejiang nginx]# tail -1 logs/z.com.access.log 192.168.0.102 - - [13/May/2018:23:39:53 +0800] "GET / HTTP/1.1" 304 0 "-" "Mozilla/5.0 (Windows NT 6.1; WOW64; Trident/7.0; rv:11.0) like Gecko" "-" 远程IP- 远程用户/用户时间请求方法(如GET/POST) 请求体body长度 referer来源信息 http-user-agent用户代理/蜘蛛 ,被转发的请求的原始IP

#access_log logs/host.access.log main; # 默认 /usr/local/nginx/logs/host.access.log

remote_addr是远程地址。你去面试的时候经常会碰到一些问题：启动pid去获取来访者的远程ip信息，$remote_user [$time_local]远程的用户访问的时间,当然我访问的那一瞬间我的http头信息未必带了这个信息过去，没带过去那就没有空着。
请求分GET和POST，请求都是用GET来请求。remote_user远程用户，并没有用http头交互说我是谁的那个形式，就是405还有权限验证那个玩意。就是我remote_user为空，但是time_local记录下来了。你当时几点几分来访问，用什么样的请求头来访问的，或者说是请求形式来请求的，用的是GET方式来请求的，而且用的是HTTP1.1这个协议。Status是请求的状态，学过HTTP协议知道有：200(OK),304(Not Modified),404(Not Found),403(Forbidden)。刚才几次访问的状态是404,304和200全了。body_bytes_sent就是我给你的几个主体发送几个字节。有570个字节，168个字节，32个字节，0个字节和46个字节。http_referer,就是你上一个/上一次页面来自于哪里，上一个页面来自于哪里。为什么有时候我们登录别人的网站，尤其是统计类的网站，统计说，咱们这个会员、咱们这个用户登录都来自于哪里。它这个统计怎么知道咱们这个会员是从百度来的呢，是从360来的呢，是从搜狗来的呢，它是如何知道的呢？
这是因为你在百度上一搜，比如搜php培训，你一点某个词条，你当前停留在哪里？你当前停留在百度，你一点带了一个referer信息过去，所以咱们这个统计就知道你来自于哪里。百度，你从百度搜索过来的。以后咱们做文件的防盗链和图片的防盗链也是要靠referer信息。user_agent，用户代理。你去请求的时候，浏览器帮我们发的请求，我们想读人家的网页，但是我们无法跑人家服务器上读人家的字节，0101这样去读取。我们得靠浏览器去帮忙。所以这个浏览器被称之为用户代理。一分析知道了，你是Mozilla/5.0 (Windows NT 6.1; WOW64)，火狐浏览器，win 7机器，有时候见到签名那很炫，你来自于哪里哪里，什么欢迎你北京联通的用户。你使用的是火狐，就是从你referer头信息读取出来的。
x_forwarded_for。网易新闻的评论，来自朝鲜的网友说：，这个网友不是真的来自朝鲜(实际上朝鲜能不能上网还是个问题)。
163会拿最后一次的x-forwarded-for来做判断，一判断说哦，来自于朝鲜的用户。
以后你要想伪装自己的IP，你也可以用x_forwarded_for来伪装一下。但是有些机器不看你x_forwarded_for，就直接看你的remote_addr。这个时候主动权在服务器端，看它以哪一个为准了。
所以这就是日志的main格式。你要是看这个格式不爽，可以把main格式的变量自由组合，去掉几个也行。main格式只是一种拿着几个变量组合的一种形式而已。
刚才user_agent只说了一半，有时候一读你的日志发现不对劲，既不是火狐，也不是IE，也不是chrome，这个有可能是蜘蛛。蜘蛛爬到你的服务器上去了，你需要买一些bus消毒液和一些除蟑螂的药等等，把你的服务器彻底清理一下。网络上有一种机器叫做蜘蛛，其实就是搜索引擎的服务器。它们的服务器一天到晚没事就沿着网络上的链接到处走到处爬，把你的信息都给爬取出来。有一种协议叫做蜘蛛协议，有些人老是过来采集我的信息，你到底是谁，我把你封了。所以这个时候百度说：别封，我是百度蜘蛛。所以User-agent叫Baiduspider，谷歌叫Googlebot,MSN叫MSNBot。Disallow是不允许扫的地址。www.baidu.com/robots.txt
/shifen/原来是百度竞价，怪不得不允许人家扫。
这个蜘蛛是要满足一定的协议的，这个协议不是强制的，只能靠道德去规范。淘宝三年前把百度的蜘蛛给屏蔽了，你在百度上搜淘宝它的链接信息就比较少。这个时候就不能去索引它的信息了。技术上耍赖肯定行，人家只是说不让你搜，你要硬搜别人也很难挡住，除非屏蔽你的IP地址。因为目前蜘蛛只是一个协议，所以有时候在自己的日志上看到Baiduspider，你就知道百度蜘蛛来光顾你了，说明你的网站质量还不错。
每个网站它访问的日志不一样啊，分开放是天经地义的，但是有的WEB服务器不支持。比如像lighttp它就不支持。

到底如何配置访问日志呢？

刚才我也没配置任何的访问日志，为神马logs下面还会有访问access.log。很简单，因为你系统一启动它默认就使的是main格式，而且是放在logs/access.log下面。那你要是自己配置了它就有自己独特的日志了。说了那么多其实一句话搞定，之前的都是铺垫。
可以查看到网站z.com的访问日志了，都是来自于IP:192.168.118.1的访问。