220.181.33.131 HTTP/1.1 Mozilla/4.0+(compatible;+MSIE+6.0;+Windows+NT+5.1;+QihooBot+1.0)
一天来访问N次,robots.txt对这帮垃圾根本没有作用啊。[name:Fuck QihooBot]
[From AlphaWu.Blog]
QihooBot频繁访问问题
博主遇到QihooBot一天内多次访问的问题,即使设置了robots.txt也未能阻止。此行为引发博主不满。
220.181.33.131 HTTP/1.1 Mozilla/4.0+(compatible;+MSIE+6.0;+Windows+NT+5.1;+QihooBot+1.0)
一天来访问N次,robots.txt对这帮垃圾根本没有作用啊。[name:Fuck QihooBot]
[From AlphaWu.Blog]转载于:https://www.cnblogs.com/AlphaWu/archive/2006/12/14/592688.html

被折叠的 条评论
为什么被折叠?