robots.txt疑惑

这几天打开Google的网站管理员工具,偶然发现我robots.txt被google访问后返回状态是200(成功),可是我记得自己的robots.txt已经被扔进垃圾箱里的。于是试着在浏览器里直接访问http://isdox.com/robots.txt,看到一行文字:

User-agent: * Disallow:

果然是200。再接着,ftp连上去,却发现根目录下没有这个文件!LIST -al,仔细找了找,仍然没有。这下子就奇怪了!

询问了盘古的客服,在他那边也找不到我的robots.txt。这个时候我想到了wp2.1.2里新增的“保密”设置选项,而我设置的是允许所有的搜索引擎。难道是wordpress在.htaccess里有写什么内容么??这时候盘盘说他明白是怎么回事了,果然是新版wp自带的功能,如果把根目录下的index.php改名,就会发现robots.txt不见了,哈哈。robots.txt是wp的wp-includes目录下的rewrite.php文件重写出来的。

Google, rewrite, robots.txt
isdox?i=3dfe3cfbb11c29c12964d700dec632f2 isdox?i=99b8efe91238863ea4b8b53f7d76ee49
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值