RES标准忽略大小写
User-agent--用户代理
User-agent:* 指定所有的robot
Disallow--拒绝访问声明
Disallow: 所有部分都向搜索引擎开放
DIsallow:/禁止访问所有
#--注释
robots.txt文件编写按照unix系统下的默认编码
扫一扫
评论
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
查看更多评论
添加红包
