Google也不遵守robots协议了。。

查看 28|回复 1
作者:缪斯的情人   
如题
明明在robots里面禁止收录爬取
但是Google后台竟然直接索引了
。。。
也是无语了
。。

也不, 协议

slickly   
都是草台班子
您需要登录后才可以回帖 登录 | 立即注册

返回顶部