分享个可疑的爬虫,useragent是百度蜘蛛

查看 20|回复 0
作者:4414zz   
最近发现访客记录中有个可疑的爬虫 IP 61.146.178.35 中国 广东 梅州 丰顺 中国电信。useragent是百度蜘蛛Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)
rDNS查询为空。有个邻居是电信家宽:189.135.67.125.broad.gz.sc.dynamic.163data.com.cn.
这样基本判断为假冒百度蜘蛛。
再次查看解析记录。原来是爱站的(m.aizhan.com),应该是伪装成百度爬取首页seo内容用的。如果使用爱站,那么可以不用管。这个IP本身无害,也不会爬取采集其它内容。不用的话就屏蔽了把。
附爱站IP地址列表:
61.146.178.30
61.146.178.31
61.146.178.32
61.146.178.33
61.146.178.34
61.146.178.35
61.146.178.36
61.146.178.37
61.146.178.38

爬虫, 蜘蛛

您需要登录后才可以回帖 登录 | 立即注册

返回顶部