使用宝塔面板的把这个设置一下,可以解决一大部分垃圾爬虫+采集

查看 16|回复 3
作者:吕公子   
宝塔面板
WAF
流量限制
应用网站(全选)
触发条件
路径(/)
访问限制(IP+UA)
每秒访问限制(10次)
时间访问限制(60内超出60次)
响应结果
操作选项(封锁ip)
ps:可以解决一部分垃圾爬虫+采集网站的问题,对于大神无效,因为大神只要能看到的页面内容就都可以爬取采集到!

爬虫, 宝塔

吕公子
OP
  
发给有需要的人!
发给有需要的人!
发给有需要的人!
如果有需要bing蜘蛛池的可以看下!
https://www.1zzc.com/register.php?inv=9QS43MGU
大部分爬了就会放收录!价格便宜!
小白羊   
发给有需要的人!
随风飘散   
感谢分享
您需要登录后才可以回帖 登录 | 立即注册

返回顶部