分享一些恶意爬虫的UA特征(仅供参考,宝塔Nginx防火墙)

查看 29|回复 1
作者:xbz0412   
使用宝塔面板的可以在Nginx防火墙里面的UA黑名单导入(自己整理,仅供参考)
AhrefsBot
AwarioBot
BLEXBot
Barkrowler
CensysInspect
Criteo
DataForSeoBot
DigExt
DnyzBot
DotBot
ExtLinksBot
Ezooms
FlightDeckReports
Go-http-client
Grapeshot
Heritrix
HttpClient
HubSpot
InternetMeasurement
Knowledge AI
Linguee Bot
MJ12bot
MauiBot
MegaIndex
RepoLookoutBot
SemrushBot
SurdotlyBot
Web-Crawler
WellKnownBot
Yellowbrandprotectionbot
ZoominfoBot
axios
fasthttp
github
libcurl
paloaltonetworks
python
seokicks
serpstatbot
webprosbot

宝塔, 防火墙

xbz0412
OP
  


image.png (57.76 KB, 下载次数: 0)
下载附件
保存到相册
半小时前 上传
您需要登录后才可以回帖 登录 | 立即注册

返回顶部