首页
论坛
Yoo趣儿
›
Geek
›
站长
›
Ai爬虫不讲武德啊,禁止了都爬
Ai爬虫不讲武德啊,禁止了都爬
查看
95
|
回复
4
作者:
缪斯的情人
发布时间:2024-12-24 11:02:29
如题
现在的AI爬虫太多了
服务器一半的资源都被爬虫占了
关键AI还不讲武德
禁止都禁不了
。。。
爬虫
,
武德
相关帖子
•
nginx防火墙UA黑名单 请大家一起完善
•
云计算巨头 Cloudflare 推出 “按爬虫付费” 市场,让网站内容变现更轻松
•
爬虫嗅探站长动态IP蜘蛛池破解版本
•
【站长干货】Nginx配置代码之屏蔽策略
•
这俩是百度爬虫的 IP 吗?
•
新站不收录,刚主动提交了链接,开放所有爬虫
•
求一个爬虫大佬
•
再封几个比较疯狂的爬虫IP段
•
恶意爬虫怎么封UA
•
这种爬虫怎么禁止掉?
我思故我在
2024-12-24 11:03:12
直接禁前两段IP
bay
2024-12-24 11:04:08
你看看国外的网站,都是先验证人工才能访问的,禁爬都是小事
188888888
2024-12-24 11:04:54
12月份,大量不重复的ip爬网站,一个ip一天只爬四五次二十来个页,网站都崩了,怎么办。
小嫩芽
2024-12-24 11:05:30
我也一样,技术直接强制禁止爬取了
返回列表
您需要登录后才可以回帖
登录
|
立即注册
发表回复
浏览过的版块
问与答
搜索
热门主题
ioio事件是什么鬼?
养老贷又来了,贷贷相传啊
今天要撸2次
好评有礼给的是红包还是优惠卷
现在干啥都太难了,珍惜吧
淘宝现在也好难搞啊
现在的ai能生产图文结合的内容吗
周固固突然发飙了,谁惹他了呢?吃光群众等
怎么吵架了啊
老坛们看过来,周固固同志狂撒金币。折射一
热门板块
问与答
分享发现
分享创造
奇思妙想
分享邀请码
商业推广
优惠信息
Python
PHP
Java
JavaScript
Node.js
Go语言
C++
HTML
公告
网站帮助 - Yoo趣儿
2022-03-27
我们的愿景
2022-03-27
在 Yoo趣儿 投放广告
2022-03-27
Yoo趣儿网站用户应遵守规则
2022-03-24
返回顶部