首页
论坛
Yoo趣儿
›
Geek
›
站长
›
Ai爬虫不讲武德啊,禁止了都爬
Ai爬虫不讲武德啊,禁止了都爬
查看
88
|
回复
4
作者:
缪斯的情人
发布时间:2024-12-24 11:02:29
如题
现在的AI爬虫太多了
服务器一半的资源都被爬虫占了
关键AI还不讲武德
禁止都禁不了
。。。
爬虫
,
武德
相关帖子
•
nginx防火墙UA黑名单 请大家一起完善
•
云计算巨头 Cloudflare 推出 “按爬虫付费” 市场,让网站内容变现更轻松
•
爬虫嗅探站长动态IP蜘蛛池破解版本
•
【站长干货】Nginx配置代码之屏蔽策略
•
这种爬虫怎么禁止掉?
•
这俩是百度爬虫的 IP 吗?
•
恶意爬虫怎么封UA
•
再封几个比较疯狂的爬虫IP段
•
新站不收录,刚主动提交了链接,开放所有爬虫
•
求一个爬虫大佬
我思故我在
2024-12-24 11:03:12
直接禁前两段IP
bay
2024-12-24 11:04:08
你看看国外的网站,都是先验证人工才能访问的,禁爬都是小事
188888888
2024-12-24 11:04:54
12月份,大量不重复的ip爬网站,一个ip一天只爬四五次二十来个页,网站都崩了,怎么办。
小嫩芽
2024-12-24 11:05:30
我也一样,技术直接强制禁止爬取了
返回列表
您需要登录后才可以回帖
登录
|
立即注册
发表回复
浏览过的版块
二手交易
优惠信息
搜索
热门主题
ioio事件是什么鬼?
养老贷又来了,贷贷相传啊
今天要撸2次
好评有礼给的是红包还是优惠卷
现在干啥都太难了,珍惜吧
淘宝现在也好难搞啊
现在的ai能生产图文结合的内容吗
周固固突然发飙了,谁惹他了呢?吃光群众等
怎么吵架了啊
老坛们看过来,周固固同志狂撒金币。折射一
热门板块
问与答
分享发现
分享创造
奇思妙想
分享邀请码
商业推广
优惠信息
Python
PHP
Java
JavaScript
Node.js
Go语言
C++
HTML
公告
网站帮助 - Yoo趣儿
2022-03-27
我们的愿景
2022-03-27
在 Yoo趣儿 投放广告
2022-03-27
Yoo趣儿网站用户应遵守规则
2022-03-24
返回顶部