首页
论坛
Yoo趣儿
›
Geek
›
程序员
›
家庭宽带对爬虫是不是有限制的?
家庭宽带对爬虫是不是有限制的?
查看
108
|
回复
1
作者:
hokman
发布时间:2023-9-3 18:01:06
开始时也只有三四 M ,爬着爬着只有几百 k 了。对单个站的访问频率设置是每 500ms 一次访问,不算频率高了吧?同时爬取 1500 个站。。
频率
,
访问
,
爬
,
单个
相关帖子
•
豆包海外版 在中国大陆的各位能访问到吗?
•
三星的 Spen 是不是伪需求
•
cnb.cool 是 g 了么?
•
闲鱼内网页链接为什么有些可以直接访问,有些不行?
•
出一根笔记本内存16g ddr4 2666频率 8
•
有没有办法让局域网里的某个设备,不能访问局域网里其它任何设备
•
你们的抓取频率最近有没有降?我的站都降一半以上
•
发现我所有的站 抓取频率都降到几千而已了
•
小红书更新的话,一般什么频率不会被封,或者限流?
•
这个防cc的频率 你们一般都是怎么设置的
baobao1270
2023-9-3 18:01:50
你同一个 IP 一直访问,肯定有限制啊
返回列表
您需要登录后才可以回帖
登录
|
立即注册
发表回复
浏览过的版块
服务器
站长
Windows
分享创造
优惠信息
问与答
分享发现
QQ 微信
搜索
热门主题
Google DeepMind 的 Project Genie 来了:
谷歌的 aistudio 和 vertex 似乎遇到了算力
iPhone 通话录音无法导出(26.1)
最近金价狂涨 为什么solana没有狂涨 我有80
想买一台备用 Android 手机(主要装微信和
特斯拉 Model Y 的语音助手真的不能控制窗
【5ssr Cloud】多地区共享IPv4 NAT小鸡|LX
现在确实不愿意用百度了,还是用bing的多
马上过年了,放假了,网站是不是更没流量了
308 收一个 365 公益全局
热门板块
问与答
分享发现
分享创造
奇思妙想
分享邀请码
商业推广
优惠信息
Python
PHP
Java
JavaScript
Node.js
Go语言
C++
HTML
公告
网站帮助 - Yoo趣儿
2022-03-27
我们的愿景
2022-03-27
在 Yoo趣儿 投放广告
2022-03-27
Yoo趣儿网站用户应遵守规则
2022-03-24
返回顶部