py采集百度被屏蔽ip有什么解决办法吗

查看 107|回复 6
作者:爆xi   
MingTian   
代理IP啊
爱说说   
到工信部投述啊。。
110   
写个脚本进路由器切换IP
一哥   
代理IP,百度都是小事,头条的防采集相对更难一些
hnmana   
有一个方法,哈哈
CNCCN   
解决办法有:
1. 使用代理IP地址。使用代理IP地址可以绕过百度的屏蔽,让你的python爬虫采集能够顺利的完成任务。
2. 配置User Agent。User Agent指的是你的爬虫请求在网络上传播的一段信息,说明你的爬虫是什么软件,它也可以帮助你避开百度的反爬虫屏蔽。
3. 百度的反爬虫还会根据你从网页上下载数据的速度来判断是否是机器人进行爬取,所以你可以设置爬取速度过慢以绕过百度的屏蔽。
您需要登录后才可以回帖 登录 | 立即注册

返回顶部