我把 AI 用到了爬虫上,做了一款工具

查看 520|回复 98
guomengtao   
即刻当年做过一个差不多的 idea ,对微博,闲鱼这类 app 做监控,后来没做下去
xujiahai   
额。。我式了两个网址,一个是 V2EX ,另一个是 zju 的官网,都提示:web-dumper 服务调用失败:请求失败: 请求失败: Post "http://172.22.213.215:8081/api/fetch": context deadline exceeded (Client.Timeout exceeded while awaiting headers)
keller   
@doudouisamomo 感谢体验和反馈,V2EX 是因为 gfw 的原因,我们正在加白名单梯子(人工添加,防止滥用)。
zju 是因为目前很多政府类网站都使用了 WAF ,默认拦截了机房 IP ,我们正在加住宅 IP 代理。
aero99   
样式没调好

xiaoleis   
不错, 以前我也有类似想法
不过想落地确实不容易的, 很耗费资源
有个问题, 就是国内这种服务到底是否合规是个问题, 尤其是想收费情况下
dacapoday   
新注册的可以填下邀请码,BLKMOYKW ,各多 50 积分,感谢
doudouisamomo   
@iorilu 合理使用,可以合规的
cheese   
这个 ai 工具打开以后,要一直在前台开着吗?会隐藏到后台吗?
PbCopy111   
@bingkunzhao 你在网站上创建好任务后,可以关闭浏览器。你如果是在浏览器插件上创建任务,需要保持浏览器开启(可以缩小到后台)
jerfoxu   
提个建议,能否支持导入 cookie ,或者能在您的那个创建任务的网页预览界面进行登录之类的身份验证操作?
您需要登录后才可以回帖 登录 | 立即注册

返回顶部