萌新发问:那些 B 站小红书的大数据分析工具,数据是怎么采集的?

查看 19|回复 0
作者:oukichi   
网站截图.png ,懒得点连接的朋友直接看截图就好
类似于这种网站,明显是把所有数据都爬了下来
https://xz.newrank.cn/
如果只是普通的爬虫的话,上千万个页面岂不是要爬到死?
还是说他们是 N 台机器一起爬?
我从没碰过爬虫,所以想在这里问一问,知道 V 站大神多,谢谢各位啦
您需要登录后才可以回帖 登录 | 立即注册

返回顶部