首页
论坛
Yoo趣儿
›
Geek
›
程序员
›
现在大型的爬虫项目用的是什么框架, scrapy 过时了吗 ...
现在大型的爬虫项目用的是什么框架, scrapy 过时了吗
查看
110
|
回复
3
作者:
pureGirl
发布时间:2025-11-26 00:39:05
面对动态页面和抗反爬稍微复杂点的就不行了吧
简单的网站依然可以用啊
爬虫
,
框架
,
Scrapy
相关帖子
•
Cloudflare 的 5 秒盾/Turnstile 真的无敌吗? CapSolver 这类 api 到底靠不靠谱?
•
蜘蛛池技术解析:网站收录提速的关键工具与运营策略
•
提升外链网站收录技巧 五步直接翻倍实测
•
这半个月的蜘蛛 腾讯搜狗那么多爬虫啊 不够喂吗
•
Windows 系统迁移工具 V6.3[框架]带源码
•
如果你对美洲河乌和狐狸的叫声感兴趣☺️
•
基于 AI 的 Chrome 爬虫辅助插件
•
别再让AI免费白嫖你的内容,网站内容变成AI读取并自动付费的资源!
•
迅速蜘蛛池:网站收录优化的合规辅助工具
•
如果站长们 禁止爬虫爬网站 但是发现网站还是被百度爬 是不是可以告百度
bwnjnOEI
2025-11-26 00:39:39
scrapy 一直就不是单着用的吧?没过时,但是你可以学一下 playwright
donaldturinglee
2025-11-26 00:40:27
试试 DrissionPage ?
sgld
2025-11-26 00:41:24
简单就 scrapy ,复杂就不用框架,直接操作浏览器
例如
camoufox
patchwright
返回列表
您需要登录后才可以回帖
登录
|
立即注册
发表回复
搜索
热门主题
知乎犯了一个战略错误
向生成式AI说“不”?谷歌允许网站自主决定
360收录还行,百度只抓不收是什么鬼?
断掉牛奶后感觉免疫力变强了
你觉得地球需要多少人?
我在 github 的一个项目, 昨天遭到了机器
[原创+挖坑] Bonsai --- 使用本地 Agentic
codex 又刷新了,这次是周中! yyds
deepseek-v4-pro 使用最省钱方式: Reasoni
像4414这种图片地址带img.4414.cn的是怎么
热门板块
问与答
分享发现
分享创造
奇思妙想
分享邀请码
商业推广
优惠信息
Python
PHP
Java
JavaScript
Node.js
Go语言
C++
HTML
公告
网站帮助 - Yoo趣儿
2022-03-27
我们的愿景
2022-03-27
在 Yoo趣儿 投放广告
2022-03-27
Yoo趣儿网站用户应遵守规则
2022-03-24
返回顶部