本人专科毕业，目前做了三年的爬虫开发，平时偶尔用一些 flask 和 fastApi ，基本的数据库和 redis 也懂一些。 现在感觉爬虫这个方向的前景不太好，一个是灰产，一个是反爬技术迭代的太快了，有点跟不上。 想着转一下方向，目前想的就是数据处理和 PythonWeb ，个人更倾向于 Web ，但是不知道这个方向的就业环境怎么样，以及除了 Django 外还有没有别的重要的知识要学。 在此请教下各位前辈，不胜感激。 爬虫, 方向, 反爬, 灰产
实际上我还比较看好“爬虫”，我指的是安全范畴的。 爬虫说简单也简单，抓个接口用 Python 写个逻辑调用一下，很大一部分爬虫就止步于此了。如果进停留在这个层面，那确实没什么意思。 但现如今大部分爬虫业务没有这么容易的了，加密混淆已经是家常便饭，上点规模的业务都有各种反爬手段，爬虫搞到最后都是逆向工程和网络安全，这已经跟 Python 没关系了。 这门功夫讲究深度，跟其他计算机工种不太一样，基本没有年龄焦虑，时间越久阅历越丰富越有价值，有点老中医的意思，如果能在这行深入可以说越老越吃香。 至于说灰色问题，其实爬取和反爬是一体两面，攻防是一套体系，只不过是甲方乙方的区别。
