爬虫工程师的前途如何？

[annoygaga]

小弟不才，这次拿了某大厂的爬虫工程师岗位（第一份工作）

一开始不知道是爬虫工程师，因为投递的是后台开发岗位

现在想问问

• 第一份工作做爬虫有提升嘛？

• 第二份工作能不能换回后台开发或者架构方面的东西（兴趣所在），该怎么做？

• 爬虫工程师难点在哪？

• 爬虫工程师有什么前景呢？

[annoygaga]

没人么。。。

[stamaimer]

哪个大厂

[Shazoo]

如果人家目前框架都现成，只是找人做做维护+反反爬+新规则，那潜力有限。

不过还是看自己的学习能力。

[UIXX]

单爬虫没有什么技术含量，难点也不多，天花板很容易看见。
做爬虫的人一定要往数据分析 /挖掘--深度学习上面靠才有往前的空间。
我这边现在没有这个岗位，爬什么东西都是某个工程师顺带做做的，真正有价值的工作是如何利用爬下来的数据。

[andyliwrldk]

表示用 python 和 nodejs 搞过爬虫

[fghjghf]

随着行业发展，开放的数据数据越来越开放，封闭的数据你根本爬不了。而且爬了也没用，关键要数据清洗分析，这个才是大头这类岗位不多，市场不看好

[DOUWH]

兄弟转行吧，爬虫凉透了，这一周爬虫工程师被抓起来好多了，出力不讨好，还有法律风险