请教各位大大,有意向往爬虫工程师发展,需要具备哪些基本素质可找到初级工程师的工作?

2018-03-08 21:31:15 +08:00
 Jaymiii

我是一个非科班转行人员,目前在学习 python 爬虫,很迷茫要学到什么样的程度才能够得到一个入行工作的机会。毕竟没有经验,非科班,需要更多的努力和知识储备,否则很难获得机会。想要得到大家的指导,谢谢了!

3507 次点击
所在节点    Python
8 条回复
noe132
2018-03-09 06:54:23 +08:00
爬虫可复杂了。。。
爬取返爬速度限制多线程分布式异常处理 api 分析
爬完了还会叫你数据清洗数据挖掘统计报表。。。。
我搞过一阵子头都晕了
qs
2018-03-09 09:17:30 +08:00
fiddle, charles, chrome 这些抓包工具分析请求, 然后模拟请求去抓取数据, html 等解析提取数据, 然后保存到文件或数据库。

至于分布式 多线程 协程 调度控制 统计报表这些都是后期可以慢慢学习的内容。
pc10201
2018-03-09 18:41:07 +08:00
别做爬虫,职位少,上升空间有限~
Jaymiii
2018-03-10 13:31:03 +08:00
@pc10201 您有什么更好的方向推荐吗?感觉目前 python 来说做 web 和爬虫是比较易于学习的,往数据分析这方面的对于非科班的来说感觉有点迷茫。
Ehco1996
2018-03-10 20:37:04 +08:00
我也是文科自学编程的
一开始也是通过学爬虫入门

这里有我整理的学习路径和资料
有需要可以看一下
http://zhuanlan.zhihu.com/Ehco-python

但是我现在主要做后端方面的工作啦

加油吧
Jaymiii
2018-03-11 19:10:58 +08:00
@Ehco1996 谢谢你的帮助!我也会努力向你看齐的!
hotea
2018-03-11 21:50:52 +08:00
前几年刚找工作时,也是找的爬虫工作,知道创宇这道爬虫题出的很不错,你可以试着自己实现一下。http://blog.knownsec.com/2012/02/knownsec-recruitment/
Jaymiii
2018-03-12 11:59:14 +08:00
@hotea 谢谢你的分享,我去试试实现一下!

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/436300

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX