[石家庄] 高级爬虫岗位

2021-06-08 09:42:55 +08:00
 imxiaoi
高级爬虫工程师
工作职责:
1.负责开发网络爬虫系统以及优化爬虫策略(如抓取调度,多样化抓取,页面解析和结构化抽取,海量数据存储和读取等),进行多平台信息的抓取和分析;
2.负责海量数据的爬取、清洗、解析、入库;
3.负责研究各类反爬机制,解决封账号、封设备、封 IP 、验证码、页面跳转等难点攻克,提升网页抓取的效率和质量;
4.不断提升数据抓取系统的自动化水平,提升爬虫系统的稳定性、可扩展性。
任职资格:
1.熟悉 web,app 抓取原理及技术,熟悉正则表达式,熟悉常用的爬虫网络框架及重要组件;
2.熟悉 linux 开发环境和数据库,熟练使用 Python 和 Java ;
3.精通爬虫和反爬技术,精通 http 底层协议;精通深度抓取、动态网页技术抓取、浏览器模拟抓取、APP 抓取等技术;
4.有很强的学习能力和技术钻研能力,积极主动,思维灵活开放,有良好的沟通能力,善于跨团队合作;
5.良好的逻辑能力,善于把复杂问题梳理清晰,责任安排到人,完成情况监督到位;
6.有大规模爬虫系统实现的经验。
7.有 app 逆向分析经验优先

简历投递: imxiaoi@163.com
1280 次点击
所在节点    酷工作
5 条回复
Yc1992
2021-06-08 10:12:39 +08:00
爬虫写得好,____ 吃到饱
murmur
2021-06-08 10:13:48 +08:00
没看错吧,石家庄还有做爬虫的,这要求可不比一线大厂低哦,精通都那么多了
njshiyanhz
2021-06-08 10:50:56 +08:00
建议把薪资待遇写出来,这样也能提高筛选效率,避免双方浪费时间
locoz
2021-06-08 11:03:33 +08:00
石家庄居然也有招爬虫的了,难得一见
wlzcool
2021-06-09 08:26:08 +08:00
爬虫写得好,____ 吃到饱

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/782061

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX