[北京][中关村][爱奇艺] 招聘云爬虫专家(负责人)

2017-02-08 18:40:20 +08:00
 bitlanghen
爱奇艺福利: 14 薪、 12 天年假,超一流的行政团队,日常活动多多
团队介绍:我们是一个信仰技术的团队,在这里,我们用技术说话,相信技术改变生活。目前团队负责全网视频、全网娱乐、资讯等新闻内容的抓取、分析和处理,是视频行业最成功的爬虫之一,目前支撑的数据量是 YouTube 的一半左右,大大超过中国同类网站,我们热衷于吸纳流行的技术如 docker 、 grails 、 hbase ,通过技术革命提高生产力。

薪资: 35k+,能力优秀者不受限

工作职责:
1. 负责爱奇艺云爬虫设计、代码审查以及项目难点攻关
2. 负责云爬虫智能化算法设计和开发
3. 破解主流网站和 app 的反爬机制
职位要求:
1. 熟练掌握 JAVA 开发,熟悉掌握分布式应用开发原理,熟练掌握多线程开发,熟练掌握设计模式
2. 掌握 jvm 调优,有线上调优经验
3. 良好的计算机素养
4. 掌握常用的数据库如 redis 、 hbase 、 mongodb 等
5. 熟悉常用的 mq
6. 熟练掌握 http 协议,以及 NIO , apache http client
7. 了解网站开发、 HTML 、 css 、 js 以及 ajax ,都熟悉加分
8. 有反爬机制研发经验加分,有破解主流网站抓取接口经验加分
9. 以上框架深入原理加分

爱好技术的你,简历准备好了么?发送到 shuaiweiliang#_#qiyi.com
#_#替换成 @
1936 次点击
所在节点    酷工作
4 条回复
macroideal
2017-02-08 19:42:05 +08:00
爱奇艺需要爬什么
golmic
2017-02-08 20:44:20 +08:00
python 爬虫工程师可以吗?
onlyhot
2017-02-08 20:57:38 +08:00
@macroideal 视频搜索都是全网搜索
sunchen
2017-02-08 23:41:51 +08:00
还得精通逆向

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/339078

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX