大家爬拉勾网有遇到滑动验证码吗?

2018-10-22 10:31:39 +08:00
 Ewig
最近我在爬拉钩的
https://www.lagou.com/gongsi/0-2-0-0
这个页面点进去进入公司的页面 爬虫地址信息 有时候报验证码,求指教
headers = {
"User-Agent": "Mozilla/5.0 (hp-tablet; Linux; hpwOS/3.0.2; U; de-DE) AppleWebKit/534.6 (KHTML, like Gecko) wOSBrowser/234.40.1 Safari/534.6 TouchPad/1.0",
"X-Requested-With": "XMLHttpRequest", "Referer": "https://www.lagou.com/gongsi/0-1-0-0"
}
cookies_str = "user_trace_token=20180909010719-4eb82332-59f2-4979-b7ba-4a96de35eb40; _ga=GA1.2.1153938840.1536426437; LGUID=20180909010720-a5755fe0-b389-11e8-8ccd-525400f775ce; index_location_city=%E5%8C%97%E4%........“

res = requests.get(companyLink, headers=header, cookies=get_cookies(cookies_str )

偶尔会弹出这个链接

https://passport.lagou.com/login/login.html?msg=validation&uStatus=2&clientIp=47.105.103.225
1178 次点击
所在节点    Python
0 条回复

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/499712

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX