最近想爬天眼查 网站

2019-01-20 21:41:31 +08:00
 Ewig

这个网站一个账号查询的次数是不是有限制啊？ 限制多少次？

是不是需要买 vip 账号爬？

15356 次点击
所在节点    Python
41 条回复
Ewig
2019-01-21 09:23:43 +08:00
@tomxin7 主要看 cookie 爬有没有账号爬取次数
passerbytiny
2019-01-21 09:27:38 +08:00
总感觉爬数据这事，大公司做是废物利用地商业行为，个人爬就是抢数据地流氓行为：我脑袋到底哪里出问题了。
Ewig
2019-01-21 09:33:15 +08:00
@supervipcard 关键很多说买 vip 爬不知道为啥
supervipcard
2019-01-21 10:08:18 +08:00
@Ewig 可能是因为单次搜索的页数限制吧
wisej
2019-01-21 11:11:11 +08:00
@Ewig 有的信息不是没 vip 不显示么
guanhui07
2019-01-21 11:19:49 +08:00
他爬别人，你爬他，别人爬你
kevinle
2019-01-21 11:21:53 +08:00
脱裤更省事
blueskea
2019-01-21 12:10:11 +08:00
爬过企查查，字体被替换过了，验证码搞不定，半自动爬的。
dezhou9
2019-01-21 13:50:16 +08:00
1.8 亿条你爬他干嘛
Ewig
2019-01-21 15:36:12 +08:00
@wisej 我只爬工商数据，vip 能看到那些不显示的数据？能说一下嘛？
Ewig
2019-01-21 15:36:48 +08:00
@supervipcard 比如我每次搜百度 腾讯 这种公司能搜多少次，普通的账号
wisej
2019-01-21 16:36:17 +08:00
@Ewig sry 天眼查 vip 与非 vip 在信息展示完整度没有差别 只是展示量级有差别

我之前用的另一个非 vip 信息展示才是不完整的
uuair
2019-01-21 17:03:30 +08:00
有这功夫，你不如应聘进去，内网直接往外倒腾。
loser
2019-01-21 17:18:03 +08:00
牛逼，支持爬他！！！
IllllI
2019-01-21 17:24:10 +08:00
@blueskea 谁能搞定验证码
love9918
2019-01-21 19:10:33 +08:00
有想法就干
hgjhgjgjhgjg
2019-01-21 19:28:12 +08:00
https://www.lagou.com/jobs/1570819.html

反爬虫工程师

职位描述

参与公司网站数据反爬虫策略的制定和优化。

负责反爬虫功能模块的代码实现及测试工作。

监控网站异常访问并及时调整相关策略。
andylsr
2019-01-21 19:49:03 +08:00
天眼查数据随便抓。。。
zhangsen1992
2019-01-21 20:14:42 +08:00
vip ip 白名单 随便调用接口
shadiao
2019-01-21 20:47:35 +08:00
@uuair 优秀啊

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/528898

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX