爬虫爬 twitter 和 github
设定关键词,搜索特定博主 /作者
大家觉得现实不?
1
SunsetShimmer 2022-11-25 10:25:16 +08:00
好像都有 API ,技术可行。
需求可能不大。 |
2
limiter 2022-11-25 10:44:33 +08:00
爬 github 吃力不讨好,会用的都能自己访问,不会用的爬了也不会看,至于 twitter ,你爬了给谁用?不怕进局子?
|
3
zhoudafa6780022 OP @SunsetShimmer 有 API 吗?哪里搜索?不是需要需要很多账号才能完成的吗?
|
4
zhoudafa6780022 OP @limiter 要快速搜索,人工无法实现。。有脚本或软件,就会看!
|
5
SunsetShimmer 2022-11-25 10:50:02 +08:00
|
6
SunsetShimmer 2022-11-25 10:50:51 +08:00
@zhoudafa6780022 当然是有 API 使用限制的,大量调用恐怕不行。
|
7
lzgshsj 2022-11-25 10:53:07 +08:00
|
8
ochatokori 2022-11-25 10:58:42 +08:00 via Android
github 直接用官方提供 api
推特官方 api 需要申请开发者,不申请开发者用普通用户网页 api 容易账号被封。 以前试过用游客账户网页 api 爬,除了一部分信息爬不到之外(推文和回复都可以)效果还行。 |
9
zhoudafa6780022 OP @SunsetShimmer 就是要收集 twitter 和 github 博主主页上留有 tg 联系方式的一类。使用 API ,是否可行?
|
10
zhoudafa6780022 OP @lzgshsj 想要收集 twitter 和 github 博主主页上 关键字+留有 tg 联系方式的一类
|
11
v2defy 2022-11-25 13:22:14 +08:00 1
想那么多干嘛,api 都有了,想做就去实现啊
|
12
youyelan9527 2022-11-25 15:55:11 +08:00
你这明目张胆的的说出来要爬人家的联系方式🙄
|
13
haohh 2022-11-25 18:13:05 +08:00
twint 了解下
|
14
SunsetShimmer 2022-11-25 20:09:59 +08:00
@zhoudafa6780022 不建议做,最好别做。
|
15
janus77 2022-11-26 12:56:10 +08:00
好小子,我收到的不知名猎头邮件就是你们发的吧
|
16
zhoudafa6780022 OP @SunsetShimmer 为什么? 怕无法实现大量调用是吗?
|
17
SunsetShimmer 2022-11-28 23:02:39 +08:00 via Android
@zhoudafa6780022 API 有限制是一方面,另一方面是这个用途(获取联系方式)有点不太正当。
|
18
zhoudafa6780022 OP @SunsetShimmer 好的 谢谢
|