请教如何爬取油管的评论？

2018-12-13 20:51:14 +08:00
 sjmcefc2

想爬取油管的评论，有没有现成的工具？

5960 次点击
所在节点    Python
15 条回复
iappled
2018-12-13 20:51:58 +08:00
没有 api 吗
sjmcefc2
2018-12-13 20:59:05 +08:00
不懂哈，第一次弄这个
crab
2018-12-13 21:01:12 +08:00
这个很简单，抓包下就能看到请求链接了。
ioven
2018-12-13 21:03:07 +08:00
https://developers.google.com/youtube/v3/docs/comments/list

api 接口，很容易搞，就是限制较多
Trim21
2018-12-13 21:03:17 +08:00
YouTube 有 api 的
westoy
2018-12-13 21:09:06 +08:00
就算搞定采集程序， 没采集几页就遭遇 reCAPTCHA 了， 挂代理池大部分撞 reCAPTCHA......
sjmcefc2
2018-12-13 21:15:30 +08:00
@westoy 那如何实现大量采集呢
ech0x
2018-12-13 21:25:07 +08:00
@sjmcefc2 大量采集，基本不可能，装 reCAPTCHA 还算好的，如果给你返回假数据更难搞。
sjmcefc2
2018-12-13 21:45:19 +08:00
@ech0x 感觉很多评论信息量很大啊
onedayoneapple
2018-12-13 22:14:23 +08:00
@sjmcefc2 比如说？采集评论有啥用
dfadf55
2018-12-13 22:48:26 +08:00
https://cdn.v2ex.com/avatar/37b9/a746/150787_normal.png?m=1524095699
aa514758835
2018-12-14 09:22:31 +08:00
@dfadf55 妈耶，这个评论图片还需要打开才能看
no1xsyzy
2018-12-14 10:24:39 +08:00
@aa514758835 妈耶，这个图片分明是 #8 的头像……大概是 @dfadf55 把图片拖进评论框了……
bighead22
2018-12-16 20:00:17 +08:00
selenium
sjmcefc2
2018-12-20 22:21:24 +08:00
@bighead22 感谢。

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/517350

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX