用 Python 写了个简单的 QQ 群爬虫

2016-07-23 18:48:25 +08:00
 caspartse

批量抓取 QQ 群信息，包括群名称、群号、群人数、群主、群简介等内容，最终生成 CSV 结果文件。

Github

https://github.com/caspartse/QQ-Groups-Spider

在线演示

http://kagent.applinzi.com/qqun

截图示例

21039 次点击
所在节点    分享创造
26 条回复
xz
2016-07-23 19:06:12 +08:00
qq 消息管理器里不是有搜索的吗。。。。
Asimov
2016-07-23 19:06:27 +08:00
抓 webQQ 的嗎？
caspartse
2016-07-23 19:14:29 +08:00
@xz 对的。
本人运营狗一枚，经常用到群资源，所以批量抓下来，备用。
caspartse
2016-07-23 19:15:33 +08:00
@Asimov http://qqun.qq.com/group/index.html?keyword=V2EX 抓这个页面的。
zxy
2016-07-23 20:02:58 +08:00
编码似乎有问题 (windows 10 excel 2016)
est
2016-07-23 21:33:38 +08:00
那个登录的 idea 不错！
GreatMartial
2016-07-23 21:41:33 +08:00
关注一波
caspartse
2016-07-24 02:22:33 +08:00
@zxy CSV 是 UTF-8 编码的。新增了导出 xls 选项，应该没问题了。
caspartse
2016-07-24 02:23:22 +08:00
@est 照搬 QQ 的啦。 QQ 、微信、淘宝的扫码登录原理都差不多。
caspartse
2016-07-24 02:23:39 +08:00
@GreatMartial 谢谢 ～
ViFan
2016-07-24 05:52:14 +08:00
能把群成员导出来就更好了
lslqtz
2016-07-24 08:22:42 +08:00
@ViFan 在群空间里拉一下就有列表了，在那里做匹配应该会比找接口轻松一些。
sheep3
2016-07-24 09:55:02 +08:00
@ViFan 群成员没有权限的吧，毕竟你还没有入群呢
maomaomao001
2016-07-24 09:58:19 +08:00
没有加入的群，也可以抓去吗？
MyFaith
2016-07-24 14:27:24 +08:00
你这码打的。。
prprio
2016-07-24 14:34:33 +08:00
非常感谢！！！
这是个好东西啊。
henryxie2093
2016-07-25 00:19:05 +08:00
好东西
dgkae
2016-07-25 22:02:03 +08:00
马克
caspartse
2016-07-25 23:41:43 +08:00
@ViFan 导出群成员的话，可以抓两个页面： http://qun.qq.com/manage.html http://qun.qzone.qq.com/group ，不过，如楼上所说，只能导出自己加入的群。
ViFan
2016-07-28 08:16:03 +08:00
收藏先

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/294430

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX