爬了 3534 个 Telegram 群/频道/机器人,却发现只有 6%的优质账号(开源所有代码和数据)

329 天前
 BeiChuanAlex

背景:使用 Telegram 的时候,为了能找到一些有意思的、好玩的、纯粹资源分享的群和频道,总是很困难,尽管有些网站推荐了不少的群 /频道 /机器人,但是往往其中很多都已经过期了,甚至很多都注销了,也有一些变成了涩涩群、机场群,一个一个筛选起来很麻烦,所以决定用 Python 爬虫来解决这一问题。

过程:用时一天时间,收集整理了很多网站数据,建立 URL 集合,使用 Scrapy 总共从十几个地址,爬了总计 3534 条数据。所有的数据及 SQL 已经放到文件 telegram_info.sql 中,爬虫代码放在了 telegram-groups-spider 文件夹里面。有需要的同学可以自行取用。

结果:从 3534 个中,按照订阅数 /会员数排序,并排除了其他语言的账号只选择做中文内容的账号,也排除了包含:机场、Sex 、Gamble 、Politics 等内容,手工精选了 200 多个放在了下面的表格里,感兴趣的同学可以根据自己喜好选择加入。

感悟:从数据来看,其中有很多是早已注销的群 /频道 /机器人,也有不是是灰黑产业的账号或者挂羊头卖狗肉的账号。精选账号大概只占到总数的 6% ,这个比例还是挺惊人的,中文的优质内容在 Telegram 还是相对匮乏,Telegram 在中文内容上更像是一个灰黑产的温床。虽然精选了 200 多个账号,但其中也有不少是羊毛,搬运,资源,影视,破解等内容,这些内容也是处于擦边球地带,真正优质的内容还会更少,当然这也限制与样本本身的质量,也许有不少好的账号还未被发现,也欢迎知道优质账号的同学能在 issue 留下它的链接。

GitHub 地址https://github.com/alexbei/telegram-groups

16114 次点击
所在节点    程序员
67 条回复
cooper2020
329 天前
好玩的尝试。顺便提一句,__pycache__目录不必同步 git
BeiChuanAlex
329 天前
@cooper2020 谢谢提醒
ysc666
329 天前
卧槽 真好!!!
elechi
329 天前
谢谢 OP ,回家慢慢看
encro
329 天前
自从注册了 tg 账号,每天收到小姐姐相关短信。
simon633
329 天前
我是 APPDO 数字生活指南的频道主,非常感谢楼主的推荐~
modao3
329 天前
ios 鸡神-专注分享破解
这个频道主被盗号的运营着了,建议删掉.发的文件可能不安全
BeiChuanAlex
329 天前
@modao3 好的,感谢反馈
delete26
329 天前
现在公开的群和频道大多都是黑产和色情了,早些年人少的时候都没有这些垃圾广告群,自从公开的群被大量机器人入侵用来自动发广告之后,很多群都变成私人群了
ivstranger
329 天前
仔细再筛选,估计 6%都不到(很荣幸上榜)
modao3
329 天前
再推一下我另外一个
@recommend3
BeiChuanAlex
329 天前
@delete26 用户越多,管理的成本会直线上升,运营一个好的账号本身也是需要不小的成本,私人群确实能更方便的管理。
zhuxc
329 天前
start
BRmeng
329 天前
能不能偷偷扒点糟粕,我想批判一下😂
BeiChuanAlex
329 天前
@BRmeng 在项目的 telegram_info.sql 文件中可以自己看
xpl8435
329 天前
分享一个 TCL 家电内购群组,有需要可加: https://t.me/tcl_jiadian
Tyrant1984
329 天前
真是好东西啊,感谢楼主~~
现在 TG 天天只能看看梯子为什么又崩了,感觉很浪费,现在可以好好用一下了
hoor
329 天前
TG 里面有讨论 xray ,sinbox 协议等很多知识,还有一些面板 jd 等。。。还有机器人可以玩,
signal 却没有多少人用
BeiChuanAlex
329 天前
@hoor 科学上网相关内容的账号没有放到表格里,相关的账号里太多买卖机场的内容了,很难筛选。
zong400
329 天前
偷偷看看有什么优质的

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/951729

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX