用 weixin.sogou.com 抓取微信公众号的文章,已经加了代理,还是很快就封掉。请问有好的办法吗?

2016-11-25 15:55:09 +08:00
 chendajun
3520 次点击
所在节点    Python
9 条回复
Biny
2016-11-25 16:06:57 +08:00
代理池大一点,采集的程序分布在多台机器上面跑,采集的频率降低,慢慢采
iannil
2016-11-25 16:10:52 +08:00
搜狗抓公众号信息,文章去微信抓。我抓过上亿条,没有问题的。
chendajun
2016-11-25 16:58:12 +08:00
@iannil “搜狗抓公众号信息”指的是在搜狗上抓公众号的功能介绍,微信认证这些信息吗? “文章去微信抓”具体能说说怎么抓吗?谢了!
stone1342006
2016-11-25 17:17:19 +08:00
同在搜狗抓微信公众号文章, 加代理没有被封 。 可能如同 @Biny 说的,代理的 ip 多一点就没可以了
chendajun
2016-11-25 17:20:07 +08:00
@Biny
@stone1342006
代理不稳定啊,付费的也是经常掉。
zhaoyue199508
2016-11-25 17:30:33 +08:00
@chendajun 花点钱上动态 vps
Biny
2016-11-25 22:23:26 +08:00
@chendajun 可以购买国外的 vps ,一般最少都带有 2 个以上的 IP ,一般 512m 内存的 VPS 国外的也就 30-40 块人民币
tkisme
2016-11-26 00:03:32 +08:00
偷偷说一句,用电话拨号上网 ip 是不断变化的,那就意味着。。。
yanzixuan
2016-12-01 15:13:49 +08:00
@iannil 弱问如何在微信里抓。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/323279

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX