这种专门索引百度网盘的搜索,它的爬虫不会被 ban 掉么?

2015-10-11 11:49:38 +08:00
 easychen

最近一直在用 http://kaopu.so/ 看样子索引了很大量的内容,话说百度本身不对访问 IP 做频次控制么?

11074 次点击
所在节点    程序员
30 条回复
cevincheung
2015-10-11 14:43:57 +08:00
fighter2011
2015-10-11 14:47:08 +08:00
这种不会被 ban 吧,有很多都是磁力搜索的啊。
easychen
2015-10-11 14:47:59 +08:00
@cevincheung thanks :)
gamecreating
2015-10-11 19:25:47 +08:00
来吧.... 把百度云搞瘫..
http://yun.baidu.com/share/homerecord?uk=1848672288&page=1&pagelength=60
看连接 你懂的
Pepsigold
2015-10-12 08:29:38 +08:00
@gamecreating 怎么进去都是代码了?
starAsh
2015-10-12 09:33:26 +08:00
直接 google 搜 xxx site:pan.baidu.com 即可,然后对搜索出来的结果处理就行了
Roope
2015-10-12 14:25:06 +08:00
@gamecreating 这个好啊。
xgdy
2015-10-12 16:19:24 +08:00
@wbingeek 这个是什么程序?
dotmark
2016-07-19 09:50:32 +08:00
这个也不错 12so.cc
3023369823
2016-08-22 23:12:07 +08:00
失效链接怎么判断,这才是关键,求解释?@dotmark @Coxxs @Pepsigold @cdwyd @d7101120120 @dotmark @easychen @gamecreating @fighter2011

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/227092

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX