致最近在用十多台机器通过 python-requests/2.3.0 CPython/3.3.5 Linux/2.6.32-431.29.2.el6.x86_64 爬 V2EX 的某位同学

2014-12-10 16:38:37 +08:00
 Livid
抱歉我们现在用的机器还不够高大上,你的这种爬法,确实会影响到目前我们网站的访问质量。

所以,只能把你的 10 几个 IP 全部封了。

今天早些时候,我们还封了 YisouSpider 的另外 10 几个 IP。

我可以理解你们想要从这里开采资源的心情,但是就算是开采,请用一些可持续的方式。不可持续的方式,是在浪费所有人的时间和你的资源。

7308 次点击
所在节点    V2EX
36 条回复
matrix67
2014-12-10 20:03:32 +08:00
@Livid 我就感觉发现历史沉淀有价值信息很难发现。有没有系统的方法得到某一帖子多少人收藏这类的信息?

以此还可以计算帖子的价值。
Livid
2014-12-10 20:04:12 +08:00
@matrix67 明白了 :)
mringg
2014-12-10 20:11:53 +08:00
@matrix67 matrix67大侠?
matrix67
2014-12-10 20:17:30 +08:00
不是 ╯﹏╰ 哎,不用这个小号了。
aheadlead
2014-12-10 20:25:01 +08:00
@matrix67 再次膜拜Matrix67大神(假装我不知道)
lifechan
2014-12-10 20:52:31 +08:00
国内环境如此,比技术比创意,都是在比剽窃,不脚踏实地早晚掉到深沟。
v2014
2014-12-10 22:06:45 +08:00
@Livid http://v2ex.com/my/nodes/sorted ,打印traceback了
vincentqi
2014-12-10 23:00:58 +08:00
@Livid 贵站的收藏已经是一个不小的功能了,如果在收藏的同时能够打标签就好了,要不然收藏的多就不好找了。
MonkLuf
2014-12-11 00:48:27 +08:00
@v2014 再次发现一个用tornado写网站的站点,好激动!
MonkLuf
2014-12-11 00:50:34 +08:00
@Livid 这么高的并发量应该不是个人所为吧
ericls
2014-12-11 00:52:09 +08:00
有一天我发现我的博客全部发到了百度文库 还分好了类 排好了版
karma
2014-12-11 09:17:36 +08:00
咋感觉....躺枪_(:з」∠)_....
mengzhuo
2014-12-15 20:32:18 +08:00
@MonkLuf 买十台do的机子 爬个几天就差不多了 个人也可以哈哈哈
MonkLuf
2014-12-17 10:00:49 +08:00
@mengzhuo do在国外的话,速度快不起来啊,应该不会选择do吧?另:有vps推荐吗?或者do的哪些区域在中国访问会快一点?
mengzhuo
2014-12-17 10:11:47 +08:00
@MonkLuf
DO 在国外 问题是V2也在国外啊,如果挑美国的机子,速度更是快
MonkLuf
2014-12-17 23:28:44 +08:00
@mengzhuo
@Livid

v2为什么选择将机器放在美国呢?

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/152913

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX