pyspider 与 scrapy 相比如何？

[pc10201]

如题~

[est]

都不好用。还是自己撸。

[fengxiang]

还是自己写吧

[WildCat]

都不好用+1

[PythonAnswer]

临时要搞到数据, 就随便拿来一个用上再说. 目前手头没有什么依赖 daemon 爬虫的项目.

[tanteng]

scrapy+1

[udumbara]

冲着对 python3 的支持 pyspider+1

[popil1987]

scrapy 的 downloader 是很好用的，可以处理超时， 301 ， zip 压缩等情况，没必要自己写了。
pyspider 很好用，有 webui ，但是定制额外功能不是很好用

[leavic]

scrapy 非常好用

[pango]

楼上说都不好用的是什么心态。。。，还自己撸，你撸撸看。
如果只是小范围的抓取，比如一次性抓一个小网站（比如 1 万页以内），那自己随便写写问题不大。但也不如直接用 scrapy 或者 pyspider 来的快速方便。
涉及到几十万上百万页面、需要抓取几十上百个网站的， scrapy 和 pyspider 都可以胜任，自己写就算了。
如果要监测网站更新，并随时把更新抓取过来的， pyspider 完胜 scrapy 。
如果懒得自己写抽取规则， pyspider 的 webui 是你的选择。
如果需要做资源下载的，比如下载图片、软件、视频的，如 @popil1987 所说， scrapy 完胜 pyspider 。
如果是要再开发一个 google 出来，两种都不够用。

[MyFaith]

@pango +1 ，上面说自己撸的，也许连 Python 语法都不会