运行爬虫的时候 macOS 状态栏卡死

2017-03-22 16:29:13 +08:00
 masha
爬虫运行的时候 状态栏如下图卡死(系统自带的状态卡死,第三方不受印象)

* 渣画质见谅,那个圆圈卡死的鼠标状态竟然不能被 QuickTime 截到,于是手机远远的拍的(破 6s 近处已无法对焦)
下面是这个爬虫 import 的包



## 系统 10.12.2 , python2.7
2249 次点击
所在节点    Python
7 条回复
xshwy
2017-03-22 16:58:01 +08:00
前排小板凳围观大神根据 import 判断卡死原因
masha
2017-03-22 17:03:03 +08:00
@xshwy 不好意思我才是小白,你对这个原因有见解的话可以直接发表,我只能这样猜测了,因为这个爬虫和我其他爬虫唯一不同的地方就是 import 的不同了。而这个是我写到现在唯一一个因为长时间运行而卡死状态栏的
masha
2017-03-22 17:06:23 +08:00
@masha 每次长时间运行都会卡
xshwy
2017-03-22 18:13:02 +08:00
@masha 哎嗨嗨 不好意思 我也是菜鸟,我认为光从 import ,看不出卡的问题出在哪儿;最好是贴出你的代码,让大神分析一下哪里出了问题。
xray887
2017-03-22 18:18:02 +08:00
估计,你的 webdriver 开多了,并且没有关闭,导致系统资源紧张,导致卡死现象。建议检查一下 webdriver 有没有 close 掉。
VicYu
2017-03-22 20:42:18 +08:00
@masha 电脑配置,内存太小? selenium 用的那个 browser ,起了多少个线程,一个任务结束调用 close 没有?等等
masha
2017-04-10 23:21:31 +08:00
@xray887 @VicYu 不好意思都忘了这么个帖子了,谢谢回复,都排查过不是这些原因

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/349495

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX