selenium 经常把文件系统写挂，怎么处理？

2019-11-24 20:27:14 +08:00
 Te11UA
在高并发的时候，selenium 这个 docker 中应该起了有 64 个 driver，当使用内存超过限定内存后，文件系统就会挂掉，显示文件系统为 read-only file system，已经找阿里云好几次了，应该还是 selenium 的锅，想问问各位有没有碰到过这个问题的？
3470 次点击
所在节点    Python
8 条回复
lau52y
2019-11-24 23:56:59 +08:00
秀啊，64 个....
zhangjinglongi
2019-11-25 08:25:42 +08:00
selenium 本来就不是做爬虫的。资源给的太少了，你弄 10 台机器，每台 6 个 driver 情况就会好点。。又想要马儿跑，又不想马吃草。。怎么可能？
u823tg
2019-11-25 08:30:33 +08:00
复用不行吗，干嘛起那么多。
nullboy
2019-11-25 08:42:22 +08:00
太狠了。不怕进局子么
scukmh
2019-11-25 08:49:53 +08:00
秀啊，64 个。。。
Lunatic1
2019-11-25 10:03:48 +08:00
提高配置 or 修改代码
zarte
2019-11-25 10:36:19 +08:00
阿里云一查，你竟然在跑爬虫，封！！
Les1ie
2019-11-25 18:11:24 +08:00
64 个...

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/622692

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX