为什么 Python peewee 第一次运行时间很长

2020-08-01 09:51:26 +08:00
 lixuda

数据库 mysql，10 多万条数据，排序后获取 N 条，第一次运行需要几秒，但是再运行获取只需要 0.0 几秒

哪位大神赐教下，谢谢

2425 次点击
所在节点    Python
13 条回复
pabupa
2020-08-01 10:44:58 +08:00
主机名是 localhost 还是 127 ？
RyougiShiki
2020-08-01 11:34:18 +08:00
排序就是比较耗时，不过十万条不算很多，加索引试试，再次快因为数据库有缓存。
lixuda
2020-08-01 11:51:10 +08:00
@pabupa localhost,127 测试下也一样情况
loading
2020-08-01 12:07:14 +08:00
你用其他图形化管理工具连 mysql，然后泡一下你的 SQL，你看看。
ClericPy
2020-08-01 14:35:33 +08:00
PySnooper 看看?

有点怀疑连接池惰性初始化
sujin190
2020-08-01 14:55:59 +08:00
没索引吧，首次查询全表扫描肯定很慢，之后的很快是因为查询缓存的存在吧，估计不是 peewee 的问题，你可以直接 cli 命令行试试 sql
lixuda
2020-08-01 21:45:51 +08:00
@sujin190 已索引的
black11black
2020-08-02 00:12:30 +08:00
十万排序对 py 和 mysql 都不是瓶颈，排序业务，有明显迟滞感的量级目前对 py 来说是亿级，mysql 是千万级。建议业务代码 debug，或者新建裸环境测试 peewee
lixuda
2020-08-02 09:19:51 +08:00
@black11black 应该是我对 peewee 不熟，不知道哪里出问题
dogeglat
2020-08-02 10:29:30 +08:00
@ClericPy
正解

可以 profile 看下耗时在哪
summerwar
2020-08-02 16:52:47 +08:00
代码类问题 尽量贴代码，不然都是瞎猜
di94sh
2020-08-08 08:09:43 +08:00
logging 打出 sql 来看执行计划
lixuda
2020-08-11 09:30:41 +08:00
@ClericPy 用 connect("mysql+pool: 连接池方式链接，没有加载的时间了

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/694775

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX