PHP 写代码直接处理 MySQL 中的大量数据，卡死

[Nixus]

有时候需要独立处理数据库中的大量数据，这个时候就自己写代码去处理，但是执行的时候，很耗资源，这个一执行，基本上网站的其它功能就全都卡在那里，动不了了，大家有什么好的解决方案吗？

实际情况是这样的，公司A系统中，有电话录音文件，这些录音文件，需要和B系统中的用户关联起来，所以，录音文件的文件名中包含了用户的电话号码，通过电话号码，在B系统中的数据库查找顾客ID，然后关联，大概有十几万条通话记录吧。PHP写了一段代码来处理，但是一执行，就系统的其它功能就卡住了，动不了

有什么好的解决方案？

[yanze0613]

读写分离，或者定期作业

[knightlhs]

1、要做读写分离 否则 容易遇到锁
2、按需增加索引 加快扫描速度
3、整理业务 可以合并的合并成一条 sql 不能合并 且量大的情况下 启用队列
4、实时性不高的业务 做成定时任务 在负载低的时段后端以 cli 方式运行

[fangjinmin]

10多万条数据不多，每次取少一点数据，用offset limit来取吧，这样会快一些。

[akira]

这种一般是sql没优化好的可能性比较大。。