socket.setdefaulttimeout(timeout)#这里对整个 socket 层设置超时时间。后续文件中如果再使用到 socket，不必再设置 2018-03-15 16:32:17 +08:00

如何控制反爬频率，不影响对方网站的正常使用，并且让自己获得最高的效率？ 2018-03-09 10:59:26 +08:00

是否有必要使⽤外键：
互联⽹⾏业应⽤⽤户量⼤，并发度⾼，数据库服务器很容易成为性能瓶颈，尤其受 IO 能⼒限制，且不能轻易地⽔平扩展。

如果设置了外键，当做⼀些涉及外键字段的增，删，更新操作之后，需要触发相关操作去检查，会额外消耗计算机资源。

说明：虽然外键约束可以保证数据的有效性，但是在进⾏数据的 crud「增加(Create)、读取查询(Retrieve)、更新(Update)和删除(Delete)」时，都会降低数据库的性能，所以不推荐使⽤，那么数据的有效性怎么保证呢？答：可以在逻辑层进⾏控制。 2018-03-08 23:23:42 +08:00

数据清洗
csv sql json string 2018-03-07 13:03:17 +08:00

Try： 多进程里面混搭线程 2018-02-28 20:25:51 +08:00