关于高频读写 mysql 数据库的设计

[wsldl123292]

有一个需求，是从 kafka 读取数据入 mysql，数据要保证实时性，要及时入库和查询， 现在是的数据量大概每天 30 万，基本是每秒 4 条的频率 现在的问题是在写入的同时再去查库，会导致查询变慢，有什么好的方案吗？

由于硬件限制，只有台 8g 的机器，没有办法分布式多节点

[wangyzj]

这个配置，每天 30w，如果你不是一次读这么多的话应该足以

[zunceng]

有硬件限制 不建议搞什么主从了 可以做一些索引的优化

就像 @encro 提到的用 snowflake （ int64 ） 做主键 不要用 string

[wsldl123292]

@wangyzj 就是每次读一天的，当然是分页

[fancy111]

我有台 1H2G 的机器也想这么做。。。

[aloyuu]

内存临时存储数据，宕机时，内存数据如何挽救？

[wysnylc]

让你客户去屎吧

[wangyzj]

@wsldl123292 spa 全读出来然后前端分页？

[luozic]

读取的是啥内容？

[jimrok]

分表，因为更新的时候，会加锁限制读到脏数据，分表可以避免不相关的加锁，同时索引更新会更快。或者你允许客户脏读。