千万条数据级服务器的配置应该是什么样子

2015-10-20 09:40:00 +08:00
 zrp1994

现在有个服务器,每天新增两百万条数据左右,然后总数据已经达到 5000W+,但是 PV 较小,每天 1000+左右吧。请问至少服务器要达到什么样的配置才能不吃力。

3389 次点击
所在节点    服务器
12 条回复
ryd994
2015-10-20 09:50:53 +08:00
0.现在什么情况?什么配置?为什么吃力查清了么?
1.是什么数据?旧数据能不能优化走?分库分机
2.有多少索引?索引多大?内存大小应当参照索引大小配。
既然请求量不大,那可以忽略缓存部分( memcached/redis 在没有大量重复查询的时候没什么用)
3.机械硬盘应该是顶的住的,如果你不介意延迟的话
4.如果软 raid ,考虑软 raid 的计算量
zrp1994
2015-10-20 10:17:58 +08:00
@ryd994
1. 主要是 8G 内存几乎占满, CPU 和 IO 占用都稍低。主要是 Select 语句查询太慢,现在正在考虑分表,但是感觉按天分是不是太多了
2. 由于数据量大的部分的表结构是其他人规定的,发现他们没有给索引……而且查询的时候也不按索引查询。
3.机械硬盘,没有加缓存。
vibrance
2015-10-20 10:21:14 +08:00
站群? 5000 万多才千访问,为什么不关啦
zrp1994
2015-10-20 10:22:25 +08:00
@vibrance 不是站群
HentaiMew
2015-10-20 10:36:00 +08:00
5000 万的数据量 oracle 应该能驾驭,不过没索引当然慢了…
newtonisaac
2015-10-20 10:36:01 +08:00
索引
kn007
2015-10-20 10:40:11 +08:00
没索引,你怎么换都坑爹
zrp1994
2015-10-20 10:45:44 +08:00
@kn007
@newtonisaac
@HentaiMew
确实是,但是要改也只能等到下一期了,至少还有半个月……坑爹
ryd994
2015-10-20 10:46:10 +08:00
必须加索引!没索引你居然也能活到现在……
没索引除非你内存能放下整个数据库,然而即使那样也比索引慢
没索引,换什么配置都药丸
zrp1994
2015-10-20 10:48:44 +08:00
@ryd994 好吧……吓得我立马滚去在本地鸡上测试下
uleh
2015-10-20 12:06:19 +08:00
每天才 1000+的 PV ,好一点的 PC 配置都可以承受了吧
关键还是数据库要索引。。
oott123
2015-10-20 13:48:46 +08:00
难道每次查询都要扫全表吗…
为服务器的硬盘感到默哀

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/229419

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX