每年递增 2000w 每个 10k 左右大小的文件，需要可靠的存储，访问日志，方便备份，有哪些选择？

2013-09-28 10:36:59 +08:00
 rrfeng
目前是放在数据库中，可靠性、备份、操作记录都很好，但是已经不堪重负

有什么好的建议呢？请大家畅所欲言，待我慢慢研究……


访问速度要求不是很高。
2278 次点击
所在节点    问与答
5 条回复
aoyoo
2013-09-28 10:43:51 +08:00
存储大量的小文件，我第一反应就是淘宝的tfs。
yangzh
2013-09-28 10:45:51 +08:00
redis?
vibbow
2013-09-28 21:16:40 +08:00
vhd ?
gfreezy
2013-09-28 22:00:57 +08:00
豆瓣的 beansdb
Lax
2013-09-28 22:26:54 +08:00
每年200G？这数量不算大，考虑的主要参数是访问量，对应的系统参数则是iops可能成为瓶颈。

单机应该可以考虑。RAID，SSD都可以上，另加一台备份，或者用DRBD做同步。
分布式文件系统的话，MooseFS也能扛住了。或者MogileFS。

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/84003

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX