私有云存储开发

2019-09-07 09:54:35 +08:00
 jeffreyji666
部门要整私有云存储,要支持 EB 级别数据量, 请教下技术选型.

目前了解到的开源方案主要是 Ceph, 但 ceph 坑也多, 求有经验的大佬指点
7819 次点击
所在节点    程序员
56 条回复
snappyone
2019-09-07 10:02:35 +08:00
eb 数据应该有专门负责这个的部门了吧
hst001
2019-09-07 10:26:26 +08:00
1 EB = 1024 PB = 1024 * 1024 TB = 131072 块 8 T 容量的硬盘,按 3 份副本存储,需要 393216 块硬盘,接近 40 万块, 按 EB 级别要求看,只能算是个起步,你们部门怕不是得搞个数据中心?
abcbuzhiming
2019-09-07 10:33:42 +08:00
贵公司的预算是多少,想搞这样的东西,计算机系统的复杂性从来都是来自数量级,每加 1 个 0,难度指数上升
delectate
2019-09-07 10:44:41 +08:00
eb 级别,至少是几十人团队才能搞,成本很高,不是你能搞得定的。不如买套路云 oss,良心云 cos。
fredcc
2019-09-07 10:56:17 +08:00
1EB 数据,在 AWS 宁夏区存储每个月大概 17w 多,流量成本另外计算。自建 200w 级别搞定 IDC+硬件+研发+维护+团队?这个数量级别,老实上公有云吧,不放心就多云备份。
PowerMax
2019-09-07 10:59:25 +08:00
按 1EB 数据来算 硬盘价格就要 3 个亿左右
1EB 数据也不是突然了出现的 你们原来是怎么解决的?
你们公司是作啥的 好奇问一下
jeffreyji666
2019-09-07 11:05:21 +08:00
原来是公有云, 现在想自建, 还在调研阶段
x7395759
2019-09-07 11:17:00 +08:00
自建花钱把公有云方案搬一套下来就完事了
jeffreyji666
2019-09-07 11:26:28 +08:00
这套方案也没法搬吧,都是公有云自己研发的,人家吃饭的本领.
donlxn22
2019-09-07 11:50:45 +08:00
Azure Stack 私有 Azure 云看一下
cmdOptionKana
2019-09-07 12:03:03 +08:00
要来论坛问方案的话……目测自建会遇到很多麻烦。
chinvo
2019-09-07 12:07:18 +08:00
联系微软 Azure,做 Azure Hyper Cloud
Srar
2019-09-07 12:17:36 +08:00
直接 DELL EMC 或者 Hitachi VSP 吧
realpg
2019-09-07 12:17:46 +08:00
坐标哪里?专业搞云数据中心的。自己拿地还是租用既有物业?

我这有个自建的项目,自己拿地,存储
realpg
2019-09-07 12:20:49 +08:00
没打完就发出去了
自己拿地自建的,CEPH 方案后端存储,一期项目要求 320PB 初始容量三副本存储,荒郊野岭机房六层楼,基建不含土地总投资 3 亿
swulling
2019-09-07 12:33:58 +08:00
@fredcc 瞎扯淡,aws 宁夏 S3 标准存储价格 每月 ¥0.1629/GB,这么算一个月是 1.75 亿

https://www.amazonaws.cn/s3/pricing/
dot2017
2019-09-07 12:34:34 +08:00
@hst001 可能去重压缩下就几 TB #滑稽
realpg
2019-09-07 12:35:14 +08:00
这个规模如果是机械硬盘容量盘,就按照 1EB 的规模后段存储,加上固态缓存 tier,大致需要 2000 个标准柜,不考虑扩容房间空间,两层楼机房,全套消防电力配置加上数据中心办公附属,我这最近建设的 2000 标准柜的机房有个参考

不含土地成本
机房主体面积 长 119.2 米宽 48 米的两层楼
包含双幺万市电引入,厂房建设,双变压器,配电,18 套 600kva 的 UPS,电池,配套线缆,机柜,PDU,空调,桥架,监控中心,气体消防设施,总投资 6000 万,坐标辽宁,2020 年 3 月投产
swulling
2019-09-07 12:35:41 +08:00
@jeffreyji666 厉害,好奇你们原来用的哪家公有云?
swulling
2019-09-07 12:39:08 +08:00
EB 级别数据中心,基建加服务器费用加网络费用,三个亿起吧。这么大规模没钱请个资深架构师,跑到论坛上问个啥…

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/598774

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX