以后的时代,大量数据都会存放在服务商提供的存储上了吗?那我们岂不是面对黑盒子编程?

2018-10-21 10:33:40 +08:00
 abcbuzhiming
这两天看到说 Hadoop 要死的新闻 。据说 Hadoop 已经落后,而大量数据存放在诸如亚马逊 S3、微软 Azure Blob Storage 和 Google Cloud Storage 上的话,成本据说比 HDFS 便宜 5 倍。但是作为一个比较传统的程序员,我有如下疑问:

* 如果所有数据都上了这些云,那我们不是在面对黑盒子编程?毕竟这些云的技术细节不会告诉你
* 在关系数据库时代,我们对数据还是有设计和掌控能力的,如果所有数据都上云,我们会不会失去这个技能?
* 以后是不是再也不可能自己在本地搭建在技术上对自己透明的大型数据处理系统了。这个能力又会重新回到巨头手里?

各位说说自己的看法
4337 次点击
所在节点    云计算
26 条回复
liprais
2018-10-21 10:40:20 +08:00
真正有数据的公司不会用云的
不划算
PulpFunction
2018-10-21 10:45:11 +08:00
小公司有这样的需求,可能才产生了云服务
likuku
2018-10-21 11:02:52 +08:00
小型初创公司会主要用云,规模达到一定程度,自建云(高度定制,只做自己用到的)会更实惠。
pythongo
2018-10-21 11:13:04 +08:00
不可能。
一部分业务是可以放公有云,一部分是必须放私有云。
未来必然是公有+ 私有, 私有的话怎么可能面对黑盒子,需要自己去维护的
luojies
2018-10-21 11:16:41 +08:00
看好 BigQuery
otakustay
2018-10-21 12:03:45 +08:00
* 你现在也不知道操作系统的细节,不也对着这个黑盒子开开心心编程么
* 在关系数据库时代的今天,我们早就不玩关系了,数据有条目( Record )就足够用业务逻辑表达一切了
* 不如先说为什么需要自己搭建
cigarzh
2018-10-21 12:58:12 +08:00
混合云
mytsing520
2018-10-21 13:58:34 +08:00
敏感数据不上云
l4ever
2018-10-21 14:08:24 +08:00
云服务器太贵了,我来公司的时候 一台 ecs 每月光带宽费用 1000 多,还有云盘。这还不算服务器费用。加一起一月开支 2500/ecs

入职之后找了个电信机房租用,同样配置,100m 独,1800,硬盘要求换了全新做 raid0
opengps
2018-10-21 14:20:49 +08:00
这么说的,成长不到能自建 idc 规模的公司还是用云划算,一单规模达到,看看滴滴美团京东等不都是自建云,而且是公有云
ladypxy
2018-10-21 14:41:08 +08:00
除非超小型公司,不然大部分情况是自己建更便宜。
ccnccy
2018-10-22 00:45:15 +08:00
云哪里便宜了,贵的很
t6attack
2018-10-22 01:55:37 +08:00
掌控的是数据本身,数据放在自己手里更安心,这跟技术没啥关系。
之前你面对的也是黑盒子。你自建服务的技术,有几行代码是自己写的?大多数人,一行也没有。都不是自己编译的。都是拿过来直接用。这不是黑盒难道是白盒?
少数大牛能看懂及改进源码,对他们来说才是白盒。如果挖到个 0day,好了,你的数据对人家来说全透明了。敢问你对此的,所谓的掌控能力在哪?
natsukage
2018-10-22 08:34:32 +08:00
.net Frameworks 也是这么想的
l00t
2018-10-22 08:51:29 +08:00
你数据放哪里和是不是黑盒有什么关系?
veightz
2018-10-22 09:07:58 +08:00
从自搭数据库到购买云数据库,为啥就变成黑盒了?
veightz
2018-10-22 09:09:59 +08:00
@liprais 甚至还会自建机房。 除了性价比,还能快速支持自己的业务需求,给别人的厂商提需求,就不知道何年何月了。
abcbuzhiming
2018-10-22 09:38:14 +08:00
各位,我的问题关键在于第三点上,如果 hadoop 真的死了,是否意味着中小型公司和我们这种一般水平的程序员。会失去接触大数据技术的能力,会失去自建云的技术可能性?
bk201
2018-10-22 09:47:32 +08:00
hadoop 爲什麽會死,這些大公司的產品還不是基於 hadoop?
micean
2018-10-22 10:03:32 +08:00
又不是不让用?天天这么焦虑

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/499574

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX