Hadoop or Spark ?

2015-06-11 18:58:08 +08:00
 zhangneww
本人大三学生,会一点 java,C#,python,C,熟练程度递减。

之前 配置过 Storm, kafka, zookeeper。只是配置过。现在在配置 hadoop,64位本地库还没编译。

打算学大数据,看到 Spark 比 hadoop 好一点,可以直接学 Spark 吗,V友们给点意见,谢谢。
2385 次点击
所在节点    云计算
9 条回复
johnsmith123
2015-06-11 19:02:17 +08:00
只问一句 有100台服务器吗?
Gonster
2015-06-11 19:03:00 +08:00
这里好像不是或关系吧...
zhangneww
2015-06-11 19:05:18 +08:00
@Gonster 先学 hadoop 吗?
FeiMa
2015-06-11 20:02:55 +08:00
要学的话,还是先学Hadoop吧。
另,两个的应用场景不同,有需要的话,两个都要学。
sleeperqp
2015-06-11 20:09:44 +08:00
看你是想往什么方向做了
运维 就看看怎么怎么自动化配置 加上个docker nagios这些
分布式平台 就看源码吧
还是数据挖掘机器学习这类 先看理论然后在上面实现
这两个都是平台而已
20150517
2015-06-12 03:13:30 +08:00
你这是做运维了吧?装啊装配置什么的。。。其实还是关键写的map reduce程序啊,说到底到的java水平啊
zhchaos
2015-06-12 13:55:09 +08:00
运维
lujiajing1126
2015-06-12 17:00:38 +08:00
Hadoop和Spark都不是同一层面上的吧

Hadoop一般主要是MR和HDFS,主要是用来做离线计算的,非常底层的

Spark是实时计算
locatelli
2015-06-19 21:14:26 +08:00
现在的业务场景经常需要Hadoop和Spark结合,所以不是零和的关系

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/197836

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX