大家学习 hadoop 之类的系统的时候是如何实践的?

2016-03-11 10:19:56 +08:00
 LINEX

租几台云服务器上自己玩吗?还是本机慢慢跑。
ps : mac 下的 hadoop 好像不太好用啊。。我配置的 hadoop 环境有好多问题。。

2522 次点击
所在节点    问与答
9 条回复
lk1ngaa7
2016-03-11 10:44:32 +08:00
用 docker 可以吗?应该是可以模拟集群环境的
lk1ngaa7
2016-03-11 10:45:43 +08:00
LINEX
2016-03-11 11:59:10 +08:00
@lk1ngaa7 应该是可以的,不过 docker 镜像下载速度太慢。。。是因为被墙吗
HelloCode9527
2016-03-11 13:11:24 +08:00
如果是学校的话,相关的实验室会有这样的环境的把,我之前在学校就用 5 台机器搭了一个 Spark 集群。至于实践的话,最好是参加一些相关的比赛, Task Driven 的方式效率会比较高。

如果你想在本地搭建集群,,只要你的配置够,,我也没有意见。
lln133208
2016-03-11 14:41:46 +08:00
@LINEX docker 镜像源有国内镜像,你可以搜一下,下载速度会好很多
shiji
2016-03-11 14:43:59 +08:00
我当初貌似是学校给了 100 刀的 AWS 低值券,用 MapReduce
shanks
2016-03-11 14:54:08 +08:00
自从出来搬砖之后,就没考虑过这种做实验没资源的问题。。。囧
LINEX
2016-03-11 17:57:51 +08:00
@shanks 好吧,我搬砖是做 web 后端,平时也就只能自己单机跑跑。。。
lk1ngaa7
2016-03-11 19:04:54 +08:00
@LINEXdockerhub 是被墙了的。可以用加速器,阿里云,时速云, daocloud 都用过,还不错。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/262702

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX