大数据学习

[liushawn1999]

有老哥从事大数据方面的工作吗?想了解一下这方面的就业情况,目前我刚学完 sql,目前在学习 pl/sql,感觉难度一步一步加大啊,后面还要学 python 这些,但是 python 不是我比较担心的东西,就是对前面学过的 sql 还不熟练,很多题还不会写,有老哥分享一下你的学习经验吗?

[dif]

大数据避免不了：Hadoop 生态（ HDFS 、Hive 、Hbase 、Zookeeper...）,Spark 全家桶，Flink ，消息队列（通常是 kafka ）这些玩意面试必问，但实际工作中你可能一直在写 SQL ，建模型。 所以你可以把这些技术栈的视频先按着顺序看看。

最后：建议，国内正儿八经的的大数据不是很多。很多公司都拿着几个 T 的数据当大数据玩，钱玩没了，故事讲不下去了就得裁撤，目前我身边很多搞大数据的失业以后再也找不到大数据相关的工作了（外包几百 G 大数据除外）。基本上是饱和状态。学习难度也挺大，涉猎也比较广（做大数据同时也要熟悉一点常用的算法、Java Web 开发、运维等等）。所以，建议谨慎选择。

[liushawn1999]

@dif 好的了解了,感谢老哥

[liushawn1999]

@fuckallmm 直播带货也没那么容易啊!^_^

[liushawn1999]

@kangkag0231 大数据的学习路线大概是什么,技术栈主要是涉及哪些啊老哥?

[levelworm]

@kangkag0231 求问一下数据平台开发具体指的是什么？如果学习 Java 的话，是直接学习那些库吗？还是算法？因为单纯学习基础语法的话感觉并不难，毕竟大学学过。

[sordidclown]

在小公司做类似的工作，实际上研究过后会发现这个东西很坑，除非专门做数据的公司，否则大公司内部这些都是分开，比如数据仓库是 DBA ，展示是前端，数据接收处理有后端，业务本身有项目经理。也就是上面老哥说的涉猎比较广，换句话说就是很难专精于一项，在小公司内部可能还有点用，到市面上又是另一回事了，当然能进专门做数据的公司可能会不一样。

[littleJohn]

能做业务吗？数据运营、数据分析 不要单纯技术

[liushawn1999]

@littleJohn 好的好的,谢谢老哥

[liushawn1999]

@sordidclown 那具体应该选择哪些岗位呢

[kangkag0231]

@liushawn1999 @levelworm 我是做数仓的，对平台不了解不是特别深，结合自己工作经验说一下。
比如有些公司会基于开源的计算引擎构建一个开发套件降低他人使用门槛，emmm 比如抄一个 dataworks 或者 TBDS ，这些就需要 web 方面的能力，熟悉组件 API ；
有些公司对现有平台优化、集成的，比如 spark 集成 rss ，那就需要一些对源码改造能力;
还有的就是组件调试、配置调优、监控、容灾。
各个公司对平台开发定义不一样，主要还是看工作范围的。

[liushawn1999]

@kangkag0231 哦哦,数仓感觉是大公司才会有的岗位吧,我感觉小公司只能做数据分析了