看到一大波 Java 在转大数据，唯有我倒着走?

[comsweetcs]

前言

越来越多的 Java 后端转来搞大数据了，只有我倒着走，要回去搞后端嘛？ 个人感觉大数据开发真的没啥意思，最有意思和有价值的工作在于机器学习，奈何能力有限。 说下对于大数据开发我的看法，首先说下这个类别岗位的主要意义，然后谈下工种分类。

大数据开发的价值

大数据开发的价值个人认为主要是为了给机器学习提供数据服务支撑，通俗点说就是让搞机器学习的同学 能更好的利用数据，保证数据的丰富性、准确性。

大数据开发的工种

大数据开发在我看来主要分为两个工种，一个是搞平台化开发、一个是面向业务的数据仓库开发。

• 平台化开发岗 主要负责数据的采集、数据的治理、保证数据落到数仓过程中数据质量、保证数据的易用、易查。 主要工作内容就是运维、搭建 Hadoop 这些大数据程序、编写少量的代码。
• 数仓开发岗位 主要负责数据仓库的构建，像运营、产品、机器学习人员提供数据。主要工作内容就是写 SQL 、写脚本跑 SQL 。

我的一些感悟

• 可能我做得不够深，感觉前者和业务没多少关系，很容易陷入尴尬的局面，像个运维小哥。后者整天在撤 SQL，真是心累。
• 大数据类的大多数工作对编码要求比较低，而且真有些代码也特别少。
• 现在觉得还是后端开发有意思，却有一大波人要转来搞大数据。

[comsweetcs]

@ren2881971 平台搭建好后就是运维 boy 和 sql boy 两类人

[comsweetcs]

@yeqizhang 数仓基本上就是 SQL BOY

[outoftimeerror]

其实大数据做数仓挺好的，技术迭代慢，和业务比较近，再加上行业知识，中年危机没有其他技术岗位那么严重。

[comsweetcs]

@MinQ 是的，因为算法确实值钱，导致很多人想扎堆进去。而且这玩意，人家清北的人已经建立起门槛，并不叫内卷，而是为了防止内卷。清北现在几乎垄断了国内一线大厂算法岗的内推渠道咯。

[comsweetcs]

@outoftimeerror 要说业务把，还没有对应的后端清楚。要说技术吧，还没啥技术。中年危机慢，感觉只是进来做这个的人没那么多，一多起来，还不是一样。

[MinQ]

@comsweetcs 算法能落地了才有可能值钱，落不了地的一律不值钱。每年顶会论文多如牛毛，但大部分都是水 paper，工业界参考更多的还是 FAAG 家发的论文，因为都有场景落地了。

[newmlp]

主要是钱多吧

[wangyzj]

面向工资编程
最近这几年大数据啥的给的的确多，岗位多，而且啥职位都需要懂大数据
不过现在转是不是晚了点
感觉这个财富密码要过去了

[oluoluo]

搞 k8s docker 那一套的是不是也算是运维。。

[comsweetcs]

@oluoluo 哈哈哈哈。感觉那是妥妥的运维

[la2la]

刚面试到大数据岗位，看着大家吐槽突然没了信心，不过我不是后端转的而是 爬虫 -> python 数据开发 -> 大数据开发的路线 0.0

[comsweetcs]

@la2la 加油加油。每个人环境不一样，我只是个人见解，不一定对阿。

[stevenhawking]

Tenet

[ob]

大数据工资普遍去后端高点。

[comsweetcs]

@ob 对于小厂是这样。对于大厂其实几乎一个价，有时候后端还更高。

[abcbuzhiming]

@comsweetcs 算法也正在卷，没看现在形容算法用的是算法“岗”了吗？

[outoftimeerror]

@comsweetcs 不知道互联网是什么行情，但是外企的话肯定是数仓比后端好，以我了解的快消为例，依赖电商平台和线下门店渠道，前后端开发基本上不怎么招人，但是因为国家禁止消费者数据传输到国外，数据分析数仓国内岗位还是挺多的。

[comsweetcs]

@abcbuzhiming 哈哈哈哈哈哈，好吧。

[comsweetcs]

@outoftimeerror 哈哈哈，那要是不看行情，你觉得哪个工作比较有意思。

[impl]

后端不需要写 sql 吗