@pain400 看公司吧，有的公司招“大数据工程师”会在 JD 里写清楚要精通机器学习的，那种是招进去做机器学习，不过数据集太大，实现时要用很多大数据组件支持，所以公司会觉得这就是“大数据工程师”。

@snappyone 老哥，纯手写的话了解下 antlr v4 ？高层抽象一点的话看看 calcite 那套能用不

只有巨头有能力在大数据这块做底层、框架和系统的开发，例如百度早年硬是用 c++重写 hadoop，阿里现在的 MaxCompute 和 Blink。
中厂都是把开源的那一堆组件拼在一起，做成 pipeline，封装一下对内服务，本质上还是普通后端开发。
小厂无论是数据量，还是人才，都不会去做“大数据”的东西，即使做也都是 sql 一把梭出报表，spark sql 工程师和 hql 工程师了解一下。

先走的应该是技术好+性子烈+无房贷外债的人。

请问蚂蚁深圳有啥业务和部门吗

17 款，256G，目前用了 16 个月，显示还剩 151G 可用。
该装的生产力工具都装了，还有一堆开发环境。
最重要的是本地别存视频，打算用到下一代新模具的第二代，大概 2021 年吧？

c++本来就不好找吧，再加上在广州，更不好找了。

人员扩充的好猛啊...最近两个月在不同的论坛看到了 10+个 shopee 的帖子。而且都是主招 3 年的猿，看来是特别缺搬砖的，不缺应届也不缺架构。

“语言”还是有一定重要性的，但不是语言本身，而是语言附带的生态，特别是 Java 那一圈生态。
不过在工作中换语言，或者跳槽换语言也没有大多数人想象的特别艰难。

还有更残酷的是，即使收入超越了 99%的国人，还是有 1400 万人的收入在你前面= =

@Codingless 纯个人观察，不太准确。开发的话，同一水平或者资历，广州工资 = 深圳 * 75%（非大厂，大厂如微信基本 1:1 相同），而广州房价 = 深圳 * 70%。

所以如果有广州大厂 offer，广州真的比深圳舒适多了。如果都是小厂 offer，深圳的小厂会给的比广州的小厂更多。

@jirryzhang 还有，你说的对，程序逻辑大概就是处理字符串。但是你上游要对接 mq 或者一些日志采集中间件，下游要对接存储组件吧（ low b 一点的就说 hbase，es 这种好了）？假设你在小公司洗 100+GB 数据，随便洗随便存吧，开源组件用起来，横向拓展 10 个、20 个节点好像能搞定耶。假如到了 100+TB 级，搞不好开源组件靠不住，或者需要深度定制。再深入一步，到了 100+PB 级，难道不需要任何魔改，直接装社区版就能用？

单纯说“洗日志”一个需求的话，确实没啥区别，代码逻辑都是那样处理字符串，substring 一下，组合一下，拼成一个个的 k-v 弄出去。但是这个东西背后有多少问题你可能需要好好地深思一下吧？

@jirryzhang 我确定没有逗你，我在 BAT 其中一家做过类似的东西。
你试试从毫无时效要求的洗数据出报表，再渐渐到有时效性要求的需求（ 2h 内跑完 xx 天的数据，出 xx 项统计量），再到交互式查询（ xx 秒内跑完，研究预热机制，研究计算引擎）。
你真以为就是表面看起来那么简单吗？

@Kilerd 还得一段时间吧？ 11 月底经过那转了转，感觉只有 30%的楼建好了，70%还只刚冒出地面一点。更别说建好楼之后建团队，确定业务什么的。估计得 2020 年中旬。

@AngryPanda 老哥是指上海互联网比杭州差多了？不止差一点点吗

广州宜居，但是互联网机会确实差不少。互联网北京 100 分的话，深圳 90，杭州 88，上海 85，广州 80。综合软实力的话北京 100，上海 98，广州 94，深圳 90。

还不错，百度的数据量刚刚的。同是洗日志，难题和问题会多很多。
别人日均洗 100GB，在百度你的业务搞不好要日洗 10TB，应该能学到不少。

@wangluofansi 应该是想根据业务需要来魔改，传说中的二次开发。

每年 2~4 月，牛客网上各种内推贴的。另外就是找师兄。