想学习使用 flink 做实时统计订单数量,但是一搜发现相关知识曲线不是一般的长啊

2021-10-11 09:46:05 +08:00
 neochen13

如题,要从 hadoop 开始学起,以及一系列知识点,那到 flink 都何年何月了都……

1726 次点击
所在节点    问与答
12 条回复
SbloodyS
2021-10-11 09:51:22 +08:00
flink 不走 on yarn 可以不依赖 hadoop
wellsc
2021-10-11 09:56:52 +08:00
直接用,先不了解原理系列,想像成黑盒
neochen13
2021-10-11 10:06:57 +08:00
@SbloodyS 新名词,头晕
neochen13
2021-10-11 10:07:31 +08:00
@wellsc 欸,是想直接用的,就像先满足需要,一查发现水好深啊,难怪大数据需要专门一个部门
0576coder
2021-10-11 10:15:12 +08:00
flink 也可以直接 jar 包运行的,可以先不管 hadoop 那一套 直接订阅 mysql 的 binlog 应该就能实时统计了
YaPo
2021-10-11 10:18:44 +08:00
初学直接用 standalone 模式跑,如果数据量不大不依赖 hadoop 也可以的
SbloodyS
2021-10-11 10:59:22 +08:00
@neochen13 刚开始 Docker 起个 standalone 搞搞很容易上手的
bk201
2021-10-11 11:04:33 +08:00
我觉得缺什么用什么,遇到问题再去查。
giiiiiithub
2021-10-11 11:09:41 +08:00
环境先搭建起来
dtgxx
2021-10-11 15:17:04 +08:00
是的,大数据开发知识点很多,这是个岗位,和 Java 、C 工程师一样的岗位,不是你一下就能学会的,你对 flink 不了解,啥也不学虽然可以用,但是遇到问题你解决不了,你需要大数据开发的知识储备。
neochen13
2021-10-11 15:52:57 +08:00
@dtgxx 欸,我是 java 开发,只能眼馋了
neochen13
2021-10-11 16:14:27 +08:00
大佬们可以推荐一些大数据的书籍吗

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/806943

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX