liucudliucud's recent timeline updates liucudliucud's recent timeline updates |
liucudliucudV2EX member #302509, joined on 2018-03-22 16:45:16 +08:00 |
liucudliucud's recent replies
Apr 15, 2018 Replied to a topic by unboy › 问与答 › 1000 万行文本数据如何做筛选？ |
传到集群上用任务搞，9 亿行都没问题
Apr 10, 2018 Replied to a topic by luozhiyun › 程序员 › 程序员选 x1c 2018 还是 macbook pro |
无脑 mbp，根本不用想
Apr 3, 2018 Replied to a topic by palmers › 北京 › 请问在亦庄上班的 V 友们, 都在那些地方租房呢? 第一次到亦庄这边, 谢谢大家啦! |
上海沙龙吧，去哪都比较方便
Mar 31, 2018 Replied to a topic by Trinea › 酷工作 › [滴滴出行-北京、杭州] 前端/算法/服务端/Android/iOS/算法/等各类职位大量招聘，月 20k-55k，年 16 薪，优秀另有期权 |
滴滴巨坑，慎重
Mar 30, 2018 Replied to a topic by lihongjie0209 › 问与答 › 使用 Java 如何快速创建三百万临时文件用于测试, 大小无所谓 |
搭建一个 hadoop 集群
Mar 30, 2018 Replied to a topic by anonymoustian › Hadoop › Spark 如何将一个 RDD 分成多个 RDD？ |
拆 rdd 这种一个两个还可以，多了效率很低的，强行串行了
Mar 30, 2018 Replied to a topic by anonymoustian › Hadoop › Spark 如何将一个 RDD 分成多个 RDD？ |
把数据 flatten 再详细写 reduce 方法呗
可以详细说下需求
类似于 name type score
可以详细说下需求
类似于 name type score
Mar 29, 2018 Replied to a topic by anonymoustian › Hadoop › Spark 如何将一个 RDD 分成多个 RDD？ |
不用拆，放在一起处理
Select Language