Spark 实现常用的map reduce功能 (Java版本)
记录利用spark core的函数,完成一些map reduce功能的练习,spark core有Transformation和Action两种算子,Transformation完成中间转变过程,不会把运算真的算出来,Action才会最终把运算计算出来,所以运算必须以Action算子作为结束。
Transformation算子:
map、filter、 flatMap、groupByKey 、re...
原创
2019-07-17 17:09:28 ·
1601 阅读 ·
0 评论