Spark-算子系列

1、RDD创建

2、RDD：基本转换操作

（1）map、flatMap和distinct

（2）coalesce与repartition

（3）randomSplit与glom

（4）union、intersection、subtract

（5）mapPartitions、mapPartitionsWithIndex

（6）zip、zipPartitions

（7）zipWithIndex、zipWithUniqueId

3、RDD：键值转换操作

（1）partitionBy、mapValues、flatMapValues

（2）combineByKey、foldByKey 

（3）groupByKey、reduceByKey、reduceByKeyLocally

（4）cogroup、join

（5）leftOuterJoin、rightOuterJoin、subtractByKey

4、RDD： Action操作

（1）first、count、reduce、collect

（2）take、top、takeOrdered

（3）aggregate、fold、lookup

（4）countByKey、foreach、foreachPartition、sortBy

（5）saveAsTextFile、saveAsSequenceFile、saveAsObjectFile

（6）saveAsHadoopFile、saveAsHadoopDataset

（7）saveAsNewAPIHadoopFile、saveAsNewAPIHadoopDataset

5、RDD：统计RDD分区中的元素和数量

 

参考：http://lxw1234.com/archives/category/spark