Transformation 转换算子
在RDD中,整体可以分为Value型,双Value类型,Key-Value类型
Value类型
map()映射算子
函数签名:map[U:Class Tag](f:T => U):RDD[U]
功能:f是一个参数,可以接受一个参数,当RDD执行map时,会遍历RDD中的每一个数据项,并依次使用 f 函数,从而产生新的一个RDD。
例子说明:创建一个1-4数组的RDD, 两个分区,将所有的元素 *2 形成新的RDD
//1.创建SparkConf并设置App名称
val conf
原创
2021-03-24 22:40:56 ·
530 阅读 ·
0 评论