
大数据
记录大数据学习相关内容
neo0o1
这个作者很懒,什么都没留下…
展开
-
Spark 求最大值
#SPARK 求最大值 def top(): Unit ={ val sc = SparkUtil.sparkLocal() sc.setLogLevel("DEBUG") val data = sc.textFile("",1) data.flatMap{line=> line.split(",") }.filter(line=> (line.trim().length)>0) .map(x=>(x,1原创 2021-05-17 22:15:07 · 1143 阅读 · 0 评论 -
Spark 求最大值最小值
SPARK求最大值最小值 def maxMinValues: RDD[(Int,Int)] ={ val sc = SparkUtil.sparkLocal() sc.setLogLevel("DEBUG") val data = sc.textFile("",1) val num =data.flatMap{line=> line.split(",") }.filter(x=>x.trim().length>0).map(x=>原创 2021-05-17 22:11:38 · 1915 阅读 · 0 评论