用scala一句话写wordcount

最新推荐文章于 2021-11-20 14:04:20 发布

Jacquelin_1

最新推荐文章于 2021-11-20 14:04:20 发布

阅读量366

点赞数

CC 4.0 BY-SA版权

分类专栏： scala

本文链接：https://blog.youkuaiyun.com/Jacquelin_1/article/details/90693887

scala 专栏收录该内容

3 篇文章

订阅专栏

该博客主要讲述用Scala语言以一句话实现WordCount功能，体现了Scala在数据处理方面的简洁高效，在信息技术领域，这对于文本数据的统计分析有一定的应用价值。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

package ***

object wordcount {
  def main(args: Array[String]): Unit = {

    val lines = List("hello scala ", "scala spark flink ml aaa aaa aaa ccc ddd uuu")

    //val res1 = lines.flatMap((s: String) => s.split(" "))
    val res1 = lines.flatMap(_.split(" "))
    println(res1)

    //val res2 = res1.Map((s: String) => (s, 1))
    val res2 = res1.map((_, 1))
    println(res2)

    //val res3 = res2.groupBy((x: (String, Int)) => x._1)
    val res3 = res2.groupBy(_._1)
    println(res3)

    //val res4 = res3.map((x:((String,List[(String,Int)])))=>(x._1,x._2.size))
    val res4 = res3.map(x => (x._1, x._2.size))
    println(res4)

    //val res5=res4.toList.sortBy((x:((String,Int)))=>x._2).reverse
    val res5=res4.toList.sortBy(_._2).reverse
    println(res5)

    val res=lines.flatMap(_.split(" ")).map((_, 1)).groupBy(_._1).map(x => (x._1, x._2.size)).toList.sortBy(_._2).reverse
    println("++++++++++++++++合并为一句话+++++++++++++++++")
    println(res)
  }

}