背景
今天在做一个spark dataset练习的时候,遇到一个agg聚合函数,但是怎么用,都编译不过,然后百度啥的给的也不权威,最后找到一个spark官方的api网站,有较为详细的使用介绍。
正文
网站
网址: http://spark.apache.org/docs/2.2.1/api/java/allclasses-noframe.html
网站截图:
搜索类别,点击进入详情:
select的使用举例:
举例
val personsDF = spark.read.json("/data/wangqi/people.json")
val personScoreDF = spark.read.json("/data/wangqi/peopleScores.json")
case class Per