Spark无法使用反射的方式创建DataSet的解决方式

无法使用反射的方式创建 DataSet 主要是 Spark 中的  implicits 隐式转换包没有导入。当你创建的是 HiveContext 的时候就需要导入 HiveContext 的

比如：

val sc = new SparkContext(conf)

val hiveContext = new HiveContext(sc)

那么你就需要导入：

import hiveContext.implicits._

如果是 SparkSession 那么如下：

val sparkSrssion = SparkSession
  .builder()
  .appName("Spark SQL basic example")
  .getOrCreate()

导入隐式转换包：

import sparkSrssion.implicits._