spark 操作 hive

最新推荐文章于 2025-06-04 10:11:54 发布

原创最新推荐文章于 2025-06-04 10:11:54 发布 · 228 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#hive #spark #大数据

大数据同时被 2 个专栏收录

6 篇文章

订阅专栏

spark

4 篇文章

订阅专栏

本文提供了一个使用Spark集成Hive的简单示例代码，展示了如何通过SparkSession配置并启用Hive支持，以及如何关闭SparkSession。虽然示例中未展示具体的数据读取操作，但该代码框架为读者提供了实现这一功能的基础。

依赖就不贴了，嘻嘻

object SparkHive extends App {

  val spark: SparkSession = SparkSession.builder()
    .master("local[*]")
    .appName("spark_hive")
    .enableHiveSupport()
    .getOrCreate()

  //读取hive中数据表
  /*spark.sql("select * from kb12.testsqoop")
      .show()*/

  import spark.implicits._
  

  spark.close()

}