SparkSession的三种创建方式

最新推荐文章于 2025-06-17 12:30:12 发布

原创最新推荐文章于 2025-06-17 12:30:12 发布 · 1.3w 阅读

14 ·

CC 4.0 BY-SA版权

文章标签：

#SparkSession #Spark #SparkSql

大数据同时被 3 个专栏收录

12 篇文章

订阅专栏

Spark

9 篇文章

订阅专栏

Scala

6 篇文章

订阅专栏

博客涉及Spark相关内容，包含SparkSession、Spark和SparkSql等信息技术领域关键元素，可用于了解Spark技术体系及相关操作。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

/**
  * 创建SparkSession方式1
  */
   val sparkSession1 = SparkSession.builder()
   .appName("SparkSQLDemo")
   .master("local")
   .getOrCreate()
/**
  * 创建SparkSession方式2
  */
    val conf = new SparkConf()
    .setAppName("SparkSQLDemo")
    .setMaster("local")
    val sparkSession2 = SparkSession.builder()
    .config(conf)
    .getOrCreate()
/**
  * 创建SparkSession方式3(操作hive)
  */
    val sparkSession3 = SparkSession.builder()
    .appName("SparkSQLDemo")
    .master("local")
    .enableHiveSupport()
    .getOrCreate()
//最后别忘记了关闭
    sparkSession1.stop()
    sparkSession2.stop()
    sparkSession3.stop()