sparksql 查看物理执行计划

最新推荐文章于 2025-05-23 14:55:47 发布

dataastron

最新推荐文章于 2025-05-23 14:55:47 发布

阅读量6.1k

点赞数

分类专栏： Spark 文章标签： spark

本文链接：https://blog.youkuaiyun.com/dataastron/article/details/80181349

版权

本文详细探讨了如何在SparkSQL中查看和理解物理执行计划，通过实例解析了Spark查询优化的过程，帮助读者更好地掌握Spark数据处理的底层运作机制。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

import org.apache.spark.sql.SparkSession

object DF2DS {
  def main(args: Array[String]): Unit = {
    println("astron")
    val spark = SparkSession
      .builder()
      .master("local")
      .appName("star")
      .getOrCreate()

    // 导入spark的隐式转换
    import spark.implicits._
    val emp = spark.read.json("d://employee.json")
    emp<