Spark 之 Strategy

zhixingheyi_tian

已于 2025-01-09 17:09:42 修改

阅读量544

点赞数

分类专栏：大数据 spark 云计算文章标签： spark 策略模式大数据

于 2019-01-05 21:21:08 首次发布

本文链接：https://blog.youkuaiyun.com/zhixingheyi_tian/article/details/85875320

版权

spark 同时被 3 个专栏收录

157 篇文章 ¥19.90 ¥99.00

订阅专栏

超级会员免费看

大数据

92 篇文章 ¥19.90 ¥99.00

订阅专栏

超级会员免费看

云计算

93 篇文章

订阅专栏

参考链接

https://mp.weixin.qq.com/s/pfe5AJI4TnPdyFRLbqwF4A

在这里插入图片描述

SparkStrategies

SparkStrategies包含了一系列特定的Strategies，这些Strategies是继承自QueryPlanner中定义的Strategy，它定义接受一个Logical Plan，生成一系列的Physical Plan

通过Strategies把逻辑计划转换成可以具体执行的物理计划

package object sql {

  /**
   * Converts a logical plan into zero or more SparkPlans.  This API is exposed for experimenting
   * with the query planner and is not designed to be stable across spark releases.  Developers
   * writing libraries should instead consider using the stable APIs provided in
   * [[org.apache.spark.sql.sources]]

了解本专栏