spark源码阅读
关注
分享
扫一扫
文章平均质量分 73
codemosi
hadoop hive hbase mahout storm spark kafka flume,等连载中，做个爱分享的人。
干一件事，干好一件事！
QQ ：1606588828
展开
-
spark SQL源码阅读001——sql.core包核心类——001执行SQL语法解析
近期的工作，一直需要和SQL引擎打交道，周末有闲心下，把spark如何解析SQL语法，并执行spark的任务记录一下。 spark SQL自己实现了SQL语法的解析，从而脱离hive的版本跟进。看一下spark SQL 的core核心。从api入门。/* * Licensed to the Apache Software Foundation (ASF) under one or more *原创 2015-05-24 19:45:04 · 705 阅读 · 0 评论 -
spark SQL源码阅读002——sql.core包核心类——002执行SQL语法2次解析SQL词（analyse）
@DeveloperApi protected[sql] class QueryExecution(val logical: LogicalPlan) { def assertAnalyzed(): Unit = checkAnalysis(analyzed) //1.1 analyse lazy val analyzed: LogicalPlan = analyzer(lo原创 2015-05-24 21:55:33 · 716 阅读 · 0 评论