Spark源码阅读之HistoryServer

概述
HistoryServer服务可以让用户通过Spark UI界面，查看历史应用（已经执行完的应用）的执行细节，比如job信息、stage信息、task信息等，该功能是基于spark eventlogs日志文件的，所以必须打开eventlogs日志开关，关于日志开关的打开和HistoryServer服务的启动方法这里不再讲述，下面进入正题

下面使用的spark版本是2.0.2

类结构图
Web相关

数据流相关

相关类及特质
WebUI
Web Server服务中UI层次结构的最顶层。每一个WebUI包含了一个tabs的集合，而每一个tab又包含了一个pages的集合。tabs页是可选的，而且WebUI也可以直接添加page
继承该特质的有SparkUI、MasterWebUI、WorkerWebUI和HistoryServer，在这里我们主要介绍HistoryServer

WebUITab
一个tab包含了一个pages的集合。prefix通过追加到parent的url组成一个完整的url path，而且不能包含斜杠
继承该特质有JobsTab、StagesTab、ExecutorsTab、StorageTab等(这里没有列全)，对应于Spark UI界面上的Jobs、Stages、Executors、Storage等Tab页

WebUIPage
一个page表示UI层次结构中的叶子节点。WebUIPage的直接父类即可以是WebUI，也可以是WebUITab。
如果父类是WebUI，prefix追加到parent的url形成完整的url path，如果父类是WebUITab，prefix追加到parent的prefix形成一个相对url path。Prefix中不能包含斜杠
继承该特质的有JobPage、StagePage、ExecutionPage、StoragePage等，对应于Tab页中具体的Page

HistoryPage
继承至WebUIPage，通