qq_35324057的博客

​​spark客户端提交任务到apiserver，创建driverdriver根据配置，创建指定数量的executordriver调度task到指定的executor计算数据域和计算域都在executor任务结束之后，driver销毁所有executor，同时自己也退出，也可以根据配置选择保留executor，状态是completed总的来说spark对于大数据处理有其独特的优势，特别是结合k8s之后，大规模的集群计算变得更加轻便，可以完成绝大部分的统计计算任务。