m0_37601605的博客

原创 Spark角色介绍和任务提交过程

一、角色介绍Spark 架构使用了分布式计算中 master-slave 模型， master 是集群中含有 master 进程的节点， slave 是集群中含有 worker 进程的节点。◆ Driver Program ：运行main 函数并且新建 SparkContext 的程序。◆ Application ：基于 Spark 的应用程序，包含了 driver 程序和集群上的 exec...