本文介绍Spark应用程序的开发步骤，包括创建SparkConf与SparkContext对象、基于SparkContext创建并处理RDD，以及通过Action类算子触发Transformation类算子的执行过程。最后，文章提及了SparkContext的正确关闭方式。
1、创建SparkConf对象：设置Application name 以及运行模式及资源需求。
2、创建SparkContext对象。
3、基于Spark的上下文创建一个RDD，对RDD进行处理。
4、应用程序中要有Action类算子来触发Transformation类算子执行。
5.、关闭Spark上下文对象SparkContext
扫一扫
评论
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
查看更多评论
添加红包
