Spark编写遇到的问题：org.apache.spark.SparkException: A master URL must be set in your configuration

爱睡觉的小于

于 2022-04-17 09:12:00 发布

阅读量2k

点赞数

分类专栏： Spark 文章标签： spark 大数据

本文链接：https://blog.youkuaiyun.com/m0_58027884/article/details/124224813

版权

Spark 专栏收录该内容

1 篇文章

订阅专栏

22/04/17 09:03:20 ERROR SparkContext: Error initializing SparkContext. org.apache.spark.SparkException: A master URL must be set in your configuration

本地模式遇到这个问题的原因：没有设置“local”本地模式。
解决办法：

	// 设置spark运行环境，setMaster（“local”）本地模式，setAppName（“WordCount”）设置任务名为：WordCount
    val sparkConf = new SparkConf().setMaster("local").setAppName("WordCount")
    // 将设置的环境变量放入连接中
	val sc = new SparkContext(config = sparkConf)