Spark开发环境配置(windows/Intellij IDEA 篇)

Intellij IDEA是一个蛮不错的IDE，在java/scala/Groovy领域深得人心。笔者之前使用的是Eclipse那一套开发环境，虽然也不错，但忍不住好奇心的驱使，折腾了一下IDEA，发现写起Spark程序来，“哎呦，不错哟！”，故总结一下在windows系统中的配置过程(在mac下的配置其实更简单一些)，自己琢磨时还是费了点劲的，网上各种教程新旧正误繁杂，好不麻烦，加上笔者工作中最烦的就是各种软件的下载安装配置，有时一个配置没做对，就浪费好长时间。故而将自己摸索过程总结一下，方便Spark爱好者参考。

配置前提

1. JDK安装。 请自行前往oracle官方网站下载安装，并在command命令行窗口确认java -version 可以返回版本号，否则的话要去系统环境变量设置位置确认是否java已经被添加到PATH中
2. Scala下载安装。移步官网 http://www.scala-lang.org/ 下载并安装即可。同第1步，要在command命令行下确认敲击scala可以进入交互式命令窗口，否则请确认环境变量的配置。
3. spark源代码下载。官方网站 http://spark.apache.org/downloads.html 上提供有各种hadoop版本的预编译版spark代码，理论上要根据你在用的hadoop版本来相应选择，本文仅作配置说明，故任选其中一即可。笔者下载的是spark1.5, 对应hadoop2.6预编译的版本，解压即可。
4.  Intellij IDEA下载。https://www.jetbrains.com/idea/ 上可以下载免费的community版本。

配置开始

1. 安装IDEA 的scala插件

        步骤如下图所示，笔者已经安装过，故右方显示已经存在该插件。第一次安装时，在plugins处输入scala关键词搜索，在联网环境下点击安装即可。