Spark案例：Scala版统计单词个数

目录

1、创建Scala项目SparkScalaWordCount

2、创建lib目录，添加spark的jar，并添加作为项目的库

3、在项目根目录创建test.txt文件

4、创建WordCount对象

5、启动WordCount，查看结果

6、利用Spark集群处理保存在HDFS上的文件

（1）上传test.txt到HDFS的word目录

（2）启动Spark集群的Master和Slave

（2）修改WordCount

（3）打成jar包SparkScalaWordCount.jar

（4）将SparkScalaWordCount.jar上传到虚拟机

（5）在Spark服务器上运行

---

利用Spark的RDD可以对本机或集群上的文件进行词频统计。

 

1、创建Scala项目SparkScalaWordCount

2、创建l