一、 安装Maven
1.解压,移动安装包
sudo tar -zxf ~/apache-maven-3.9.6-bin.tar.gz -C /usr/local/
cd /usr/local/
sudo mv apache-maven-3.9.6/ ./maven-3.9.6
sudo chown -R qiangzi ./maven-3.9.6
二、Java应用程序代码
1.版本信息:
Spark-2.1.0、Maven-3.9.6
(1)在终端执行命令创建文件夹sparkapp2作为应用程序根目录
cd ~ #进入用户主文件夹
mkdir -p ./sparkapp2/src/main/java
(2)在 ./sparkapp2/src/main/java 下建立一个名为 SimpleApp.java 的文件
cd ~
vim ./sparkapp2/src/main/java/SimpleApp.java
添加代码如下:
/*** SimpleApp.java ***/
import org.apache.spark.api.java.*;
import org.apache.spark.api.java.function.Function;
import org.apache.spark.SparkConf;
public class SimpleApp { public static void main(String[] args) {
String logFile = "file:///usr/local/spark-2.1.0/README.md"; // Should be some file on your system
SparkConf conf