文章目录 零、本讲学习目标 一、搭建Spark单机版环境 (一)私有云上创建ied实例 (二)连接ied虚拟机 (三)修改ied实例主机名 (四)设置IP地址与主机名映射 (五)下载、安装和配置JDK 1、下载JDK压缩包 2、上传到ied虚拟机 3、将压缩包解压到指定目录 4、配置Java环境变量 (六)下载、安装与配置Spark 1、下载Spark安装包 2、将Spark安装包上传到ied虚拟机 3、将Spark安装包解压到指定目录 4、配置Spark环境变量 二、使用Spark单机版环境 (一)使用SparkPi来计算Pi的值 (二)使用Scala版本Spark-Shell (三)使用Python版本Spark-Shell (四)初步了解RDD 例1、创建一个RDD 例2、调用转化操作filter() 例3、调用行动操作first() 零、本讲学习目标 学会搭建Spark单机版环境 学会Spark应用程序的运行 学会启动Spark Shell 初步了解RDD的概念 一、搭建Spark单机版环境 (一)私有云上创建ied实例 创建端口 - ied_port 创建实例 - ied (二)连接