pyspark的windows7环境搭建

本文详细介绍了在Windows7系统中搭建PySpark环境的过程,包括安装Java 1.8、Scala、Spark、Hadoop,配置相关环境变量,安装winutil.exe,将pyspark复制到Python路径,安装py4j库,以及验证安装成功的步骤。

安装步骤

1.安装java,这里选择version 1.8.配置环境变量JAVA_HOME,PATH,CLASSPATH

参考链接:Java JDK8下载地址Java安装及环境配置

注意java的版本不能太高,否则后面java安装会报错。

2.安装scala,配置环境变量

(1).从 Scala官网下载目录下载 Scala 二进制包,本教程将下载 2.11.7版本

下载后,双击 msi 文件,一步步安装即可,安装过程使用默认的安装目录即可。

(2).右击【我的电脑】--【属性】--【高级系统设置】--【环境变量】

设置 SCALA_HOME 变量:单击新建,变量名输入:SCALA_HOME,变量值输入:C:\scala,即 Scala 的安装目录

注意安装目录名称不

评论 1
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值