qq_42321843的博客

此为课程笔记 环境：centos7. Hadoop2.7.1 Spark3.0.0 Python3 基于Docker的Spark安装部署。 在老师指定的网站CourseGrading网站上的环境部署环境，本实验为每位学生提供了3个虚拟节点。 Spark安装 1.首先在网络上下载spark3.0 2.执行如下命令解压： cd /usr/local tar -zxvf spark-3.0.0-...

使用如下命令在HDFS文件系统中创建本实验的工作目录： /usr/local/hadoop/bin/hadoop fs -mkdir -p /user/spark 时遇到问题无法创建目录 mkdir: Cannot create directory /usr/spark. Name node is in safe mode. 这是因为该节点处于安全模式 可以采用强制退出的安全模式命令 找到ha...