VM虚拟机安装+Hadoop+Scala+Spark

本文详细介绍了如何在VM虚拟机中安装和配置Hadoop、Scala和Spark,包括VM Worksation的安装、虚拟机网络配置、SSH免密登录,以及JDK、Scala、Hadoop和Spark的安装步骤。此外,还涵盖了软件版本的选择,如JDK 8u131、Scala 2.11.4、Hadoop 2.7.3和Spark 2.0.2。最后,文章提到了zeppelin 0.7.1的安装和验证过程。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

VM虚拟机安装+Hadoop+Scala+Spark

1.      VM虚拟机安装

1.1VM Worksation安装

1.2配置虚拟机网络

1.3clone虚拟机

1.4SSH免密登录

2.JDK+Hadoop+Scala+Spark安装

2.1JDK安装

2.2Scala安装

2.3Hadoop安装

2.4安装spark

2.5zeppelin安装

3.各软件版本号

3.1jdk

3.2scala

3.3hadoop

3.4spark

3.5zeppelin

3.6mysql

3.7hive

 


 

1.    VM虚拟机安装

1.1VM Worksation安装

         1.安装VMware Workstation12,在D盘创建“虚拟机”文件夹,文件夹下创建master主机目录“master”。

         2.安装好VM后,点击创建虚拟机,选择iso文件,centos-6.8-x86_64-liveDVD.iso,目录选择master。

         3.如果虚拟机提示,机器配置为虚拟化,则需要重启电脑按F2进入boot设置,将虚拟化打开

         4.运行master虚拟机,点击桌面的安装到硬盘,完整安装centos系统。

         5.打开安装好的centos系统,点击虚拟机,安装VM tools,打开VM tools镜像,将tar文件拷到centos桌面,解压执行.pl文件。安装完成后重启虚拟机,可以与虚拟机公用剪切板。

1.2配置虚拟机网络

         1.选择虚拟机的网络状态,改成桥接模式,右键centos系统右上角的网络设置,编辑网络设置,在ipv4里手动设置ip,添加一条网络连接,本机ip设为192.168.1.200,子网掩码255.255.255.0,网关需要设置成启动虚拟机的机器ip192.168.1.100。

         2.进入命令行。

切换root用户:su root

打开防火墙设置:setup

关闭防火墙

查询防火墙状态:service iptables status

3.设置本机名称,vi/etc/sysconfig/network

在hostname=改为master

4.设置ssh文件,vi /etc/hosts

下面添加192.168.1.200 master

              192.168.1.201sl

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值