文章目录
关于此篇(题外话)
目前,作者也还是一名默默无闻的大学生,之所以写这篇文章,主要是最近接到了不少朋友的求助,他们在搭建hadoop集群时,出现了不少的问题,以至于无法成功搭建。这里统一写一份部署教程,帮助一些读者朋友解决一些微不足道的问题,也将hadoop集群的搭建流程及错误处理作以留存。好了,闲话少说,进入正题。
关于hadoop集群部署和相关软件的资料,可在相关资料一栏下,自行提取使用。
Linux系统搭建hadoop高性能集群(一)
相关软件版本
虚拟机软件:VMware Workstation15.5
Linux系统:CentOS-6.10
第一步 虚拟机的安装
这里不再详述,不会的小伙伴可以选择百度或优快云下查找相应的安装方法。
第二步 创建一个虚拟机
1、打开VMware软件,点击新建虚拟机,这里有两种方式。
第一种:在主界面上点击创建新的虚拟机
第二种:点击文件按钮在下拉菜单中选择新建虚拟机
进入安装向导后,使用默认安装方式,连续点击下一步直到进入“选择客户机操作系统”,选择Linux,版本选择CentOS 64位;点击下一步后,命名虚拟机并选择安装位置;点击下一步,配置虚拟机的处理器,这里需要根据主机的性能和虚拟机数量配置核数,通常为双核一个处理器;在虚拟机的内存配置中选择默认(推荐);磁盘容量可选择默认也可自行更改。
注意:在创建过程中的ISO安装镜像,选择稍后安装,不要使用自动(简易)安装。
第三步 虚拟机启动初始化
选中刚刚创建好的虚拟机,在CD/DVD(IDE)选项中,选中使用ISO镜像文件,将本机上的CentOS的ISO镜像文件路径填入文本框中,设置完成后,开启此虚拟机。进入系统安装界面后,选择第一条选项(Install or upgrade an existing system),引导驱动加载完成后,进入Disc Found界面,在此界面中选择skip后,选择系统使用的语言,选择完成后在存储设备警告界面选择yes…,设置主机名,设置网络配置,选择自动连接,选择时区,设置密码,在磁盘