大数据环境搭建

最新推荐文章于 2025-07-03 11:37:37 发布

原创最新推荐文章于 2025-07-03 11:37:37 发布 · 423 阅读

2 ·

CC 4.0 BY-SA版权

文章标签：

#环境搭建

若泽大数据环境搭建专栏收录该内容

1 篇文章

订阅专栏

1配置的需求

虚拟机：VMware Workstation
在这里插入图片描述
操作系统：CentOS-6.5-x86_64-bin-DVD1.iso

2环境搭建

（1）虚拟机安装

点击创建新的虚拟机

点击自定义，然后下一步

默认的wordstation10.0，然后点击下一步
在这里插入图片描述

选择稍后安装操作系统，下一步
在这里插入图片描述

客户操作系统选择：Linux（L），版本：centOS 64位，然后下一步
在这里插入图片描述

虚拟机名称：Hadoop002，存储位置选择，需注意选择剩余内存大于几十G的磁盘，我是创建一个和虚拟机名称同步的文件夹进行放入，设置好然后点击下一步
在这里插入图片描述

默认，下一步
在这里插入图片描述

此处我配置的是最低2G，然后点击下一步
接下来4处默认系统配置，点击下一步，直到指定磁盘容量处，需进行选择
在这里插入图片描述

最大磁盘大小设置 40G ，选择将虚拟磁盘拆分成多个文件，然后点击下一步
在这里插入图片描述

点击下一步直至完成
在这里插入图片描述

完成如图
在这里插入图片描述

2 安装 ISO 镜像文件

点击编辑虚拟机设置
在这里插入图片描述

第一步点击CD/DVD，第二步点击使用ISO映像文件，浏览找到你之前下载ISO镜像文件存放的位置，然后点击确定。
在这里插入图片描述

3 安装操作CentOs

点击开启虚拟化
在这里插入图片描述

选择第一个（existing system），按enter 回车键
在这里插入图片描述

选择 skip 跳过检查,接下来再选择OK，然后耐心等待
在这里插入图片描述

直至出现此界面，选择NEXT下一步
在这里插入图片描述

选择语言，然后下一步选择us.English，下一步默认直接点击next下一步进入下个界面
在这里插入图片描述

问我们选择划分的40G里面还有其他文件，是否要。我们选择YES，不要了，然后next下一步
在这里插入图片描述

设置机器名，我这里暂时不设置，选择next下一步
在这里插入图片描述

这里选择离本地时区最近的城市，我这里选择的是重庆，然后next下一步
在这里插入图片描述

设置管理员root账号的密码，两个地方都一样，然后next。
我是因为设置的密码过于简单，出现提示，选择use anyway
在这里插入图片描述

选择安装类型，选择最后一个，自定义部署
在这里插入图片描述

40G的磁盘空间进行划分，具体操作：
/boot：create——Standard partition——create——/boot——OK
swap：reate——Standard partition——create——file system type里选择swap——size（MB）设置成2048——OK
/（根目录）：reate——Standard partition——create——mount point（填入/）——additional size options 选择fill to maximum allowable size 剩余的全部分配给根目录——OK
分别部署：/boot、swap、/三个文件夹如图完成后选择next下一步
在这里插入图片描述

在这里插入图片描述

问我们是否格式化，单击 format 格式化
在这里插入图片描述

问我们刚刚配置的是否写入磁盘，单击write changes to disk ，然后next下一步，耐心等待，进入下面界面
在这里插入图片描述

默认，点击next下一步
在这里插入图片描述

其他默认，标红处进行选择：立即安装，next下一步
在这里插入图片描述

正式开始安装，默认，点击next下一步
在这里插入图片描述

安装中，1098，耐心等待
在这里插入图片描述

welcome 欢迎你代表安装完毕，然后点击forward前进下一步
在这里插入图片描述

然后点击forward前进下一步
在这里插入图片描述

相对应的输入，然后点击forward前进下一步
在这里插入图片描述

我的密码过于简单，所以出现警示，点击YES进行下一步
在这里插入图片描述

设置当前时间，相对应的填入
在这里插入图片描述

将enable kdump前√去掉，然后点击下一步
在这里插入图片描述

点击YES
在这里插入图片描述

点击OK 接下来再次重启
在这里插入图片描述

到这 CentOS系统安装完毕
在这里插入图片描述

3 环境参数配置

重要提醒：window，Linux相互切换
window进入Linux 鼠标左键单击Linux 进入
Linux退回到window ctrl+alt

vi编辑：
1.按i键进入insert编辑模式
2.正常内容增加删除修改
3.按ecs键退出进入命令模式
4.按 shift+: 进入尾行模式输入 wq 保存退出
5.按回车键结束

Tab快捷键使用：
按tab键 1次自动补全
1次无响应——就按2次——会输出相关的所有匹配

（1）修改CentOS 主机名
A: vi /etc/sysconfig/network 编辑完需重启后生效

B: hostname XXX 直接命名立即生效重开一个界面就能看到

C: vi /etc/hosts 进入编辑后输入外网IP和需修改的机器名，然后退出保存

4 CentOS 配置静态IP和可访问外网

(1) 关闭windows 防火墙
在这里插入图片描述
（2）关闭CentOS 防火墙

（3)接下来输入：chkconfig iptables off iptables -F然后开启VMware两个服务如若输入命令维度未跳入，自己到Windows找到计算机管理，然后找到服务

（4）无线网卡的网络(或者插网线的网络)上设置网络共享
在这里插入图片描述
（5）使用 ipconfig -all 命令查看 DNS 、IPv4

（6）配置 VM的选择使用配置 ip

（7）进入 vm, 单击菜单栏的编辑–>虚拟网络编辑器然后如图操作设置

（8） hadoop002 配置 NAT

（9）进入hadoop002编辑，ifcfg-eth0