HADOOP游泳笔记＜持续更新中...＞

---

模板虚拟机（vbox）

安装

4GB内存50GB硬盘
centos7.5完整的DVD包：CentOS-7.5-x86_64-DVD-1804.iso
添加dvorak键盘
选择GNOME的安装选项，因为需要窗口界面配置两个网卡，以及各种工具

网络配置

网卡1 仅主机网络
地址192.168.10.1/24
DHCP开启
网卡2 网络地址转换NAT
主机使用有线网络，不要使用WIFI

在图形界面配置网址

192.168.10.100
255.255.255.0
192.168.10.1

安装软件

ping www.baidu.com
ip addr
yum install -y epel-release（没有安装上）
yum install -y net-tools
yum install -y vim

防火墙

systemctl stop firewalld
systemctl disable firewalld.service

sudo免密

useradd marui
passwd marui
vim /etc/sudoers

## Allow root to run any commands anywhere
root ALL=(ALL) All

## Allows people in group wheel to run all commands
%wheel ALL=(ALL) ALL
marui ALL=(ALL) NSPASSWD:ALL

目录

mkdir /opt/module
mkdir /opt/software
chown marui:marui /opt/module/
chown marui:marui /opt/software/

卸载自带的JDK

rpm -qa | grep -i java | xargs -n1 rpm -e --nodeps
reboot

克隆虚拟机102

配置网络地址

不需要，直接在图形化界面里改一下ip地址即可

su root
vim /etc/sysconfig/network-scripts/ifcfg-ens33
dhcp->static
BOOTPROTO="static"
IPADDR=192.168.10.102
GATEWAY=192.168.10.1
DNS1=192.168.10.1

配置主机名称

vim /etc/hostname
HADOOP102

主机映射

vim /etc/hosts
192.168.10.100 hadoop100
192.168.10.101 hadoop101
192.168.10.102 hadoop102
192.168.10.103 hadoop103
192.168.10.104 hadoop104
192.168.10.105 hadoop105
192.168.10.106 hadoop106
192.168.10.107 hadoop107
192.168.10.108 hadoop108
reboot

win10主机映射

C:\Windows\System32\drives\etc\hosts
192.168.10.100 hadoop100
192.168.10.101 hadoop101
192.168.10.102 hadoop102
192.168.10.103 hadoop103
192.168.10.104 hadoop104
192.168.10.105 hadoop105
192.168.10.106 hadoop106
192.168.10.107 hadoop107
192.168.10.108 hadoop108

JDK

ls /opt/software/
hadoop-3.1.3.tar.gz
jdk-8u212-linux-x64.tar.gz
tar zxvf jdk-8u212-linux-x64.tar.gz -C /opt/module/
sudo vim /etc/profile.d/my_env.sh

#JAVA_HOME
export JAHA_HOME=/opt/module/jdk1.8.0_212
export PATH=$PATH:$JAVA_HOME/bin

source /etc/profile
java -version（注意一个减号）
reboot

hadoop

tar zxvf hadoop-3.1.3.tar.gz -C /opt/module
/etc/profile.d/my_env.sh

#HADOOP_HOME
export HADOOP_HOME=/opt/module/hadoop-3.1.3
export PATH=$PATH:$HADOOP_HOME/bin
export PATH=$PATH:$HADOOP_HOME/sbin

source /etc/profile
hadoop version（没有减号）
reboot