大数据学习之 Hadoop部署

Hadoop部署

• Linux桌面模式关闭

  # 设置
  systemctl set-default multi-user.target
  # 重启
  reboot
  

• 防火墙关闭

  systemctl status firewalld
  systemctl stop firewalld
  # 关闭开机自启
  systemctl disable firewalld
  

• 配置Java环境

  echo $JAVA_HOME
  java -version
  # Java配置
  # 上传jar包并解压
  tar -zxvf ...jdk.jar
  # 配置环境变量
  vim /etc/profile
  JAVA_HOME=/usr/local/soft/jdk1.8.0_171
  export PATH=$JAVA_HOME/bin:$PATH
  

• 网络环境

  # 查看IP
  ifconfig
  # 修改网络IP
  vim /etc/sysconfig/network-scripts/ifcfg-ens33
    1 TYPE=Ethernet
    2 PROXY_METHOD=none
    3 BROWSER_ONLY=no
    4 BOOTPROTO=static
    5 DEFROUTE=yes
    6 IPV4_FAILURE_FATAL=no
    7 IPV6INIT=yes
    8 IPV6_AUTOCONF=yes
    9 IPV6_DEFROUTE=yes
   10 IPV6_FAILURE_FATAL=no
   11 IPV6_ADDR_GEN_MODE=stable-privacy
   12 NAME=ens32
   13 UUID=9d8db489-1d03-49dd-9a72-c106b667af6a
   14 DEVICE=ens32
   15 ONBOOT=yes
   16 IPADDR=192.168.44.100
   17 netmask=255.255.255.0
   18 GATEWAY=192.168.44.2
  
  # 关闭网络管理器
  systemctl status NetworkManager
  systemctl stop NetworkManager
  systemctl disable NetworkManager
  

• 修改主机名称

  vim /etc/hostname
  在当前虚拟机中设置Master
  之后克隆的三个节点需要设置node1 node2
  

• 克隆另外两台从节点 node1 node2

  选中当前节点 关机 -> 右键 ->管理 -> 克隆 -> 当前状态 -> 创建完整克隆 -> 选择路径修改名称 -> 完成

  注意：选中的路径最好是 SSD 固态 同时磁盘空间三个节点最少保证大于70G

• 修改克隆主机 一定要修改

  先启动node1节点,配置好之后再启动node2

  1.修改网络

  2.修改主机名

• 修改IP映射

  当node1 node2 配置完成后，再启动Master 修改IP映射

  vim /etc/hosts
  # 安装自己的IP修改映射关系 
  192.168.44.100 master
  192.168.44.110 node1