Hadoop 服务器基础环境搭建

虚拟机linux使用的是centos7操作系统

1. 安装sz rz工具，用于以后用rz sz上传下载文件

yum install -y lrzsz

2. 安装系统常用软件

yum install -y openssh-server vim gcc gcc-c++ glibc-headers bzip2-devel lzo-devel curl wget openssh-clients zlib-devel autoconf automake cmake libtool openssl-devel fuse-devel snappy-devel telnet unzip zip net-tools.x86_64

3. 将原来的yum源配置进行备份

mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base_repo_bak

4. 使用国内阿里云镜像

• # CentOS 5

• wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-5.repo

• # CentOS 6

• wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-6.repo

• # CentOS 7

• wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo

5. 删除以前yum配置下的所有缓存数据并根据新的yum源配置新建缓存

yum clean all && yum makecache

6. 更新系统中的一个或多个软件包

yum update -y

 

7. 关闭防火墙

查看防火墙状态firewall-cmd --state
关闭防火墙systemctl stop firewalld.service
禁止防火墙开机启动 systemctl disable firewalld.service
查看服务是否开机启动 systemctl is-enabled firewalld.service

8. 修改主机名

hostnamectl set-hostname nn1.hadoop
修改完成之后用hostname查看

9. 创建hadoop用户

useradd hadoop

10. 修改hadoop用户密码

用passwd hadoop命令并且输入密码
或者用echo "hadoop666" | passwd --stdin "hadoop"命令直接修改密码

11. 给hadoop用户，配置SSH密钥

su hadoop 切换到hadoop用户
mkdir ~/.ssh  创建.ssh目录
ssh-keygen -t rsa -f ~/.ssh/id_rsa -P ''  生成ssh公私钥
cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys  输出公钥文件内容并且重定向到~/.ssh/authorized_keys文件中
chmod 700 ~/.ssh   给~/.ssh文件加上700权限
chmod 600 ~/.ssh/authorized_keys   给~/.ssh/ authorized_keys加上600权限

12. 使用root用户关闭selinux

查看关闭状态
/usr/sbin/sestatus -v
关闭方法
vim /etc/selinux/config
把文件里的SELINUX=disabled

重启服务器
reboot
启动之后用
/usr/sbin/sestatus -v 查看selinux的修改状态

13. 安装JDK

用rz命令将jdk-8u73-linux-x64.rpm文件上传文件到当前用户的home目录"~"
用rpm -ivh jdk-8u73-linux-x64.rpm进行安装

执行完上面的命令，一个基础的linux系统就配置好了。然后把这个虚拟机导出，再根据这个导出的虚拟机创建3个linux系统。并用hadoop用户，测试彼此之间是否能进行ssh通信

 

本文采摘自海牛部落－青牛,http://hainiubl.com/topics/79