大数据分析竞赛——基础配置_大数据分析赛

以下内容引用自

大数据分析赛 - 基础配置-优快云博客https://blog.youkuaiyun.com/j256904767/article/details/130896884

一、防火墙

关闭防火墙
查看防火墙状态

systemctl stop firewalld    #关闭防火墙
systemctl disable firlewalld  #关闭防火墙开机启动

二、修改主机名

hostnamectl set-hostname master

hostnamectl set-hostname slave1

hostnamectl set-hostname slave2

三、添加映射

虚拟机添加映射

vim /etc/hosts

master内网IP master 
slave1内网IP slave1 
slave2内网IP slave2

四、修改为上海时间

tzselect

5（选择Asia）
9(China)
1(Beijing)
1(yes)

# 复制出现的参数

vim /etc/profile

（G 光标跳到最后一行）

粘贴

source /etc/profile

date

五、修改NTP配置

环境已经安装NTP,修改master节点NTP配置，设置master为本地时间服务器，屏蔽默认server,服务器层级设为10

vim /etc/ntp.conf

# 屏蔽默认（注释掉），添加以下内容

server 127.127.1.0

fudge 127.127.1.0 stratum 10 # 服务器层级10

# slave主机中：

# 同步master

ntpdate master

六、开启NTP

开启NTP服务

systemctl restart ntpd.service

七、添加定时任务

添加定时任务-在早十-晚五时问段内每隔半个小时同步一次本地服务器时间(24小时制.使用用户root任务调度crontab,服务器地址使用主机名)

ntp绝对路径 :

 whereis ntpdate

crontab -e


*/30 10-17 * * * ntp绝对路径 master

crontab -l # 查看

八、生成公钥文件

主节点生成公钥文件id_rsa.pub(数字签名RSA,用户root,主机名master)

ssh-keygen

cd .ssh
ls # 查看

九、master免密登陆

ssh-copy-id -i id_rsa.pub master

ssh master

exit

ssh localhost

exit
ls
cat known_hosts

十、slave1免密登陆

建立master使用root用户到slave1的ssh免密登录访问

ssh-copy-id -i id_rsa.pub slave1

ssh slave1 # 验证 
exit # 退出

十一、slave2免密登陆

建立master使用root用户到slave2的ssh免密登录访问

ssh-copy-id -i id_rsa.pub slave2

ssh slave2 # 验证 
exit # 退出

十二、解压jdk

将jdk安装包解压到/usr/java目录（安装包存放于/usr/package277/，路径自行创建。解压后文件夹为默认名称，其他安装同理）

# 创建目录
cd /usr/
mkdir java

# 解压

tar -zxvf jdkXXX.tar.gz -C /usr/java/


# 查看jdk路径并记录
cd /usr/java/jdk # 快速补全：按tab键 在按enter
pwd # 复制jdk路径并记录

十四、配置Java环境变量

master主机：

vim /etc/profile

# Java env
export JAVA_HOME=/usr/java/jdk1.8.0 # 根据自身jdk位置修改
export JRE_HOME=$JAVA_HOME/jre
export CLASSPATH=$JAVA_HOME/lib
export PATH=$PATH:$JAVA_HOME/bin

# 生效变量
source /etc/profile

# 查看JDK版本
java -version

分发

# master 主机中
scp -r /usr/java root@slave1:/usr/
scp -r /usr/java root@slave2:/usr/

scp /etc/profile root@slave1:/etc/
scp /etc/profile root@slave2:/etc/

# slave1 slave2主机中
source /etc/profile
source /etc/profile