CentOS7配置Hadoop-3.1.3存在的问题及总结

问题一:没有配置SSH导致部分节点不能启动

没有配置SSH导致secondarynamenode节点,datanode节点无法启动
解决方法:

1. 查看主机名
   hostnamectl
   

2.进行ssh配置

ssh localhostname  #这里的localhostname指的是自己的主机名
exit                           # 退出之前的 ssh localhost
cd ~/.ssh/                     # 若没有该目录，请先执行一次ssh localhost
ssh-keygen -t rsa              # 会有提示，一直按回车即可
cat ./id_rsa.pub >> ./authorized_keys  # 加入授权
chmod 600 authorized_keys      # 更改文件权限

问题二 因权限问题无法创建logs文件夹

在初始化时报错因权限问题无法创建logs文件夹
解决方法:

sudo chown -R  localhostname /opt/module/hadoop-3.1.3/
#这里的localhostname是主机名

有了logs文件夹，改bug速度得到加快

问题三 Hadoop文件配置出问题

主要配置三个文件
1、配置core-site.xml

<configuration