centos7 集群配置常用命令 | 更新中

最新推荐文章于 2024-06-24 09:29:30 发布

原创最新推荐文章于 2024-06-24 09:29:30 发布 · 404 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#hadoop #大数据 #linux

启动集群（关闭命令–就把 start 改成 stop 即可）

[root@hadoop101 hadoop-2.7.2]# sbin/hadoop-daemon.sh start namenode

[root@hadoop101 hadoop-2.7.2]# sbin/hadoop-daemon.sh start datanode

[root@hadoop101 hadoop-2.7.2]# sbin/yarn-daemon.sh start resourcemanager

[root@hadoop101 hadoop-2.7.2]# sbin/yarn-daemon.sh start nodemanager

[root@hadoop101 hadoop-2.7.2]# sbin/mr-jobhistory-daemon.sh start historyserver

常用配置文件和配置内容：

#hadoop-env.sh，yarn-env.sh，mapred-env.sh
都要配置$JAVA_HOME的路径 （查看路径‘echo $JAVA_HOME’）

#core-site.xml
<!-- 指定HDFS中NameNode的地址 -->
<!-- 指定Hadoop运行时产生文件的存储目录 -->

#hdfs-site.xml
<!-- 指定HDFS副本的数量 -->

#yarn-site.xml
<!--Reducer获取数据的方式 -->
<!-- 指定YARN的ResourceManager的地址 -->

<!--日志聚集功能 -->
<!--日志保留时间设置7天 -->

#mapred-site.xml--对mapred-site.xml.template重命名为mapred-site.xml
<!--指定MR运行在YARN上 -->
<!--历史服务器端地址 -->
<!--历史服务器web端地址 -->