超级会员免费看
本文详细记录了手动配置Hadoop3.x完全分布式集群的过程，包括HDFS、YARN和MAPREDUCE的配置文件修改，以及集群规划和配置文件的同步。在三台机器上进行配置，明确了NameNode、SecondaryNameNode和ResourceManager的分配，并强调了配置文件中关键参数的设置，如fs.defaultFS、hadoop.tmp.dir等。通过xsync工具将配置文件同步到所有节点，确保集群的一致性。
然后搭建好了hadoop都安装好了,在3台机器上,然后我们开始配置,hadoop3.x的 完全分布式集群.
这里我们做一个规划,我们的机器是:
172.19.126.122 HDFS:SecondaryNameNode DataNode Yarn: NodeManager
172.19.126.121 HDFS:DataNode Yarn: ResourceManager NodeManager
172.19.126.120 HDFS:NameNode DataNode Yarn: NodeManager
首先我们做这个规划,可以看到,这个3台机器,我们要知道,HDFS:NameNode 和 secondaryNmaeNode不能在一台机器上
然后ResourceManager也单独在一台机器上,这样就可以了.
然后我们来看一下配置文件,有这些,这些要注意,有默认的配置文件
订阅专栏 解锁全文
扫一扫
2万+
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
