五个节点的hadoop集群--主要配置文件

本文详细介绍了Hadoop集群的配置过程,包括五个节点的具体角色分配、各节点的配置文件设置及免密发送操作等关键步骤。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

五个节点:配置文件解析:
hadoop01               NameNode 、DataNode、NodeManager
hadoop02     ResourceManager
hadoop03      DataNode NodeManager、SecondaryNameNode
hadoop04      DataNode NodeManager
hadoop05     DataNode NodeManager

配置文件;
namenode:(core-site.xml,这里配哪一台,哪一台启动namenode)hadoop01
ResourceManager(yarn-site.xml,这里配哪一台,哪一台启动ResourceManager)hadoop02
DataNode、NodeManager决定于:slaves文件 01,03,04,05

NameNode
core-site.xml配置hadoop01,hdfs-site.xml下dfs.http.address的value值配置hadoop01

ResourceManager
yarn-site.xml下value值配置hadoop02

SecondaryNameNode:
hdfs-site.xml下dfs.secondary.http.address的value值配置hadoop03
并创建master文件,里面写上hadoop03

DataNode、NodeManager:
slaves文件中写:hadoop01,hadoop03 ,hadoop04 ,hadoop05

免密发送:
在hadoop01,下,发送到hadoop01,hadoop03 ,hadoop04 ,hadoop05(注:namenode启动datanode)
在hadoop01,下,发送到hadoop01,hadoop03 ,hadoop04 ,hadoop05(注:resourcemanager 启动datamanager)

转载于:https://www.cnblogs.com/pingzizhuanshu/p/8964025.html

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值