Hadoop各服务组件如何配置在指定服务器运行

本文详细介绍了如何配置Hadoop中的HDFS集群,包括指定NameNode和DataNode的服务器设置,SecondaryNameNode的配置方法,以及如何通过修改配置文件启动和停止YARN服务。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

HDFS指定服务器运行

修改$hadoop/etc/hadoop/core-site.xml

指定namenode配置服务器
指定datanode配置服务器

修改slaves文件


image.png
secondarynamenode配置服务器

SecondaryNameNode:是由哪个文件中的哪个配置属性指定的呢?
hdfs-site.xml文件中;

        <property>
            <name>dfs.namenode.secondary.http-address</name>
            <value>hadoop-senior.ibeifeng.com:50090</value>
        </property>

yarn指定服务器运行

停止dfs服务

报错原因是没有配置hadoop-env.sh中的环境变量。

image.png

停止yarn服务

image.png

停止mapreduces的jobhistory

image.png
image.png
执行命令
sbin/mr-jobhistory-daemon.sh stop historyserver
image.png

启动所有服务

由于我们是伪分布式,所有的服务阶段在同一台服务器上。所以可以使用start-all.sh命令

启动历史MapReduce服务

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值