YARN HA 配置请参考

天涯问路

于 2020-08-19 17:02:56 发布

阅读量379

点赞数

本文链接：https://blog.youkuaiyun.com/S_Alics/article/details/108096251

版权

本文详细介绍了如何配置YARN高可用性。首先，需要更新`yarn-site.xml`配置文件，并分发到所有节点。接着，启动Zookeeper集群，确保HDFS和两个ResourceManager（rm1和rm2）的YARN服务。启动过程中，需手动启动第二个ResourceManager。最后，使用`yarn rmadmin`命令检查服务状态，并通过web界面监控。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

一、文件配置

yarn-site.xml（直接覆盖 configuration 内容）

<configuration>

    <property>
        <name>yarn.nodemanager.aux-services</name>
        <value>mapreduce_shuffle</value>
    </property>

    <!--启用resourcemanager ha-->
    <property>
        <name>yarn.resourcemanager.ha.enabled</name>
        <value>true</value>
    </property>
 
    <!--声明两台resourcemanager的地址-->
    <property>
        <name>yarn.resourcemanager.cluster-id</name>
        <value>cluster-yarn1</value>
    </property>

    <property>
        <name>yarn.resourcemanager.ha.rm-ids</name>
        <value>rm1,rm2</value>
    </property>

    <property>
        <name>yarn.resourcemanager.hostname.rm1</name>
        <valu

最低0.47元/天解锁文章