Apache Yarn 高可用安装

最新推荐文章于 2025-08-28 15:20:36 发布

原创

最新推荐文章于 2025-08-28 15:20:36 发布 · 1.3k 阅读

2 ·

CC 4.0 BY-SA版权

文章标签：

#yarn #hadoop

本文详细介绍了如何在Hadoop 2.7.4版本上搭建Apache YARN的高可用集群，包括环境准备、配置文件设置，以及启动和测试过程。重点关注YARN的HA配置，如Zookeeper集群、ResourceManager的HA设置和故障切换。

1. 环境准备

安装好hadoop-2.7.4版本高可用集群

安装好zookeeper-3.4.10版本集群

2.配置文件

需要修改yarn-site文件，ha id 是否需要根据不同机器改变尚未明确。

<configuration>
   <property>
       <name>yarn.resourcemanager.connect.retry-interval.ms</name>
       <value>2000</value>
   </property>
   <property>
       <name>yarn.resourcemanager.ha.enabled</name>
       <value>true</value>
   </property>
   <property>
       <name>yarn.resourcemanager.ha.rm-ids</name>
       <value>rm1,rm2</value>
   </property>
   <property>
       <name>ha.zookeeper.quorum</name>
       <value>10.0.33.222:2181,10.0.33.223:2181,10.0.33.224:2181</value>
   </property>
   <property>
       <name>yarn.resourcemanager.ha.automatic-failover.enabled</name>
       <value>true</value>
   </property>
   <property>
       <name>yarn.resourcemanager.hostname.rm1</name>
       <value>10.0.33.222</value>
   </property>
   <property>
       <name>yarn.resourcemanager.hostname.rm2</name>
     &nbs