HAWQ配置之HDFS HA

最新推荐文章于 2022-10-28 22:32:04 发布

weixin_33795743

最新推荐文章于 2022-10-28 22:32:04 发布

阅读量400

点赞数

本文详细介绍了如何在Ambari管理界面启用HDFS的高可用性(HA)，并通过修改HAWQ配置文件实现与HA NameNode的集成。步骤包括在Ambari中启用HDFSHA，修改HAWQ的hdfs-client.xml和hawq-site.xml文件以支持HA配置，最后重新启动HAWQ集群。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

一、在ambari管理界面启用HDFS HA

在ambari中这步很简单，在所有安装的服务都正常之后，在HDFS的服务界面中，点击下拉菜单“Actions”，选择启用HDFS HA项 “Enable NameNode HA”，然后根据提示向导一步一步的认真做就可以了。尤其需要注意的是手动操作的环节不用出错。

二、修改HAWQ的配置文件

1，修改hdfs-client.xml有关HA的项目

        <property>
                <name>dfs.nameservices</name>
                <value>epbdcluster</value>
        </property>

        <property>
                <name>dfs.ha.namenodes.epbdcluster</name>
                <value>nn1,nn2</value>
        </property>

        <property>
                <name>dfs.namenode.rpc-address.epbdcluster.nn1</name>
                <value>ep-bd01:8020</value>
        </property>

        <property>
                <name>dfs.namenode.rpc-address.epbdcluster.nn2</name>
                <value>ep-bd05:8020</value>
        </property>

        <property>
                <name>dfs.namenode.http-address.epbdcluster.nn1</name>
                <value>ep-bd01:50070</value>
        </property>

        <property>
                <name>dfs.namenode.http-address.epbdcluster.nn2</name>
                <value>ep-bd05:50070</value>
        </property>

2，修改hawq-site中的HDFS URL

        <property>
                <name>hawq_dfs_url</name>
                <value>epbdcluster/hawq</value>
                <description>URL for accessing HDFS.</description>
        </property>

3，同步修改后的配置文件到所有节点

gpscp -f slaves hawq-site.xml =:/opt/gpadmin/apache-hawq/etc/.
gpscp -f slaves hdfs-client.xml =:/opt/gpadmin/apache-hawq/etc/.

三、重新启动hawq集群

在hawq的master主机上执行重启命令

su - gpadmin
hawq restart cluster -a