HA hadoop部署（20211208五节点集群测试跑通版,附带ha-hbase）

官网文档：https://hadoop.apache.org/docs/r2.7.6/hadoop-project-dist/hadoop-hdfs/HDFSHighAvailabilityWithQJM.html

直接参考：https://blog.youkuaiyun.com/aubekpan/article/details/87213303

参考的博客要注意的是，hadoop好像不能直接用root用户组；用core-site.xml 和mapred-site.xml 有snappy压缩的 配置项可能会报出错（native snappy library not available。。。），删除掉就可以了，参考博客高亮了重要部分，不同于secondarynamenode 集群的配置

最后

官网的内容太多，又没给一个可快速部署的例子，需要一部分一部分组合，需要进一步了解清楚各模块。参考博客是快捷部署，可能配置项不全，但是能跑起来。至少要运行 pi计算吧。

HBASE配置-必须在ha-hadoop的基础上配置

hbase-env.sh配置

export JAVA_HOME= 
export HADOOP_HOME= 
export HBASE_MANAGES_ZK=flase

hbase-site.xml配置

<configuration>
	<property>
		<name>hbase.zookeeper.quorum</name>
		<value>m1,m2,s1,s2,s3</value>
	</property>
	<property>
		<name>hbase.zookeeper.property.clientPort</name>
		<value>2181</value>
	</property>	
	<property>
		<!-- hbase在hdfs存放路径 -->
		<name>hbase.rootdir</name>
		<value>hdfs://alterpan/hbase</value>
	</property>	
	<property>
		<!-- 打开完全分布式模式 -->
		<name>hbase.cluster.distributed</name>
		<value>true</value>
	</property>	
	
	<property>
		<name>hbase.zookeeper.property.dataDir</name>
		<value>/tmp/hbase/zookeeper</value>
	</property>	
	
	<property>
		<!-- 这里因为要HMaster的HA，不需要指定域名 -->
		<name>hbase.master</name>
		<value>60000</value>
	</property>
</configuration>

regionservers配置

s1
s2
s3

新建backup-masters文件，并添加备用主节点

m2

总结：版本兼容性，看hbase官网文档，不骗你们，我就是版本不兼容问题卡了好久。hadoop2版本才能用zookeeper选主，hbase兼容版本才能支持hdfs的nameservices的方式。