amingo_ss的博客

YARN-HA高可用环境搭建 主要内容YARN-HA高可用环境搭建1.YARN HA实现原理2.YARN HA高可用集群搭建2.1.配置YARN（yarn-site.xml）2.2 启动YARN HA高可用集群2.3.模拟ResourceManager宕机，手动杀死进程 1.YARN HA实现原理 *启动两个ResourceManager后分别向Zookeeper注册，通过Zookeeper管理他们的状态，一旦状态为Active的ResourceManager无法正常提供服务，Zookeeper将会立即将

HDFS HA NameNode高可用集群搭建 主要内容HDFS HA NameNode高可用集群搭建1.安装并配置Zookeeper集群2.配置HDFS（hdfs-site.xml）3.配置Hadoop公共属性（core-site.xml）4.启动HDFS HA高可用集群5.测试NameNode HA自动切换6.常见问题 1.安装并配置Zookeeper集群 参考：https://blog.youkuaiyun.com/amingo_ss/article/details/104326593 2.配置HDFS（hdfs

Ubuntu16.04下Hive的本地安装与配置 1.系统环境 os : Ubuntu 16.04 LTS 64bit jdk : 1.8.0_161 Hive:hive-2.3.6 Mysql: Hive 下载地址：https://mirror.bit.edu.cn/apache/hive/ 2.安装步骤 2.1安装mysql mysql在Hive环境中用于记录元数据。记录的元数据包括：表名与结...

Ubuntu16.04下Hbase集群模式的本地安装与配置 1.系统环境 os : Ubuntu 16.04 LTS 64bit jdk : 1.8.0_161 hbase:hbase-1.2.6 Zookeeper:apache-zookeeper-3.5.6 Hbase 下载地址：http://archive.apache.org/dist/hbase/1.2.6/ 2.安装步骤 2.1修改...

Ubuntu16.04下Zookeeper集群模式的本地安装与配置 1.安装环境： os : Ubuntu 16.04 LTS 64bit jdk : 1.8.0_161 zookeeper:apache-zookeeper-3.5.6 zookeeper有单机、伪集群、集群三种部署方式。 单机：一个服务器 伪集群:在一个服务器部署多个zookeeper 集群：多个服务器，一个服务器上部署一个zo...

Ubuntu16.04下Hadoop的本地安装与配置 一、系统环境 os : Ubuntu 16.04 LTS 64bit jdk : 1.8.0_161 hadoop : 2.6.4 部署时使用的用户名为hadoop，下文中需要使用用户名的地方请更改为自己的用户名。 准备工具： VMware Workstation:创建虚拟机 FileZilla :FTP工具 SecureCRT ：SSH远程...