离风的博客

版权声明：本文为FromTheWind原创文章，转载请注明出处。https://blog.youkuaiyun.com/FromTheWind/article/details/84105907 内网安装的CentOS7系统最小安装默认不会安装psmisc（fuser等命令的rpm包），导致测试namenode高可用时kill掉namenode active后namenode standby不会自主切换为na...

版权声明：本文为FromTheWind原创文章，转载请注明出处。https://blog.youkuaiyun.com/FromTheWind/article/details/84106341 dfs.ha.fencing.methods配置有sshfence和shell两种方法： sshfence：防止namenode脑裂，当脑裂时，会自动通过ssh到old-active将其杀掉，将standby切换为...

在配置 hadoop 的 yarn 高可用时，初学时理所应当认为 hadoop 的所有所有节点的 site 等配置文件是一致的，但是这里要强调一点，yarn-site.xml 的 yarn.resourcemanager.ha.id 属性在 2 台 resourcemanager（同namenode）节点的值是不能一样的，如果一样会出现：java.net.BindException: Port i...

hadoop集群安装（先安装jdk，zookeeper，再安装hadoop） ①创建hadoop用户 groupadd hadoop #创建hadoop组 useradd -g hadoop hadoop #创建hadoop用户 passwd hadoop ...

各机器做免密配置（https://blog.youkuaiyun.com/FromTheWind/article/details/89887812） 安装jdk（不做介绍） 安装zookeeper 下载导入hadoop-3.1.2.tar.gz 解压：tar zxf hadoop-3.1.2.tar.gz 配置用户环境变量：sed -i '$a\\nexport HADOOP_HOME=/home/hadoo...

zookeeper协调服务安装 一、cp zookeeper安装包到系统中 二、解压 cd /soft tar -zxvf zookeeper-*** 三、创建软链接 （给用户赋权限：chown -R group:user zookeeper-**） ln -s zookeeper-*** zookeeper 四、修改环境变量 vi /home/**...