- 博客(5)
- 资源 (2)
- 收藏
- 关注
原创 Hadoop集群动态添加删除节点
添加:1.首先配置主节点的hdfs-site.xml添加允许和拒绝加入集群的节点列表(如果允许的列表为空默认都允许连接,拒绝的列表为空则代表没有节点拒绝连接集群。拒绝列表的优先级大于允许的优先级)vi /usr/hadoop/hadoop-2.7.7/etc/hadoop/hdfs-site.xml配置文件:<property><name>dfs.hosts</name><value>/h...
2021-08-07 23:53:42
928
原创 ZooKeeper 组件安装配置
1.下载和安装 ZooKeeper [root@master ~]#tar -zxvf /opt/software/zookeeper-3.4.8.tar.gz -C /usr/local[root@master ~]#mv /usr/local/src/zookeeper-3.4.8 /usr/local/zookeeper2.ZooKeeper 的配置选项 2.1. 步骤一:Master 节点配置 (1)在 ZooKeeper 的安装目录下创建 data 和 logs 文件...
2021-07-31 11:06:15
457
原创 Hadoop完全分布式集群搭建(2.7.7)
完全分布式:真正的分布式,由3个及以上的实体机或者虚拟机组成的机群。一个Hadoop集群环境中,NameNode,SecondaryName和DataNode是需要分配在不同的节点上,也就需要三台服务器1.配置JAVA 环境1.1检查系统是否有JDK环境[root@master01jdk1.8]# rpm -qa | grep jdk1.2卸载之前的JDK环境[root@master01jdk1.8]#rpm -e --nodeps 1.3新建文件夹、解压、配置环境变...
2021-07-27 20:01:50
840
原创 Hadoop中hive的安装与配置
1、mysql安装配置1.1.1安装方法一:安装MySQL官方的Yum Repository1)[root@node~]# wget -i -c http://dev.mysql.com/get/mysql57-community-release-el7-10.noarch.rpm2)[root@node~]#yum -y install mysql57-community-release-el7-10.noarch.rpm3)安装MySQL服务器:[root@node~]...
2021-07-25 20:43:11
879
3
原创 Linux安装及配置Hadoop(2.7.7)(含本人踩雷解析)
1、安装配置JDK1.1检查系统是否有JDK环境[root@nodejdk1.8]# rpm -qa | grep jdk1.2卸载之前的JDK环境[root@nodejdk1.8]#rpm -e --nodeps +jdk环境1.3解压、重命名、配置环境变量[hadoop@node~]$sudo tar -zxvf jdk-8u241-linux-x64.tar.gz -C /usr/lib/jvm[root@node hadoop]#cd /usr/lib/jv...
2021-07-24 21:49:13
3215
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人