- 博客(11)
- 收藏
- 关注
RSS订阅原创 Hadoop环境配置（11）--flume搭建配置
1.将下载的flume安装包拖至software文件夹下2.将flume安装包解压到/opt/module/文件夹下cd /opt/software/tar -zxvf 安装包名 -C /opt/module/3.修改系统环境变量vi /etc/profile在编辑面板中添加如下代码：export FLUME_HOME=/opt/module/apache-flume-1.9.0-binexport PATH=$PATH:$FLUME_HOME/bin4.重启环..
2021-12-19 16:43:06
1359
原创 Hadoop环境配置（10）--Hbase配置
1.将Hbase安装包拖至/opt/software/文件夹下2.将Hbase安装包解压到cd /opt/module/文件夹中cd /opt/software/tar -zxvf 安装包名 -C /opt/module/3.修改系统环境变量vi /etc/profile在编辑面板中添加如下代码：export HBASE_HOME=/opt/module/hbase-2.2.0export PATH=$PATH:$HBASE_HOME/bin重启环境配置so.
2021-12-19 15:58:41
664
原创 Hadoop环境配置（9）-zookeeper搭建
zookeeper搭建前提关闭防火墙1.将zookeeper安装包拖至cd /opt/software文件夹下2.解压zookeeper到cd /opt/module/文件夹下cd /opt/software/tar -zxvf apache-zookeeper-3.5.5-bin.tar.gz -C /opt/module/3.在解压后的zookeeper文件夹下，创建log文件夹和data文件夹cd /opt/module/apache-zookeeper-3.5.7.
2021-12-18 22:25:17
191
原创 Hadoop环境配置（8）-hive
1.将下载的hive安装包拖至/opt/softwore/中将hive解压到cd /opt/module文件夹下cd /opt/software/tar -zxvf apache-hive-3.1.2-bin.tar.gz -C /opt/module/2.修改系统环境变量vi /etc/profile在编辑面板下添加下面代码export HIVE_HOME=/opt/module/apache-hive-3.1.2-binexport PATH=$PATH:$HA.
2021-12-18 21:56:51
688
原创 Hadoop环境配置（7）-MySQL安装
1.将MySQL安装包拉至/opt/software/文件夹中2.检查系统中是否安装过MySQLrpm -qa|grep mariadbmariadb-libs-5.5.56-2.el7.x86_64 //如果存在通过如下命令卸载3.rpm -e --nodeps mariadb-libs 用此命令卸载mariadb4.将MySQL解压到/opt/module/文件夹下cd /opt/software/tar -zxvf 压缩包名 -C /opt/module/5...
2021-12-18 21:39:04
804
原创 Hadoop环境配置（6）-群起
一、用脚本启动集群1.修改Hadoop文件在Hadoop100上的start-dfs.sh和stop-dfs.sh上最上边添加如下代码：先切换到sbin目录下cd /opt/module/hadoop-3.1.3/sbin进入编辑模式vi start-dfs.sh#进入编辑模式后在顶部添加：HDFS_DATANODE_USER=rootHADOOP_SECURE_DN_USER=hdfsHDFS_NAMENODE_USER=rootHDFS_SECONDARY.
2021-12-18 17:31:42
219
原创 Hadoop环境配置（5）-完全分布式
一、配置核心文件1配置：hadoop-env.sh（在/opt/module/hadoop-3.1.3/etc/hadoop目录下）从Linux系统中获取jdk的安装路径echo $JAVA_HOME#获得jdk的安装路径切换到cd /opt/module/hadoop-3.1.3/etc/hadoop/路径下cd /opt/module/hadoop-3.1.3/etc/hadoop/vi hadoop-env.sh在hadoop-env.sh中修改JAVA_HOME的路径
2021-12-18 17:15:39
714
原创 Hadoop环境配置（4）-伪分布式搭建
HDFS是进行存储的，YARN是进行调度的1.切换到hadoop目录下设置hadoop -env.sh文件cd /opt/module/hadoop-3.1.3/etc/hadoop vi hadoop-env.sh在命令模式下输入/JAVA_HOME后回车，进行查找位置将JAVA_HOME后的路径修改export JAVA_HOME=/opt/module/jdk1.8.0_212#注意将export 前的#删除掉，不然在后面运行时报错2.设置core-site.xm
2021-12-17 16:52:11
457
原创 Hadoop环境配置（3）-虚拟机连接Moba
一、虚拟机连接MobaXterm下载安装MobaXterm1.打开虚拟机Hadoop1002.打开MobaXterm第一格填入虚拟机的IP地址 第二格填入虚拟机的用户名此时连接成功若连接超时则证明无法ping通虚拟机的IP地址，要去查看下虚拟机的IP和防火墙与电脑的防火墙二、本地部署1、在/opt 下创建两个文件夹：software、module2、software：放软件的压缩包module：放软件解压后的文件夹3、切换到software文件夹下...
2021-12-17 16:29:13
1388
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人