龍啓-优快云博客

原创 hadoop2.6.0高可用安装部署

集群规划根据Hadoop的HA架构分析，规划整个集群由5台主机组成，具体情况如下表所示：主机名 IP地址安装的软件 JPS master1 X.X.X.X JDK、Hadoop Namenode、Zkfc、ResourceManager、JobHistoryServer master2 X.X.X.X JDK、Hadoop Namenode、Zkfc、ResourceMa...

2019-07-19 22:01:43 395

原创 Hadoop2.6.0完全分布式安装部署

修改每个节点的主机名 # vi /etc/hostname 在三个节点修改配置hosts文件在hosts文件中分别配置三个节点的主机名 ip地址映射 # vi /etc/hosts 在文件中添加 X.X.X.X master X.X.X.X slave1 X.X.X.X slave2 在master和slave之间配置SSH互信在所有节点创建 # ssh-keygen -t rsa -P ...

2019-07-06 17:38:30 2925

原创 Spark2.0.0安装部署及前置Scala安装

前置Scala安装部署解压安装解压 # tar zxf scala-2.11.8.tgz 重命名 # mv scala-2.11.8 scala 配置环境变量 # vi ~/.bashrc 在文件末尾添加 export SCALA_HOEM=/opt/apps/scala export PATH=$SCALA_HOME/bin:$PATH spark安装部署解压安装解压 # tar...

2019-07-24 10:23:10 324

原创 storm1.2.0安装部署

解压安装解压 # tar zxf apache-storm-1.2.0.tar.gz -C /opt/apps 重命名 # mv apache-storm-1.2.0 storm 配置环境变量 # vi ~/.bashrc 添加 export STORM_HOEM=/opt/apps/storm export PATH=$STORM_HOME/bin:$PATH 修改配置文件 # cd ...

2019-07-21 11:00:00 342

原创 flume1.6.0安装部署及agent实例

解压安装解压 #tar -zxf apache-flume-1.6.0-bin.tar.gz -C /opt/apps 重命名 # mv apache-flume-1.6.0-bin flume 配置环境变量 # vi ~/.bashrc 添加 export FLUME_HOEM=/opt/apps/flume export PATH=$FLUME_HOME/bin:$PATH 修改配置...

2019-07-21 10:52:55 317

须前置安装zookeeper【zookeeper3.4.5安装部署】 Kafka_2.11-1.0.0下载链接【链接：https://pan.baidu.com/s/11B1yO56UzhmxPWG4SGdpEQ 提取码：d2co 】解压安装解压 # tar zxf kafka_2.11-1.0.0.tgz -C /opt/apps 重命名 # mv kafka_2.11-1.0.0 kaf...

2019-07-19 21:24:19 851

原创 Hbase1.2.0安装部署

须前置安装zookeeper，可以参考【zookeeper3.4.5安装部署】 hbase1.2.0下载地址【链接：https://pan.baidu.com/s/1ZYy_yZM5hll2Fl7Va49e5g 提取码：1f0s 】解压安装解压hbase-1.2.0-bin.tar.gz，指定到/opt/apps # tar -zxf hbase-1.2.0-bin.tar.gz -C /op...

2019-07-19 16:05:40 1058

原创 zookeeper3.4.5安装部署

zookeeper3.4.5下载地址【链接：https://pan.baidu.com/s/15svYKxtk5njOvm-rHICYYg 提取码：jbtq 】每个节点都需要安装解压安装解压zookeeper-3.4.5.tar.gz，指定到/opt/apps # tar -zxf zookeeper-3.4.5.tar.gz -C /opt/apps 为解压后的文件夹重命名 # mv...

2019-07-19 11:04:22 425

原创 Linux下安装mysql5.7

查看是否安装MySQL # rpm -qa | grep MySQL 删除所有原有的MySQL，如mariadb-libs： # yum -y remove mariadb-libs-1:5.5.44-2.el7.centos.x86_64 安装MySQL所需的RPM包 # cd /soft/mysql # ls mysql-community-common-5.7.16-1.el7.x86_...

2019-07-17 21:17:14 220

原创 sqoop1.4.3部署及基本使用

解压安装解压sqoop-1.4.3.bin__hadoop-2.0.0-alpha.tar.gz，指定到/opt/apps # tar -zxf sqoop-1.4.3.bin__hadoop-2.0.0-alpha.tar.gz -C /opt/apps 为解压后的文件夹重命名 # mv sqoop-1.4.3.bin__hadoop-2.0.0-alpha sqoop 在master上...

2019-07-17 20:50:12 253

原创 hive1.1.0安装部署MySQL元数据库

解压apache-hive-1.1.0-bin.tar.gz，指定到/opt/apps # tar -zxf apache-hive-1.1.0-bin.tar.gz -C/opt/apps 为解压后的文件夹重命名 # mv apache-hive-1.1.0-bin hive 在master上配置环境变量 # vi ~/.bashrc 在文件末尾添加 export HIVE_HOME=/o...

2019-07-16 13:24:10 533

原创 Windows 多IP设置

Windows 多IP设置打开控制面板，进入网络和共享中心，选择左侧更改适配器设置右键以太网（认准物理网卡）选择属性双击Internet 协议版本4（TCP/IPv4）选择使用下面的的IP地址并点击下面的高级点击上面的添加多个IP地址、点击下面的添加对应网关（IP和网关数量顺序对应）然后点击确定保存即可，需等待一会才能识别网络。 ...

2019-07-04 09:19:47 946

龙少5520的博客