
Big-Data
石兴稳
车轮塑造形体,技术改变生活
展开
-
Hadoop集群安装
###修改hostname all node hostnamectl set-hostname master hostnamectl set-hostname slave1 hostnamectl set-hostname slave2 hostnamectl set-hostname slave3 ##master 到 salve 做无密码认证 ssh-keygen ssh-cop...原创 2019-02-21 15:10:45 · 558 阅读 · 0 评论 -
Hive 安装
##安装数据库 单独一个数据库节点 192.168.x.121 mysql yum install mariadb-server -y ##数据库配置如下 /etc/my.cnf [mysqld] datadir=/var/lib/mysql socket=/var/lib/mysql/mysql.sock character_set_server = utf8 symbolic-li...原创 2019-02-21 15:55:16 · 154 阅读 · 0 评论 -
Kafka/Zookeeper 集群安装
kafka zookeeper 安装 192.168.x.127 zk1 kafka1 192.168.x.130 zk2 kafka2 192.168.x.135 zk3 kafka3 设置 /etc/hosts 192.168.x.127 zk1 kafka1 192.168.x.130 zk2 kafka2 192.168.x.135 zk3 kafka3 设置 主机名 ...原创 2019-02-21 16:05:33 · 160 阅读 · 0 评论 -
Storm集群安装
@@@@@storm 安装 192.168.x.138 storm1 192.168.x.148 storm2 192.168.x.120 storm3 每台机器挂一个盘,作为数据盘 设置主机名 hostnamectl set-hostname storm1 storm2 storm3 ##ntp 时间认证服务 for i in storm1 storm2 storm3;do ss...原创 2019-02-21 16:38:01 · 151 阅读 · 0 评论 -
Spark 集群安装
@@spark 安装 @这三台机器当做hadoop 的客户端,需要把 hadoop 的文件全部导入这个三台机器 /etc/hosts 设置 192.168.x.87 spark1.sxw.com spark1 192.168.x.145 spark2.sxw.com spark2 192.168.x.147 spark3.sxw.com spark3 设置主机名 hostname...原创 2019-02-21 16:46:17 · 151 阅读 · 0 评论 -
tez 工具安装
tez 安装 1.##下载maven 工具 wget http://mirrors.shu.edu.cn/apache/maven/binaries/apache-maven-3.1.1-bin.tar.gz tar -zxvf apache-maven-3.1.1-bin.tar.gz #设置环境变量/etc/profile export MAVEN_HOME=/usr/local/...原创 2019-02-21 16:52:44 · 823 阅读 · 0 评论 -
Hbase 集群安装
@ 安装Hbase 重新创建三个节点 192.168.x.75 hbase1.sxw.com hbase1 192.168.x.124 hbase2.sxw.com hbase2 192.168.x.141 hbase3.sxw.com hbase3 @设置hosts 三个节点 192.168.x.75 hbase1.sxw.com hbase1 192.168.x.124 hbas...原创 2019-02-21 16:58:32 · 149 阅读 · 0 评论 -
Sqoop 工具安装
@@sqoop 安装 安装在namenode 节点上 也就是master 节点上 192.168.xx.51 wget https://mirrors.tuna.tsinghua.edu.cn/apache/sqoop/1.4.7/sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.t...原创 2019-02-21 17:02:47 · 499 阅读 · 0 评论 -
ELK集群安装
#!/bin/bash Top 图 ##ELK 集群安装 master-node 192.168.x.29 :es,jdk,kibana data-node1 192.168.x.35 :es,jdk,logstash data-node2 192.168.x.38 :es,jdk 版本信息 jdk 1.8 Elasticsearch-6.0.0 logsta...原创 2019-02-21 17:20:44 · 478 阅读 · 0 评论