因为不想回家，所以还是去搬砖。

1.sudo passws root2.输入当前登录用户的密码3.输入root用户新的密码

一、安装HA模式的hadoop集群    参考：https://blog.youkuaiyun.com/weixin_36104843/article/details/80211215二、去官网下载对应的hive版本    官网：https://mirrors.tuna.tsinghua.edu.cn/apache/hive/    这里用2.2的版本    wget https://mirrors.tuna...

1.安装scala参考：http://blog.youkuaiyun.com/weixin_36104843/article/details/802125172.下载sprakwget http://mirrors.shu.edu.cn/apache/spark/spark-2.3.0/spark-2.3.0-bin-hadoop2.7.tgz3.解压tar -zxvf spark-2.3.0-bin-had...

1.下载 wget wget https://downloads.lightbend.com/scala/2.11.8/scala-2.11.8.tgz 2.解压 tar -zxvf scala-2.11.8.tgz 3.复制到/usr/local下面 mv scala-2.11.8 /usr/local/scala 4.配置环境变量 nano /etc/profile exp

我采用的是外部的zookeeper，而不是kafka自带的 如不知道安装zookeeper的参考：https://blog.youkuaiyun.com/weixin_36104843/article/details/80211404 1.下载 wget http://mirrors.hust.edu.cn/apache/kafka/1.1.0/kafka_2.12-1.1.0.tgz 2.解

我这里使用的是四台服务器master01,master02,slaver01,slaver02 一.sh并修改root密码 参照：https://blog.youkuaiyun.com/weixin_36104843/article/details/80208372 https://blog.youkuaiyun.com/weixin_36104843/article/details/80208345    

集群分四个master01，master02,slaver01,slaver021.先在master01上下载    wget http://mirrors.hust.edu.cn/apache/zookeeper/zookeeper-3.4.12/zookeeper-3.4.12.tar.gz2.解压    tar -zxvf  zookeeper-3.4.12.tar.gz3.复制到/usr/...

1.安装ssh服务- sudo apt install ssh2.ifconfig（如果得到的ip是127.0.0.1，就运行  sudo apt install net-tools）3.修改hostname4.配置需要远程服务器之间的host    nano /etc/hosts    -将原来的127.0.0.1 xxx （xxx原来的名字）删除      添加新的配置 如：        1...

nano /etc/hostname打开配置文件然后将名字改成对应想要的名字xxxx保存退出reboot重启

sudo apt-get install python-software-propertiessudo apt-get install software-properties-commonsudo add-apt-repository ppa:webupd8team/javasudo apt-get updateOracle JDK 6(旧版本)sudo apt-get install oracl...

刚安装的ubuntu系统还没有ssh这需要我们自己动手安装ssh服务以实现xshell连接1.sudo apt install ssh2.sudo apt install net-tools3查看ip ifconfig这时候就可以用得到的ip来进行xshell连接...

一. 搭建Zookeeper集群；    参考：https://blog.youkuaiyun.com/weixin_36104843/article/details/80211404三. 下载并解压Storm发布版本；wget http://mirrors.shu.edu.cn/apache/storm/apache-storm-1.2.1/apache-storm-1.2.1.tar.gztar -zxf...