虚拟机之前部署过（2.7.3版本），略！kafka_2.13-3.2.0.tgz下载地址，速度比较快，如果不行，只能去官网下载了。查看topic命令查看具体topic内容命令🍊2.3、hive自行官网下载，有积分的花两分快速下载此次主要是增加变量，其路径部署atlas时会涉及到bin/hive指定hbase添加hooks（还需要部署MySQL哟，也可以不部署，采用内嵌模式-应该不影响采集吧，尝试的越多越感觉无知）conf/atlas-application.proper.

准备布一个hadoop的伪分布式集群(三台虚拟机master，slave1，slave2)1.操作系统：    Linux：  CentOS7 64 Bit    Java：   1.8(自己下载了tar包，自带的配置起来较麻烦)    Hadoop： 2.7.5(下载地址：https://blog.youkuaiyun.com/qq_36434219/article/details/80669692 )  ...

1.建议搭建之前先禁用防火墙（遇到过slave的nodemanager会自动关闭，日志说获取不到主机路由问题，通过关闭防火墙即可，我的linux是centos7）：    关闭防火墙：systemctl stop firewalld.service     禁用防火墙：systemctl disable firewalld.service 2.格式化nodename报错：1）.原因是配置文件.ba...

一 安装zookeeper1.环境：hadoop+spark详情参考如下地址https://blog.youkuaiyun.com/qq_36434219/article/details/807161892.下载zookeeper-3.4.10.tar.gz包,jdk1.83.解压（本人特意建了一个用户）4.创建data和logs目录5.修改配置文件(可以先配置hosts文件，...

Spark高可用：https://blog.youkuaiyun.com/qq_36434219/article/details/80961183Hadoop和Spark集群搭建：https://blog.youkuaiyun.com/qq_36434219/article/details/80716189 HA集群部署：主机名      安装的软件                           运...

1.命令hdfs dfsadmin -report                         // 查看hdfs的各节点状态信息hdfs haadmin -getServiceState nn1   // 获取一个namenode节点的HA状态hadoop-daemon.sh start namenode  // 单独启动一个namenode进程hadoop-daemon.sh s...