VMware上启动kafka

一、建立虚拟机

点击新建虚拟机，创建步骤和平时创建的大差不差。可能大家的镜像用的有所差别，这里我用的是centos7的镜像。

创建完后，右键选择可移动设备，打开网络适配器改为桥接模式

二、修改文件

创建完后，右键，选择打开终端。输入命令nano /etc/ssh/sshd_config

进入之后，找到PermitRootLogin yes这一行把注释取消，允许我们的root用户登录。

找到PermitEmptyPasswords no这一行，改为yes，注释取消。

之后ctrl+x后，输入y，然后enter一下，保存成功

输入命令

systemctl reload sshd

systemctl status sshd

三、使用Termora客户端连接

自行到官网下载，这个属于开源的工具。下载解压后双击Termora.exe打开。

在连接之前，确保你做了以下四件事情：

1、网络适配器修改为了桥接模式

2、打开控制面板\网络和 Internet\网络连接，确保你的VMnet8启用

3、清楚自己的ip地址，别跟着我填，每个人的机子的ip大概率都不一样。可以在终端输入ip addr查看，像我的就是192.168.10.114

4、我为了方便，每次登录都是用root的身份登录，这里你们用什么身份登录就填什么用户名，不要跟着我填。

点击右边的方框＋，新建主机，填入。

点击测试连接，弹出连接成功后，点击确定取消弹出框，再点击测试连接旁边的确认。

双击数据采集，连接成功。

四、安装kafka

kafka官网下载：kafka.apache.org/downloads

点击右上角的文件图标（SFTP）左边是你的主机，右边是虚拟机

这里在右边的/root，修改为/home切换到home路径

在主机位置找到你的kafka压缩包的位置，拖到右边上传

上传完就是这样回到连接这里，cd到home目录，ls查看一下压缩包是不是存在

解压kafka， tar -zxvf kafka_2.12-3.6.1.tgz -C /usr/local/

解压完后cd到/usr/local/查看，重命名一下，mv kafka_2.12-3.6.1/ kafka

五、启动kafka集群

在启动zookeeper之前，需要配置jdk，建议选择jdk1.8适配，自行到官网下载。文件上传解压跟kafka的步骤差不多。不同的是要加入环境变量

nano ~/.bashrc

到最下面去添加环境变量，注意jdk解压后重命名一下哈(mv 你的jdk jdk),路径也要写你自己的jdk路径哦

export JAVA_HOME=/usr/local/jdk

export PATH=${JAVA_HOME}/bin:$PATH

保存退出，再输入命令生效source ~/.bashrc

最后 javac验证一下

cd进入kafka，启动zookeeper

 ./bin/zookeeper-server-start.sh config/zookeeper.properties

我们右击数据采集的图标，点击克隆再开一个，cd到kafka

输入命令，启动kafka

 ./bin/kafka-server-start.sh config/server.properties

再克隆一个，依旧cd进入到kafka目录，输入命令

cd /usr/local/kafka

 ./bin/kafka-topics.sh --create --topic test --bootstrap-server 192.168.10.114:9092

这里我遇到了报错

解决方法是：

vim  config/server.properties 进去把listeners的注释取消，加上你自己的虚拟机ip

再次创建topic，然后查看

 ./bin/kafka-topics.sh --create --topic test --bootstrap-server 192.168.10.114:9092

 ./bin/kafka-topics.sh --list --bootstrap-server 192.168.10.114:9092

这里查看我遇到了Exception in thread "main"的bug，找了很多方法都没有办法解决，自己捣鼓着试试居然可以了，传说中的邪修。具体为什么可以我问了ai也说的糊里糊涂，可能后面学多了才能知道。

这里的解决方案是cd 到bin目录，然后输入命令./kafka-topics.sh --list --bootstrap-server 192.168.10.114:9092

下一步就是生产者了

我们cd回去哈 输入命令cd..（注意有两个点）

输入命令./bin/kafka-console-producer.sh --bootstrap-server 192.168.10.114:9092 --topic test

出现小箭头，到了这里你距离成功已经只有一丢丢了~~

写点东西上去

接下来，我们再克隆一台，作为消费者

 cd /usr/local/kafka/

 ./bin/kafka-console-consumer.sh --bootstrap-server 192.168.10.114:9092 --topic test --from-beginning

出现当初你写的那几行字，完美ending~~

最后，我们一共有四个连接（数据采集）

第一个是zookeeper的启动

第二个是kafka的启动

第三个是生产者

第四个是消费者

结束，完结撒花~~