Linux 安装单机版 Kafka

最新推荐文章于 2025-07-14 11:20:24 发布

Jason-xs

最新推荐文章于 2025-07-14 11:20:24 发布

阅读量1k

点赞数 1

CC 4.0 BY-SA版权

分类专栏： Big Data

本文链接：https://blog.youkuaiyun.com/weixin_43650254/article/details/89603751

Big Data 专栏收录该内容

20 篇文章

订阅专栏

kafka单机版安装采用自带的zookeeper处理

校验一下java是否安装

[root@localhost Desktop]$ java -version
# 如果有以下信息证明 java 环境正常
java version "1.8.0_171"
Java(TM) SE Runtime Environment (build 1.8.0_171-b11)
Java HotSpot(TM) 64-Bit Server VM (build 25.171-b11, mixed mode)
# 如果没有安装，请先安装java环境

上传kafka文件到虚拟机中kafka_2.12-2.2.0

可以用 xftp 软件上传
解压安装kafka到/usr/local中

[root@localhost Desktop]$ tar -zxvf kafka_2.12-2.2.0.tgz -C /usr/local/

重命名kafka的文件：

[root@localhost local]$ mv kafka_2.12-2.2.0/ kafka/

[root@localhost config]$ cd /usr/local/kafka/config

kafka安装目录下的config文件夹为其配置文件，我们需要修改的有 server.properties和zookeeper.properties。

[root@localhost config]$ vim server.properties
		server.properties：kafka的配置文件
                  log.dirs=/tmp/kafka-logs
              修改为
                  log.dirs=/usr/local/kafka/kafka-0-logs
[root@localhost config]$ vim zookeeper.properties
         zookeeper.properties: kafka自带的zookeeper的配置
              	dataDir=/tmp/zookeeper
          	 修改为
             	dataDir=dataDir=/usr/local/my_zookeeper

启动zookeeper

[root@localhost kafka]$ bin/zookeeper-server-start.sh  config/zookeeper.properties

启动kafka

[root@localhost kafka]$ bin/kafka-server-start.sh  config/server.properties

创建主题 (让我们创建一个名为“test”的主题，它只包含一个分区，只有一个副本)

[root@localhost kafka]$ bin/kafka-topics.sh  --create --bootstrap-server localhost:9092 -- replication-factor 1 --partitions 1 --topic test

备注： 或者，您可以将代理配置为在发布不存在的主题时自动创建主题，而不是手动创建主题。

查看主题: 如果我们运行list topic命令，我们现在可以看到该主题

[root@localhost kafka]$ bin/kafka-topics.sh --list --bootstrap-server localhost:9092
 test

开启生产者（发送一些消息）

[root@localhost kafka]$ bin/kafka-console-producer.sh  --broker-list localhost:9092 --topic test

备注：Kafka附带一个命令行客户端，它将从文件或标准输入中获取输入，并将其作为消息发送到Kafka集群。默认情况下，每行将作为单独的消息发送。运行生产者，然后在控制台中键入一些消息以发送到服务器。

启动消费者

[root@localhost kafka]$ bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning  #从第一条开始接受

[root@localhost kafka]$ bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test  #从现在生产者发送开始接受