Kafka集群搭建

最新推荐文章于 2025-04-10 10:37:51 发布

JeemyJohn

最新推荐文章于 2025-04-10 10:37:51 发布

阅读量837

点赞数 3

CC 4.0 BY-SA版权

分类专栏： Kafka 文章标签： Kafka集群 zookeeper

本文链接：https://blog.youkuaiyun.com/u013709270/article/details/54669031

1 篇文章

订阅专栏

本文详细介绍如何在CentOS 6.8上安装配置Kafka单机集群，包括解压安装包、启动ZooKeeper及Kafka服务、创建Topic、发送接收消息等步骤。

本文测试环境：

1. 单机模式

> tar -xzf kafka_2.11-0.10.1.0.tgz
> cd kafka_2.11-0.10.1.0

Kafka使用ZooKeeper因此首先需要启动一个ZooKeeper服务。如果你没有ZooKeeper，你可以方便的使用打包到kafka中的应急单点ZooKeeper实例：

> bin/zookeeper-server-start.sh config/zookeeper.properties

现在就可以启动kafka服务了：

> bin/kafka-server-start.sh config/server.properties

接下来创建一个名为“test”只有一个分片和复制的topic：

> bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test

可以使用如下的命令查看所有topic：

> bin/kafka-topics.sh --list --zookeeper localhost:2181
  test

Kafka自带了个客户端命令行程序，它从文件或者标准输入获取消息，并且将它作为消息发送到Kafka集群。默认情况下，每一行作为一个独立的消息进行发送。

运行producer并发送消息到服务中：

> bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test
This is a message
This is another message

Kafka也有一个Consumer的命令行程序，它能够将Producer生产的消息导出来：

> bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning
This is a message
This is another message

至此，一个单节点的kafka集群搭建完毕。

对机器学习，人工智能感兴趣的小伙伴，请关注我的公众号：