docker安装单机kafka

原创已于 2022-02-22 15:39:03 修改 · 838 阅读

3 ·

CC 4.0 BY-SA版权

文章标签：

#kafka #docker #分布式

于 2022-02-22 15:37:42 首次发布

docker 同时被 2 个专栏收录

5 篇文章

订阅专栏

kafka

1 篇文章

订阅专栏

快速安装用于测试之类的用途

#笔者版本 ZOOKEEPER_VERSION=3.4.13 //DockerVersion=18.03.1-ee-3
#拉zookeeper镜像
docker pull wurstmeister/zookeeper
#笔者版本 KAFKA_VERSION=2.8.1 //SCALA_VERSION=2.13 //GLIBC_VERSION=2.31-r0
#拉kafka镜像
docker pull wurstmeister/kafka
#启动zookeeper
docker run -d --name zookeeper -p 2181:2181 -t wurstmeister/zookeeper
#启动kafuka
docker run -d --name kafka \
-p 9092:9092 \
-e KAFKA_BROKER_ID=0 \
-e KAFKA_ZOOKEEPER_CONNECT=【你的ip】:2181 \
-e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://【你的ip】:9092 \
-e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 wurstmeister/kafka

#进入容器
docker exec -it 【你的容器id】 /bin/bash
cd opt/kafka/bin
#单机方式：创建一个主题
kafka-topics.sh --create --zookeeper 【你的ip】:2181 --replication-factor 1 --partitions 1 --topic mykafka
#运行一个生产者
kafka-console-producer.sh --broker-list localhost:9092 --topic mykafka
#运行一个消费者
kafka-console-consumer.sh --bootstrap-server 【你的ip】:9092 --topic mykafka --from-beginning
#此处便完成了基本的测试环境


#设置默认分区
vi opt/kafka/config/server.properties
修改：num.partitions=2

#指定分区数量
./kafka-topics.sh --zookeeper 【你的ip】:2181 --alter --partitions 3 --topic topicname

zookeeper在kafka中的作用：
Kafka主要使用ZooKeeper来保存它的元数据、监控Broker和分区的存活状态，并利用ZooKeeper来进行选举