docker 搭建kafka集群

本文详细介绍如何使用Docker和Docker Compose在Linux环境下快速搭建Kafka集群,包括配置多节点Kafka、Zookeeper及Kafka Manager的过程,提供完整的docker-compose.yml文件示例。

参考 :https://blog.youkuaiyun.com/sinat_31908303/article/details/80447383

二当家对这篇文章做了一定修改 因为 原文中

docker-compose scale kafka=3 会启动3个宿主机上9092的端口的kafka 报错

仔细可以看下原文和本文进行差异比对

 

linux发行版
已经安装好docker
已经安装好docker-compose
搭建步骤
1. 新建一个docker-compose.yml文件内容如下
2. 内容做必要的修改

version: '2'
services:
  zookeeper:
    image: wurstmeister/zookeeper   ## 镜像
    ports:
      - "2181:2181"                 ## 对外暴露的端口号
  kafka1:
    image: wurstmeister/kafka       ## 镜像
    volumes: 
        - /etc/localtime:/etc/localtime ## 挂载位置(kafka镜像和宿主机器之间时间保持一直)
    ports:
      - "9091:9092"
    environment:
      KAFKA_ADVERTISED_HOST_NAME: 192.168.150.130   ## 修改:宿主机IP
      KAFKA_ZOOKEEPER_CONNECT: zookeeper:2181       ## 卡夫卡运行是基于zookeeper的

  kafka2:
    image: wurstmeister/kafka       ## 镜像
    volumes: 
        - /etc/localtime:/etc/localtime ## 挂载位置(kafka镜像和宿主机器之间时间保持一直)
    ports:
      - "9092:9092"
    environment:
      KAFKA_ADVERTISED_HOST_NAME: 192.168.150.130   ## 修改:宿主机IP
      KAFKA_ZOOKEEPER_CONNECT: zookeeper:2181       ## 卡夫卡运行是基于zookeeper的

  kafka3:
    image: wurstmeister/kafka       ## 镜像
    volumes: 
        - /etc/localtime:/etc/localtime ## 挂载位置(kafka镜像和宿主机器之间时间保持一直)
    ports:
      - "9093:9092"
    environment:
      KAFKA_ADVERTISED_HOST_NAME: 192.168.150.130   ## 修改:宿主机IP
      KAFKA_ZOOKEEPER_CONNECT: zookeeper:2181       ## 卡夫卡运行是基于zookeeper的
  kafka-manager:  
    image: sheepkiller/kafka-manager                ## 镜像:开源的web管理kafka集群的界面
    environment:
        ZK_HOSTS: 192.168.150.130                   ## 修改:宿主机IP
    ports:  
      - "9000:9000"                                 ## 暴露端口

    3. 运行

首先进入你的yml文件的当前路径下 执行
1
/* 运行集群版kafka */
docker-compose up -d

2

如果想运行单机版的 

docker-compose stop

把上文yml去掉kafka2 kafka3两个节点后

docker-compose up -d

管理页面的地址

http://192.168.150.130:9000/

参考连接-github 
参考连接-kafka-docker 
参考连接-docker-hub 
参考连接-docker官方文档

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值