playadota的博客

Kafka 概述：Kafka是最初由Linkedin公司开发，用scala语言编写的，是一个分布式、支持分区的（partition）、多副本的（replica），基于zookeeper协调的分布式消息系统。它的最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如基于hadoop的批处理系统、低延迟的实时系统、web日志、消息服务等。它类似于JMS（Java Messga...

问题描述：主机信息：IP hostname 10.0.0.10 host10 10.0.0.12 host12 10.0.0.13 host13 在这三台主机上部署一套zookeeper&kafka集群环境的时候，zk集群进程和端口都起来了。然后在启动kafka的时候，报错了，提示连不上zk。因为该环境要求必须开启防火墙，所以想到应该是因为...

1.pull docker ，在机器上下载最新版本的kafka和zookeeper镜像，这里使用的是wurstmeister的镜像docker pull wurstmeister/kafkadocker pull wurstmeister/zookeeper2.装好的docker镜像3.启动zk容器Docker run –d –name zookeeper –p 2181:...

本文基于已经安装了k8s和docker的情况下进行的k8s 编排kafk容器可以有statefulset和deployment两种方式。分别是有状态和无状态的，具体区别可以百度一下，这里只介绍集群搭建的方法。需要先准备若干yml配置文件（文件名自己定义，不固定），上传到linux机器的任意文件夹里（比如home下面自己创建一个k8skafka文件夹）第一种：statefulset集群编...