intelrain的博客

转载自：http://generalcode.cn/archives/272kafka基于Java开发的，所以运行kafka需要有Java环境，即需要预先装JDK，这里不赘述具体的安装过程。我是在阿里云的linux机器上搭建kafka环境，java路径是/usr/java/jdk1.8.0_171安装ZookeeperKafka使用Zookeeper来存储集群元数据以及消费者元数据，如下所示：单机...

转载自：http://generalcode.cn/archives/255消费者与消费组假设这么个场景：我们从Kafka中读取消息，并且进行检查，最后产生结果数据。我们可以创建一个消费者实例去做这件事情，但如果生产者写入消息的速度比消费者读取的速度快怎么办呢？这样随着时间增长，消息堆积越来越严重。对于这种场景，我们需要增加多个消费者来进行水平扩展。Kafka消费者是消费组的一部分，当多个消费者形...