Michaeles的博客

1.zookeeper学习目录 2.zookeeper常见的服务 3.

一、安装（基于mac） brew install kafka 1.安装配置文件位置 /usr/local/etc/kafka/server.properties /usr/local/etc/kafka/zookeeper.properties 2.启动命令 （1）启动zookeeper(&表示以后台方式启动) zookeeper-server-start /usr/l...

1.基本结构：kafka高强度依赖zookeeper，zookeeper的作用 （1）存储broker信息 （2）存储topic和partiiton的分布 2.kafka消息结构 3.4类api

一、基础 Kafka是一个流处理平台，是一个消息对列，但不仅仅是一个消息队列。 1.producer ：消息和数据的生产者，向kafka的一个topic发布消息。 2.conusmer (1)conusmer：消息和数据的消费者，订阅数据（topic）并且处理其发布的消息。 (2)consumer group :对于同一个topic，会广播给不同的group,一个group中，只有一...

1 zookeeper如何实现高可用 1 zookeeper 多台构成集群实现高可用，有三种角色群首（leader），追随者（follower），观察者（observer）。 Leader作为整个ZooKeeper集群的主节点，负责响应所有对ZooKeeper状态变更的请求。它会将每个状态更新请求进行排序和编号，以便保证整个集群内部消息处理的FIFO Follower的逻辑就比较简单了。除了响应本...

一、Kafka基础 1.kafka的基本运行原理？kafka的架构部署？ （1）Kafka通过多副本机制实现故障自动转移； 2.kafka的文件存储机制？ 3.kafka如何确保消息的精确传输？如何确保消息的准确存储？如何确保消息的正确消费？ 4.kafka的常用名词？ （1）LEO(LogEndOffset):表示每个partititon中最后一条message的位置； （2）HW...