
Kafka
我请你们喝三鹿
这个作者很懒,什么都没留下…
展开
-
Kafka学习笔记 - 03: 消息与同步机制
Producer 根据指定的 partition 方法(默认round-robin、hash等),将消息发布到指定 topic 的 partition 里面;kafka 集群接收到Producer 发过来的消息后,将其持久化到硬盘,并保留消息指定时长(可配置),而不关注消息是否被消费;Consumer 从 Kafka集群 pull 数据,并控制获取消息的 offset。 下面讨论以下 Kafka ...原创 2019-01-24 10:21:55 · 340 阅读 · 0 评论 -
Kafka学习笔记 - 02: kafka扩容服务器、重新分区
实验环境: kafka.broker 0 topic 名为 first 在 broker0 中 默认分区数 partition=1 扩容 在新的物理机上安装 kafka 程序,修改 config/server.properties 文件里的 broker.id 必须在集群中唯一,修改其他必要的配置项,其中 zookeeper.connect 配置项,写上kafka集群现在使用的zooke...原创 2019-01-18 21:07:22 · 1409 阅读 · 0 评论 -
Kafka学习笔记 - 01: 初步了解
Kafka 是 Linkedin 公司用于日志处理的分布式消息队列,同时支持离线和在线日志处理。kafka 对消息保存时根据Topic进行归类,发送消息者成为 Producer ,消息接受者成为 Consumer,此外 Kafka 集群有多个 Kafka 实例组成,每个实例(server)称为broker。无论是 Kafka 集群,还是 producer 和 consumer 都依赖于 zooke...原创 2019-01-14 16:54:29 · 204 阅读 · 0 评论