
kafka
pucheung
这个作者很懒,什么都没留下…
展开
-
kafka多线程消费及处理和手动提交处理方案设计
kafka与其他消息队列不同的是, kafka的消费者状态由外部( 消费者本身或者类似于Zookeeper之类的外部存储 )进行维护, 所以kafka的消费就更加灵活, 但是也带来了很多的问题, 因为客户端消费超时被判定挂掉而消费者重新分配分区, 导致重复消费, 或者客户端挂掉而导致重复消费等问题.本文内容简介kafka的消费者有很多种不同的用法及模型. * 本文着重探讨0.9版本转载 2017-10-16 19:13:59 · 3717 阅读 · 0 评论 -
Kafka 0.9 新版本consumer客户端使用介绍
翻译自: https://www.confluent.io/blog/tutorial-getting-started-with-the-new-apache-kafka-0-9-consumer-client/kafka最初时开发时, 所带的producer和consumer client都是Scala所写. 我们逐渐发现这些API具有一些限制. high-level的api支持co转载 2017-10-16 18:55:39 · 2768 阅读 · 0 评论 -
Kafka深度解析,众人推荐,精彩好文!
作者: Jason Guo背景介绍Kafka简介Kafka是一种分布式的,基于发布/订阅的消息系统。主要设计目标如下:以时间复杂度为O(1)的方式提供消息持久化能力,并保证即使对TB级以上数据也能保证常数时间的访问性能高吞吐率。即使在非常廉价的商用机器上也能做到单机支持每秒100K条消息的传输支持Kafka Server间的消息分区,及分布式消息消费,同时保证每转载 2017-02-09 16:46:05 · 717 阅读 · 0 评论 -
Kafka 设计与原理详解
版权声明:本文为博主原创文章,未经博主允许不得转载。目录(?)[-]一Kafka简介1 背景历史2 Kafka诞生3 Kafka现在二Kafka技术概览1 Kafka的特性2 Kafka一些重要设计思想3 kafka 应用场景4 Kafka架构组件5 Kafka TopicPartition三Kafka 核心组件1 Replication转载 2017-02-09 16:44:07 · 3413 阅读 · 0 评论