
kafka
舞念
让我们共同携手纵向技术
展开
-
Kafka第一天
Kafka11 .1 Kafka的特性· 高吞吐量、低延迟:kafka每秒可以处理几十万条消息,它的延迟最低只有几毫秒·可扩展性:kafka集群支持热扩展· 持久性、可靠性:消息被持久化到本地磁盘,并且支持数据备份防止数据丢失· 容错性:允许集群中节点失败(若副本数量为n,则允许n-1个节点失败)· 高并发:支持数千个客户端同时读写21.2 Kafka一些重要设计思想下面介绍先大体介绍一下Kafk...转载 2018-03-07 14:47:10 · 283 阅读 · 0 评论 -
kafka第二天
Kafka核心特性 我们上一篇文章已经知道了Kafka支持以集合(batch)为单位发送消息,在此基础上,Kafka还支持对消息集合进行压缩,Producer端可以通过GZIP或Snappy格式对消息集合进行压缩。Producer端进行压缩之后,在Consumer端需进行解压。压缩的好处就是减少传输的数据量,减轻对网络传输的压力,在对大数据处理上,瓶颈往往体现在网络上而不是CPU(压缩和解压...转载 2018-03-07 14:48:40 · 204 阅读 · 0 评论