Kafka 之消费者（Consumer）

目录

一. 前言

二. 消费示例

2.1. 自动提交偏移量（Automatic Offset Committing）

2.2. 手动控制偏移量（Manual Offset Control）

2.3. 订阅指定的分区（Manual Partition Assignment）

三. 消费核心说明

3.1. 跨版本兼容性

3.2. 偏移量（offset）和消费者位置

3.3. 消费者组和主题订阅

3.4. 发现消费者故障

3.5. 在 Kafka 之外存储偏移量

3.6. 控制消费的位置

3.7. 消费者流量控制

3.8. 读取事务性消息

3.9. 多线程处理

---

一. 前言

    消息的消费一般有两种模式，推模式和拉模式。推模式是服务端主动将消息推送给消费者，而拉模式是消费者主动向服务端发起请求来拉取消息。Kakfa 采用的是拉模式，这样可以很好的控制消费速率。

    Kafka 客户端从 Kafka 集群中获取消息，并透明地处理 Kafka 集群中出现故障的 Broker，透明地调节适应集群中变化的数据分区。也和 Broker交互，负载平衡消费者。

public class KafkaConsumer<K,V> extends Object implements Consumer<K,V>

    消费者维护着与 Broker 的 TCP 连接来获取消息。如果在使用后没有关闭消费者，则会泄露这些连接。消费者不是线程安全的。

二. 消费示例

消费者 API 提供了灵活性，以涵盖各种消费场景，下面是一些例子来演示如何使用它们。