KAFKA Topic的分片和副本机制

分片: 逻辑概念

           相当于将一个Topic(大容器),拆分为多个块(多个小容器), 多个块合并在一起就是一个Topic(大容器), 可以

           将各个块分布在不同的节点上

        作用:

          1- 提高读写的效率: 分片可以分布在不同的节点上, 在进行读写的时候, 可以让多个节点一起负责

          2- 分布式存储: 解决单台阶段存储容量有限的问题

          注意: 分片的数量是可以创建N多个, 与集群的节点数量是没有关系的

副本: 物理概念

          针对每个分片的数据, 都可以设置备份, 可以将其备份多个

        目的: 提高数据的可靠性 防止数据丢失

        注意: 副本的数据最多和集群的节点的数量保持一致, 但是一般建议设置2个 或者 3个 最多了