【精华】图解Kafka入门

  要做一个消息队列可能要考虑到以下的问题：

• 使用消息队列不可能是单机的（必然是分布式or集群）？
• 数据写到消息队列，可能会存在数据丢失问题，数据在消息队列需要持久化(磁盘？数据库？Redis？分布式文件系统？)
• 想要保证消息（数据）是有序的，怎么做？
• 为什么在消息队列中重复消费了数据？

  Kafka是一个消息队列，把消息放到队列里边的叫生产者，从队列里边消费的叫消费者。

  一个消息中间件，队列不单单只有一个，我们往往会有多个队列，而我们生产者和消费者就得知道：把数据丢给哪个队列，从哪个队列取消息。我们需要给队列取名字，叫做topic(相当于数据库里边表的概念)。

  现在我们给队列取了名字以后，生产者就知道往哪个队列丢数据了，消费者也知道往哪个队列拿数据了。我们可以有多个生产者往同一个队列(topic)丢数据，多个消费者往同一个队列(topic)拿数据。

  为了提高一个队列(topic)的吞吐量，Kafka会把topic进行分区(Partition)。