
中间件_KAFKA
风景优美
热爱
展开
-
kafka间述
在互联网中,数据量成倍增长。关于数据下面的问题:1.如何收集大量的数据,二:分析手机的数据。为了解决问题,因此需要一个消息系统。kafka专为分布式高吞吐设计。与其他消息传递系统相比,kafka具有更好的吞吐量,内置分区,复制和固有的容错能力,这使得它非常适合大规模消息处理应用程序。 消息系统负责将数据从一个应用程序传输到另一个应用程序,因此应用程序可以专注于数据,但不担心如何共享数据。分布式消...原创 2019-08-09 14:03:28 · 140 阅读 · 0 评论 -
kafka基本概念
1.topics 主题 :属于特定类别的消息流成为主题。数据存储在topics中,topics被拆分为分区。对于每个主题,kafka保存一个分区的数据 每个这样的分区包含不可变有序序列的消息。分区被实现为具有相等大小的一组分段文件。 2.partition 分区:主题可能有许多分区,因此它可以处理任意数量的数据。 3.partition offset 分区偏移:每个分区消息具有成为 offse...原创 2019-08-09 14:37:16 · 152 阅读 · 0 评论 -
消息队列的应用场景
关于消息队列的使用 在学习kafka的过程中,理论有些枯燥。为了激发自己学习的热情,先了解下kafka的使用场景。 一、消息队列概述 消息队列中间件是分布式系统中重要的组件,主要解决应用解耦,异步消息,流量削锋等问题,实现高性能,高可用,可伸缩和最终一致性架构。目前使用较多的消息队列有ActiveMQ,RabbitMQ,ZeroMQ,Kafka,MetaMQ,RocketMQ 二、消息队列应...转载 2019-08-12 10:14:57 · 1414 阅读 · 0 评论