kafka详解一

最新推荐文章于 2025-03-30 23:44:11 发布
最新推荐文章于 2025-03-30 23:44:11 发布
阅读量313 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： 大数据-理论
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/wangfei8348/article/details/52955836
博客提及了Kafka，Kafka是信息技术领域常用的消息队列系统，在数据处理、实时流处理等方面有重要应用。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

kafka
大数据技术Kafka详解 ② | Kafka基础与架构介绍
dvlinker的技术专栏
12-02 2万+
本文详细介绍开源高吞吐量分布式消息中间件kafka的架构与组件构成。
大数据技术Kafka详解 ⑥ | Kafka大厂面试题
dvlinker的技术专栏
02-17 6385
大数据技术Kafka详解 ⑥ | Kafka大厂面试题
Kafka详解
qq_41644412的博客
05-25 6423
consumer 提交offset的时候，kafka Offset manager会首先追加一条新的conmit消息到 _consumer_offset topic中，然后更新对应的缓存，读offset时从缓存中读取，而不是直接读取 _consumer_offset topic。如查找368801的offset消息。同一个Topic的每个分区中的数据是不重复的，partition的表现形式是一个一个文件夹。文件，每个 .log文件 的大小是一样的，但是里面存储的消息条数可能不相同（可能消息的大小不一致）。
Kafka:Kafka详解
qq_55630615的博客
07-14 1767
一个分布式流媒体平台,类似于消息队列或企业消息传递系统。
kafka详解
最新发布
or7736的博客
03-30 1341
Rebalance 本质上是一种协议，规定了一个 Consumer Group 下的所有 consumer 如何达成一致，来分配订阅 Topic 的每个分区。例如：某 Group 下有 20 个 consumer 实例，它订阅了一个具有 100 个 partition 的 Topic。正常情况下，kafka 会为每个 Consumer 平均的分配 5 个分区。这个分配的过程就是 Rebalance。
kafka详解使用
做一个善良的人，做好自己的事，如果愿意，再发一份光。
05-27 1431
kafka全面讲解
Kafka详解(包括kafka集群搭建)
热门推荐
wudidahuanggua的博客
09-29 7万+
对kafka细致的解析，从理论到集群搭建实战
Kafka详解——介绍与部署
Dragon_Z的博客
03-18 2075
本文讲解了kafka，并说明了如何在本地部署kafka
浅析 MapReduce/ Spark/ Spark Steaming/ Storm 与 HBase/HDFS
小王的博客
10-25 4876
mapreduce 是大的批量操作，不要求时限。基于文件系统，hdfs。 spark 是快速的批量操作，基于内存，所以速度快。其主要亮点在于把过程给数据。 storm是流式处理，快速实时。 storm技术架构： Flume  +  kafka  +  Storm / Spark +  Hbase / Redis的技术架构。 storm:： 把topology有向
zoomkeeper / Yarn
小王的博客
10-28 1730
zookeeper yarn
zookeeper leader选举机制
小王的博客
03-07 548
转载 最近看了下zookeeper的源码，先整理下leader选举机制 先看几个关键数据结构和函数 服务可能处于的状态，从名字应该很好理解 public enum ServerState { 　　LOOKING, FOLLOWING, LEADING, OBSERVING; }   选票参数，还有Notification，参数也都差不多   stat
数据仓库与数据库
小王的博客
10-26 493
数据库和数据仓库都是用来存储数据的，只不过存的形式不同； 数据库是按照应用给的数据形式存储，可以增删改查；数据仓库是面向主题的、集成的、与时间相关且不可修改的数据集合。 “面向主题的”:传统数据库主要是为应用程序进行数据处理，未必按照同一主题存储数据;数据仓库侧重于数据分析工作，是按照主题存储的。这一点，类似于传统农贸市场与超市的区别—市场里面，白菜、萝卜、香菜会在一个摊位
Hadoop 3.0.0-α1：common：overview
小王的博客
12-04 421
Apache Hadoop 3.0.0-alpha1包含很多重要的改进在hadoop2.x的基础上。 这个是一个alpha 版，通过开发者和使用者帮助测试和搜集反馈。API的稳定性和质量还不能保证。 概述 提倡阅读全部发布说明，这里对更改内容做一个概述。 1.Java最低版本要求从Java7更改为Java8 所有的Hadoop JARs针对运行时版本的Java 8被编译。
HDFS详解一
小王的博客
11-04 401
HDFS详解
HBase详解一
小王的博客
11-04 401
HBase详解一
Storm详解一
小王的博客
10-28 344
Storm详解
hadoop详解一
小王的博客
10-28 315
hadoop详解
Spark详解一
小王的博客
10-28 312
Spark详解
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值