kafka 所遇到的问题梳理

本文主要梳理了Kafka的基础知识,包括其作为分布式事件流平台的角色,消息队列的好处,以及Kafka的架构。重点讨论了分区机制、数据完整性保障、生产者消息发送流程和自定义分区规则。此外,还提到了Kafka的命令行操作、文件存储机制、数据一致性问题以及acks参数配置。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

最近使用kafka总是出错 一些概念性的问题梳理不清楚,朋友也总会问到这一类的问题 顾总结如下 说的可能不对 阅读者挑取有用信息


kafka 
一.基础介绍
    1.kafka是什么
        基于传统的是 :缓冲的消息队列
        1)分布式 : 类似于HDFS分布式
        2)kafka和Channel的区别?
            缓冲量大小,及后面对接组件.Kafka对接计算引擎或者存储等框架; Channel对接
            的是Sink
        最新的:
            分布式事件流平台
            消息队列与栈的对比
    2.消息队列的好处
        1) 同步处理或者异步处理
            两者对比前者线程阻塞  后者不会发生线程堵塞
    3.使用消息队列的好处
        解耦以及消峰
    4.消息队列的两种模式介绍
        1)一对多 类似于报刊发表
        2)一对一 类似于寄信
    5.Kafka基础架构介绍
        kafka底层基于o
        架构组成部分及其作用
            1)生产者 消息发送到

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值