kafk的使用场景和集群入门

本文介绍了Kafka这一分布式消息中间件的基本概念与应用场景,并详细解析了其工作原理和服务端、客户端之间的交互方式。同时,文章还提供了安装配置教程及如何进行消息生产和消费的操作指导。

kafk的使用场景和集群入门

LD is tigger forever,CG are not brothers forever, throw the pot and shine forever.
Modesty is not false, solid is not naive, treacherous but not deceitful, stay with good people, and stay away from poor people.
talk is cheap, show others the code,Keep progress,make a better result.
Survive during the day and develop at night。

目录

概述

kafka 是一个分布式的消息中间件。
在这里插入图片描述
服务端和客户端之间通过TCP协议来完成。
topic 类似队列。
大的队列。
小的组成部分,分区,放到一个消息中间件中,磁盘文件中。
大小限制的,不同的braker 里面去,消息中间件来说,实战晚回来,不同的消费者,针对不同的分区,消费消息很快,逻辑分区,队列的实际上真正的存储订单,分区主题这一块概念。

传统的消息中间件有2种模式:
queue:模式
ps模式:所有的consumenr都有一个唯一的consumner group.
topic 里面去发送:
每一个分区:指向一个Consumer,GROUPA唯一消费
仅仅被一个主题的消费组执行,消费者执行。
语义规定了。
大概的一些原理。

发送消息:
kafka-console-producer.sh --broker-list 192.0.0.1

消费消息:
bin/kakfa-console-consumner.sh --bootstrap-server 192.168.0.60:9092
–consumner-property group

当前从这个主题开始消费起,指定偏移量通过一些参数可以配置。
kafkak的消息发到这边不会删除,后台的配置,配置的kafka 消费保存7天,消费完删除,怎么知道,consumner 如果挂了,不是从前消费起呢?
以上安装是一下安装和消费消息。

默认消费你的新新消息。
指定2个不同的消费者,666,没有任务消费任务的,
回车之后,组名相同,一条消息,随机消费,还是比较复杂,如果之前消息分配策略,如果分配到这个主题,如果挂了,消费者重新:

发布订阅:
同一个主题,不同消费组的同一条消息,
集群的配置:
主题启动了,

主题Topic 和消息log:
存储文件夹下下面的存储机制,不会的,默认保存时间,log 的保留,业务量来的,消息的磁盘的空间占用的就少很多,
包括的kafka 消费的,paration,第8 保存到kafka 的主题里面例,早起的版本,把这个位置的消费的这个分区,consumner 统一的分配的,消费的offset 由consumner自己来维护,kafka 消息完消息,反正消费者消息,传统的消费者信息,性能好的原因之一。

放到zk中去管理,发布订阅模式也说了

kafka 目录的组成一个集群,因为搭建一个为分布式
复制配置文件,

修改配置文件:
broker.id=1
监听端口9093
更改log 文件。

IP更改一下,连接zk ,集群的搭建方式。
更改一下,
bin/kafka-server-start -demaon:
进程
配置集群的方式:
port1 好port2 整个集群的方式,3个实际例。

此外:

bin/kafka-topic.sh --create --zookper 192.168.0.60:2181
创建玩成了,主题的大概情况,叫做,replication
bin/kafka-topic.sh --describe --zookeeper 192.168.0.60:2181 --topic relica-zhuge-t

./kafka-topics.sh --describe --zookeeper 192.168.122.1 --topic

分布式部署的,可以多个副本;其中的一个副本,leader 副本的请求,不会对外提供新的

小结:

参考资料和推荐阅读

1.链接: 参考资料.

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

迅捷的软件产品制作专家

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值