Mr_Yang888的博客

Kafka必备知识点(简单总结)文章目录Kafka必备知识点(简单总结)1.kafka从生产到消费的流程2、什么是kafka3、kafka的使用场景4、kafka优缺点5、Kafka架构（流程）6、Kafka架构（API）7、Topic内部有哪些组成？8、分区和消费组内的消费者之间的关系有哪些情况？9、分区数、消费者与读取效率之间的关系10、副本数与broker之间的关系11、什么是主/从副本...

Kafka工作流程知识点详解1.工作流程图1.kafka生态系统四大角色，生产者(Producer),kafka集群(Broker)，消费者(Consumer)、zookeeper2.每个消费者都必须属于某个消费者组，一个组内的消费者可以是多个。3.一个Topic可以有1到多个分区（Partition）4.一个分区可以有多个segment。5.每个segment可以有一个log和一个...

kafka-eagle工具安装部署文章目录kafka-eagle工具安装部署1、kafka-eagle概述2、环境和安装1、环境要求2、安装步骤2.1、下载源码包2.2、解压2.3、准备数据库2.4、修改kafak-eagle配置文件5、配置环境变量6、启动kafka-eagle7、主界面1、kafka-eagle概述为了简化开发者和服务工程师维护Kafka集群的工作有一个监控管理工具，叫做...

kafka的log-存储机制与消息不丢失制文章目录kafka的log-存储机制与消息不丢失制1、kafka的log-存储机制1.1、kafka中log日志目录及组成1.2、kafka的offset查找过程1.3kafka Message的物理结构及介绍1.4、kafka中log CleanUp2、kafka消息不丢失制2.1、生产者生产数据不丢失2.1.1、生产者数据不丢失过程图2.1.2、发送...

Kafka的JavaAPI操作1、创建maven工程并添加jar包创建maven工程并添加以下依赖jar包的坐标到pom.xml<dependencies><!-- https://mvnrepository.com/artifact/org.apache.kafka/kafka-clients --><dependency> <gro...

Kafka集群常用命令行操作1、创建topic创建一个名字为test的主题， 有三个分区，有两个副本node01执行以下命令来创建topiccd /export/servers/kafka_2.11-1.0.0bin/kafka-topics.sh --create --zookeeper node01:2181 --replication-factor 2 --partitions ...