- 博客(2)
- 收藏
- 关注
原创 Kakfa架构解析——初步
Kafka架构解析一、基础架构二、深入了解2.1 Producer2.1.1 分区2.1.2 数据可靠性保证ack应答机制三种级别故障处理2.1.3 Exactly Once2.2 Consumer2.2.1 消费方式2.2.3 offset的维护2.3 Kafka高效读写一、基础架构Producer :消息生产者,也就是向kafka broker发送消息的客户端Consumer :消息消费者,也就是向kafka broker拉取消息的客户端Consumer Group :消费者组,由多个con
2021-03-18 16:00:12
148
1
原创 Flink篇——1.运行架构
Flink运行架构一.运行组件1.JobMnanager2.ResourceManager3.TaskManager4.Dispatcher二.提交流程(以 YARN 方式举例)三.任务调度原理一.运行组件主要包含以下四个JobMnanagerResourceManagerTaskManagerDispatchaer其中Flink的是基于Java实现的,因此均运行在Java虚拟机上。1.JobMnanager其是一个应用程序执行的主进程。JobManager 会先接收到要执行的应用程序,
2021-03-10 16:01:32
158
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人