Stray_Lambs的博客

系列文章目录 提示：这里可以添加系列文章的所有文章的目录，目录需要自己手动添加 例如：第一章 Python 机器学习入门之pandas的使用 提示：写完文章后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录 系列文章目录 前言 一、pandas是什么？ 二、使用步骤 1.引入库 2.读入数据 总结 前言 提示：这里可以添加本文要记录的大概内容： 例如：随着人工智能的不断发展，机器学习这门技术也越来越重要，很多人都开启了学习机器学习，本文就介绍了机器学习..

Kafka架构深入——Kafka消费者 消费者定义 简单说一下什么是消费者。 其实消费者就是从Kafka集群当中消费数据的客户端。当然，一个消费者的消费能力肯定是有限的，所以，当生产者产生数据过快时，单个消费者的消费能力达到上限，导致了Kafka集群消费数据的堆压。从而也就产生了消费者组的概念(一个不够，一群来凑....)。一个消费者组具有若干个消费者(具有相同的group.id)，我们可以将消费者组看成是一个大的消费者，同一个topic的分区只能被组内的一个消费者消费一次，不允许多次消费...

目录 Kafka生产者 分区策略 分区的原因 分区原则 新建的分区会在哪个目录下创建 数据可靠性保证 ISR机制 ack应答机制(决定数据丢不丢) 故障处理细节 Exactly Once 语义 参考 Kafka生产者 分区策略 通常情况下，kafka集群中越多的partition会带来越高的吞吐量。但是，我们必须意识到集群的partition总量过大或者单个broker节点partition过多，都会对系统的可用性和消息延迟带来潜在的影响。未来，我们计划对这些限制进行一些改进，让

test

Kafka基本理解一、Kafka定义二、使用步骤1.引入库2.读入数据总结 一、Kafka定义 二、使用步骤 1.引入库 代码如下（示例）： import numpy as np import pandas as pd import matplotlib.pyplot as plt import seaborn as sns import warnings warnings.filterwarnings('ignore') import ssl ssl._create_default_https_con