
Kafka
文章平均质量分 51
Kafka相关分享
修破立生
专注大数据技术领域,持续学习和分享者
展开
-
通过 Docker 部署 Kafka 集群
本文主要介绍了如何通过 Docker 部署 Kafka 集群,包括准备docker compose yaml 文件,docker-compose 创建启动容器,以及 kafkacat 工具对 Kafka 进行操作原创 2022-02-20 03:00:00 · 2216 阅读 · 0 评论 -
Kafka 命令行工具 kcat/kafkacat
本文介绍Kafka 命令行工具 kcat/kafkacat , 非 JVM 的 Kafka 生成者和消费者,适用于 Kafka 0.8 及以上版本。kcat/kafkacat 可用与生产和消费数据、以及查询集群元数据信息,时间戳对应的 offset 等。原创 2022-02-10 22:14:53 · 8409 阅读 · 5 评论 -
基于 Ubuntu 玩转 Hudi Docker Demo (2)—— 测试数据写入 Kafka
本文介绍了如何通过 kafkacat 把测试数据写入到 kafka原创 2022-02-10 18:12:15 · 1558 阅读 · 0 评论 -
Kafka性能测试工具
简介Kafka本身自带了性能测试的脚本,可以测试发送端和消费端的速度,分别为:kafka-producer-perf-test.shkafka-consumer-perf-test.sh这两个脚本可以在kafka的bin目录下找到。发送端bin/kafka-producer-perf-test.shusage: producer-performance [-h] --topic TOPIC --num-records NUM-RECORDS --record-size RECORD-SIZE原创 2022-01-22 17:29:38 · 12190 阅读 · 0 评论 -
如何在windows安装部署单机的kafka服务
下载Kafka压缩包官网地址:https://kafka.apache.org/downloads本文下载2.1.0版本:https://archive.apache.org/dist/kafka/2.1.0/kafka_2.11-2.1.0.tgz解压解压到任意一个文件夹,如图打开命令行工具kafka 目录如下:使用命令行工具进入该目录:命令行工具建议使用Cmder启动Zookeeper服务bin\windows\zookeeper-server-start.bat config原创 2022-01-21 17:34:45 · 1026 阅读 · 2 评论 -
如何清除Kafka Topic数据
log.retention.{ms,minutes,hours}: Kafka segment log的保存周期, 默认保存7天1. 把retention.ms 改小, 如1000ms, 即1分钟./kafka-configs.sh --zookeeper localhost:2181 --entity-type topics --alter --add-config retention....原创 2017-11-23 11:16:00 · 2232 阅读 · 1 评论