集群搭建系列（八）Kafka

装B五分钟，挨打两小时

于 2020-12-24 15:17:26 发布

阅读量89

点赞数

分类专栏：集群搭建文章标签： kafka

那些你很早爬起来努力的时光，那些你熬夜训练的日子，那些你觉得太累了不想努力并强迫自己但仍咬牙坚持的时光，那才是追寻梦想的意义，那就是梦想力量。但是真正的梦想不是到达终点，而是享受旅途。如果你们能够理解这个道理。你会发现，在努力的过程中。你的梦想或许会实现，或许不会。但总有一些更伟大的事情会随之而来。

本文链接：https://blog.youkuaiyun.com/cs261244787/article/details/111632233

版权

集群搭建专栏收录该内容

13 篇文章

订阅专栏

本文详细介绍了如何根据Zookeeper和Scala版本选择合适的Kafka 2.12版本，包括下载、配置参数如broker.id、ZK连接及日志路径，以及通过scp命令进行节点复制。还提供了创建、查看topic和集群状态的实用命令。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

文章目录

一 kafka 版本选择

kafka 的版本选择与 zookeeper、 scala 对应
scala 与 spark 版本也需要对应

二下载、安装

tar -zxvf kafka_2.12-2.3.0.tgz
修改配置文件中
brock.id
zk
logdir( 数据存放位置 )

三复制各节点启动即可

scp -r 命令复制文件夹至目标
如：
scp -r /opt/hadoop/kafka-2.12 xxx@xxx:/opt/hadoop/

四测试命令

创建 topic
kafka-topics.sh --create --zookeeper xxxxxx:2181 --replication-factor 3 --partitions 1 --topic test-topic

查看所有 topic
kafka-topics.sh --list --zookeeper xxxxxx:2181

查看状态
kafka-topics.sh --describe --zookeeper xxxxxx:2181 --topic test-topic