Kafka安装部署指南

Kafka 的安装和部署可以分为几个步骤，包括环境准备、下载安装、配置、启动和测试。这里提供一个基于 Linux 系统（如 CentOS 或 Ubuntu）的单机模式（Standalone）和集群模式（Cluster）的详细指南。

一、 环境准备

1. Java 环境：Kafka 运行需要 Java 环境。推荐使用 JDK 8 或 JDK 11。

   • 检查是否已安装：java -version
   • 如果未安装，请安装 OpenJDK：
     • Ubuntu/Debian: sudo apt update && sudo apt install openjdk-11-jdk
     • CentOS/RHEL: sudo yum install java-11-openjdk-devel

2. 服务器：

   • 单机模式：1 台服务器即可。
   • 集群模式：至少 3 台服务器（或虚拟机），以确保高可用性。这里假设你有三台服务器：kafka01, kafka02, kafka03。

3. 下载 Kafka：

   • 访问 Apache Kafka 官方下载页面。
   • 下载最新版本的二进制压缩包（例如：kafka_2.13-3.6.0.tgz）。建议使用 Scala 2.13 版本。
   • 或者直接使用 wget 下载：

   wget https://downloads.apache.org/kafka/3.6.0/kafka_2.13-3.6.0.tgz
   

   • 解压并进入目录：

   tar -xzf kafka_2.13-3.6.0.tgz
   cd kafka_2.13-3.6.0
   

---

二、 单机模式部署

单机模式非常适合开发、测试和学习。ZooKeeper 和 Kafka Broker 都运行在同一个节点上。

1. 启动 ZooKeeper
Kafka 使用 ZooKeeper 来管理集群元数据、领导者选举等。新版本的 Kafka 已经内置了一个单节点的 ZooKeeper 服务器用于快速入门。