kafka的安装

本文介绍了如何在 CentOS 7 上安装和测试 Kafka 1.0.0 版本,包括下载 Kafka 和 Zookeeper,配置环境,启动服务,创建主题,发送及接收消息等步骤。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

一、kafka最新版本下载地址

      本博文发表时,kafka的最新版本是1.0.0.下载地址:http://kafka.apache.org/quickstart。同时在这个链接里有英文版的安装和使用。对于单机用户而言,可下载虚拟机,和centos的操作系统,进行模拟。

      虚拟机地址:https://www.virtualbox.org/wiki/Downloads

      centos 镜像地址:http://isoredirect.centos.org/centos/7/isos/x86_64/  

      以下记录都是在centos7上进行的安装和测试实例。

二、安装和测试

   kafka是基于zookeeper的,所以先安装zookeeper

   1、下载并安装zookeeper

          curl -O http://mirrors.hust.edu.cn/apache/zookeeper/stable/zookeeper-3.4.10.tar.gz

           tar -xzf zookeeper-3.4.10.tar.gz

          启动zookeeper(注意zookeeper依赖jdk,需先安装jdk)

          bin/zkServer.sh start &         

   1、下载

          curl -O http://mirror.bit.edu.cn/apache/kafka/1.0.0/kafka_2.12-1.0.0.tgz

   2、解压         

         tar -xzf kafka_2.12-1.0.0.tgz

        cd kafka_2.12-1.0.0

  3、启动 服务

bin/kafka-server-start.sh config/server.properties &

至此,kafka已经启动了,那么感受下kafka的效果

4、创建一个test topic
 bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test
5、发送消息
 bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test
this is a message
this is another message
6、消费者
bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning

到此你的测试也已经完成了。对于kafka的集群其实是很简单的,除了修改一下配置文件外,并无区别,这里就不讲了。
但是集群的实践对于理解kafka分片和备份很有帮助,建议大家参考http://kafka.apache.org/quickstart中的集群步骤完整的实践一遍。

### 安装 Apache Kafka 在不同操作系统上的步骤 Apache Kafka 是一个分布式流处理平台,可以在多种操作系统上安装和运行,包括 Windows、macOS 和 Linux。以下是针对不同操作系统的安装步骤: #### 在 Linux 上安装 Kafka 1. **安装 Java 环境**:Kafka 是基于 Java 的应用程序,因此需要先安装 Java 运行环境。可以选择安装 JRE 或者 JDK[^2]。 2. **安装 Zookeeper**:Kafka 使用 Zookeeper 来保存集群的元数据信息。Kafka 发行版自带了 Zookeeper,可以直接从脚本启动[^2]。 3. **下载 Kafka**:可以从 Kafka 官方网站下载最新版本的 Kafka[^1]。 4. **解压 Kafka 压缩包**:使用 tar 或者 unzip 命令解压下载Kafka 压缩包。 5. **启动 Zookeeper**:使用 Kafka 自带的脚本启动 Zookeeper 服务。 6. **启动 Kafka Broker**:配置好 Java 和 Zookeeper 之后,可以启动 Kafka 服务[^4]。 #### 在 Windows 上安装 Kafka 1. **安装 Java 环境**:确保 Windows 系统上已经安装了 Java 环境[^2]。 2. **安装 Zookeeper**:可以使用 Kafka 自带的 Zookeeper 或者安装一个完整版的 Zookeeper[^2]。 3. **下载 Kafka**:从 Kafka 官方网站下载适用于 Windows 的 Kafka 版本[^1]。 4. **解压 Kafka 压缩包**:使用解压工具解压下载Kafka 压缩包。 5. **启动 Zookeeper**:通过 Windows 命令行工具启动 Zookeeper 服务。 6. **启动 Kafka Broker**:使用命令行工具启动 Kafka 服务[^4]。 #### 在 macOS 上安装 Kafka 1. **安装 Java 环境**:确保 macOS 系统上已经安装了 Java 环境。 2. **安装 Zookeeper**:可以使用 Kafka 自带的 Zookeeper 或者通过 Homebrew 安装一个完整版的 Zookeeper[^2]。 3. **下载 Kafka**:从 Kafka 官方网站下载适用于 macOS 的 Kafka 版本[^1]。 4. **解压 Kafka 压缩包**:使用终端命令解压下载Kafka 压缩包。 5. **启动 Zookeeper**:通过终端启动 Zookeeper 服务。 6. **启动 Kafka Broker**:使用终端命令启动 Kafka 服务。 在完成安装后,可以通过 Kafka 自带的工具来创建主题、发送和消费消息,从而直观地感受 Kafka 的运转过程[^3]。 ```bash # 创建一个名为 test 的主题 bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test ``` 以上步骤可以帮助您在不同的操作系统上安装 Apache Kafka,并根据需要启动单机版或集群版的 Kafka 服务。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值