linux上搭建kafka

最新推荐文章于 2025-10-09 16:45:44 发布

原创最新推荐文章于 2025-10-09 16:45:44 发布 · 889 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#Kafka #linux

笔记而已专栏收录该内容

15 篇文章

订阅专栏

该博客介绍了在Linux环境下安装和使用Kafka的步骤。首先需确保有Java环境，接着下载并解压Kafka，之后可编写命令启动和停止Zookeeper与Kafka，还提到要赋予权限，同时感谢并借鉴了简书相关博客。

首先要拥有java环境

可以测试一下是否拥有

java -version

好啦！开始

下载kafka

wget http://mirrors.cnnic.cn/apache/kafka/0.10.0.1/kafka_2.10-0.10.0.1.tgz

解压

tar -zxvf  kafka_2.10-0.10.0.1.tgz

解压后其实就可以了

感谢并借鉴简书博客：https://www.jianshu.com/p/67f9b612dc3b

来编写命令启动zookeeper与kafka

vi kafkastart.sh

#启动zookeeper
/data/kafka_2.10-0.10.2.1/bin/zookeeper-server-start.sh /data/kafka_2.10-0.10.2.1/config/zookeeper.properties &
#等3秒后执行
sleep 3 
#启动kafka
/data/kafka_2.10-0.10.2.1/bin/kafka-server-start.sh /data/kafka_2.10-0.10.2.1/config/server.properties &

停止zookeeper与kafka

vi kafkastop.sh

#关闭zookeeper
/data/kafka_2.10-0.10.2.1/bin/zookeeper-server-stop.sh /data/kafka_2.10-0.10.2.1/config/zookeeper.properties &
#等3秒后执行
sleep 3 
#关闭kafka
/data/kafka_2.10-0.10.2.1/bin/kafka-server-stop.sh /data/kafka_2.10-0.10.2.1/config/server.properties &

赋予权限

chmod 777 kafkastart.sh

chmod 777 kafkastop.sh

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

喜欢喝豆浆的鱼

关注关注

2
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

Linux 搭建 kafka 流程

程序猿进阶

06-28

1336

上进行的操作，同样的操作要在三台虚拟机上都执行，只是有些细微的配置不同，其他配置信息完全相同。对于不同虚拟机上有差异的部分，我会一一指出。集群来启动，但是考虑到未来的项目需求，建议使用独立的。需要搭建几个节点就是发送几份，启动服务即可。集群的地址，可以是多个，多个之间用逗号分割。的启动就不会影响我们继续在控制台输入命令。工具将下载好的软件传送到虚拟机的，放在了。：需要说明的是，我现在是在虚拟机。集群，并且是三台都要手动去启动。处于阻塞状态，可以直接输入数据。此时，一旦有数据生成，此处的。

聊聊 Kafka：在 Linux 环境上搭建 Kafka

m0_65634190的博客

12-22

364

一、环境准备 jdk下载地址链接： https://pan.baidu.com/s/1CseCg3k56uE_tLTF4ckEBw ，提取码:gw76 zookeeper下载地址链接： https://pan.baidu.com/s/1zVc6Z-QqrIrn_FCvQ1s6wA ，提取码: a196 kafka下载地址链接： https://pan.baidu.com/s/1bY5IvZOH7Bog5PpwKkebqA ，提取码: 4n52 1.1 Java环境

参与评论您还未登录，请先登录后发表或查看评论

Linux搭建Kafka开发环境

04-24

NULL 博文链接：https://mazhilin.iteye.com/blog/2421565

Linux配置Kafka集群

热门推荐

m0_56659620的博客

07-03

1万+

Kafka是由Apache软件基金会开发的一个开源流处理平台，由Scala和Java编写。该项目的目标是为处理实时数据提供一个统一、高吞吐、低延迟的平台。其持久化层本质上是一个“按照分布式事务日志架构的大规模发布/订阅消息队列”，这使它作为企业级基础设施来处理流式数据非常有价值。

精选资源

在linux中搭建kafka集群

08-18

以下是如何在Linux上搭建Kafka集群的详细步骤，主要围绕Zookeeper集群的配置和启动。首先，你需要至少三台Linux服务器，因为Zookeeper集群通常由奇数台服务器组成，以确保在任何情况下都能保持多数节点的存活，...

Linux搭建Kafka集群&Zookeeper

weixin_38920945的博客

02-27

961

# kafka源码编译安装准备三台服务器登录后复制 192.168.xxx.xxx 192.168.xxx.xxx 192.168.xxx.xxx1.2.3.安装kafka前安装JDK和zookeeper如下步骤：JDK配置安装登录后复制官网地址( https://www.oracle.com/cn/...

Linux 下 kafka 集群部署

qq_59998784的博客

07-03

3921

本文将以三台服务器为例，介绍在 linux 系统下kafka的部署方式。

Kafka在Linux环境下搭建过程

weixin_30407613的博客

12-16

185

准备工作　　Kafka集群是把状态保存在Zookeeper中的，首先要搭建Zookeeper集群。由于我们之前的分布式系统中已经安装zookeeper服务，这里不进行zookeeper安装教程以及应用教程图解。需要注意的是：Zookeeper集群的工作是超过半数才能对外提供服务，3台中超过两台超过半数，允许1台挂掉，是否可以用偶数，其实没必要。如果有四台那么挂掉一台还剩下三台服务器，如果在挂...

Linux下搭建kafka

Num_xuj的博客

05-10

342

Linux下搭建kafka Linux下搭建kafka一、kafka是什么？二、使用步骤1.安装相关包2.依次启动服务3.安装过程中遇到了问题一、kafka是什么？ Kafka是最初由Linkedin公司开发，是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统（也可以当做MQ系统），常见可以用于web/nginx日志、访问日志，消息服务等等，Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。主要应用场景是：日志收集系统和消息系统。二、使用步

Linux环境下搭建Kafka

zx711166的博客

09-04

855

一、运行环境搭建在Windows环境中的用户需要先安装虚拟机，下载VMware-workstation-full-11.1.0并安装；虚拟机安装好后，下载CentOS-7-x86_64-DVD-1503-01的镜像文件，CentOS（Community Enterprise Operating System，中文意思是：社区企业操作系统）是Linux发行版之一，它是来自于Red Hat

Linux搭建kafka集群

Wind___Drift的博客

11-08

339

1首先安装zookeper集群 tar -zxvf zookeeper-3.4.5.tar.gz mv zookeeper-3.4.5 zk vi ~/.bashrc export ZOOKEEPER_HOME=/usr/local/zk export PATH=$ZOOKEEPER_HOME/bin source ~/.bashrc cd zk/conf cp zoo_sample.cfg zoo.cfg vi zoo.cfg 修改：dataDir=/usr/local/zk/data 新增：（redis

Linux 下搭建 Kafka 环境

Practitioner

10-17

666

由于 Kafka 和 Zookeeper 装在同一个 Linux 中，所以 zookeeper.connect 配置维持默认配置即可。注：以上中间件均搭建在一个 Linux 系统中，如果需要分不同的系统安装，注意修改对应的连接配置。接下来，就开始启动 Kafka，首先，需要先启动 Zookeeper。接下来，再打开 Shell 一个窗口，创建 topic。切换到生产者启动页面，发送数据，消费者能正常接收数据。再打开一个 Shell 窗口，启动消费者。配置 Zookeeper。接下来，配置 Kafka。

linux下快速搭建kafka

司马缸砸缸了

10-12

400

废话不多说，直奔主题1.安装JDK网上一大把，随便搜一下2.安装Zookeeperkafka依赖于Zookeeper2.1下载Zookeeper地址：http://zookeeper.apache.org/releases.html （最新的zookeeper-3.4.8.tar）2.2解压Zookeeper1、*.tar 用 tar -xvf 解压2、*.gz 用 gzip -d或者gunzip

linux服务器上启动kafka,linux服务器上搭建Kafka

weixin_39549936的博客

05-06

414

kafka是分布式流处理平台，也称为：分布式提交日志，最主要的作用是实现分布式持久化保存数据的目的。侧重点在于数据的存储和读取，针对实时性比较高的流式数据处理场景。MQTT borker的侧重点在于客户端和服务器的通信，Kafka不支持mqtt协议。手动环境搭建具体可以参照官网，步骤比较简单官网：http://kafka.apache.org/quickstart具体步骤：wget http://...

linux下搭建kafka

09-23

在 Linux 系统下搭建 Kafka 可按以下步骤进行： 1. **安装 JDK**：Kafka 是基于 Java 开发的，所以需要先安装 JDK。 2. **安装 Kafka**：将下载的 Kafka 放在指定目录，例如 `/opt/kafka`，然后进行解压操作，命令如下： ```bash tar -zxvf kafka_2.12-3.4.1.tgz ``` 3. **配置 Kafka 服务**：进入 Kafka 配置目录并修改 `server.properties` 文件，示例如下： ```bash cd /opt/kafka/kafka_2.12-3.4.1/config vim server.properties ``` 修改的参数内容如下： ```plaintext broker.id=0 port=9092 host.name=localhost log.dirs=/opt/kafka/kafka_log zookeeper.connect=localhost:2181 ``` 其中，`broker.id` 为节点的唯一标识，`port` 是端口号，`host.name` 需修改为自己的服务器 IP，`log.dirs` 是日志存放路径，`zookeeper.connect` 为 Zookeeper 地址和端口（单机配置部署为 `localhost:2181`） [^2]。 4. **修改 Zookeeper 配置文件**：修改 `config/zookeeper.properties` 文件（虽然在单机简单配置中可能使用默认配置，但完整安装流程包含此步骤） [^3]。 5. **启动 Kafka**：使用以下命令启动 Kafka： ```bash /opt/kafka/kafka_2.12-3.4.1/bin/kafka-server-start.sh /opt/kafka/kafka_2.12-3.4.1/config/server.properties ``` 6. **测试实例**： - **创建 Topic**：可使用相关命令创建主题。 - **查看 Topic**：查看已创建的主题。 - **删除 Topic**：删除指定主题。 - **生产/消费数据**：进行消息的生产和消费操作，以验证 Kafka 是否正常工作 [^3]。另外，如果要搭建 Kafka 集群（如 3 个 broker），还需要进一步的搭建和测试过程，包括了解副本概念、进行集群消息的生产和消费、集群消费组的消费等操作 [^3]。同时，在关闭 Kafka 时，要先关闭 Kafka，再关闭 Zookeeper，否则可能导致 Kafka 进入死循环，若进入死循环则需强制杀掉 Kafka 服务进程 [^4]。