Linux 下的kafka 安装踩过的坑

最新推荐文章于 2025-06-18 09:23:41 发布
最新推荐文章于 2025-06-18 09:23:41 发布
阅读量854 收藏
点赞数
CC 4.0 BY-SA版权
文章标签： kafka 报错
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/MALE_2/article/details/85959303
本文分享了安装Kafka过程中的关键步骤与常见问题解决办法，包括JDK、Zookeeper和Kafka本身的安装配置，远程服务器端口设置，以及解决程序运行时的常见错误。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

安装Kafka需要的软件:

1、JDK

2、zookeeper

3、kafka 

这三个东西可以根据网上的资料来进行安装和配置。

过程中碰到这些坑

1、远程服务器，例如阿里云，记得在控制台开启端口准入和准出

2、 ./kafka-server-start.sh -daemon ../config/server.properties ，运行kafka时，如果不想断开远程连接后，kafka关掉，  可在启动时加上 -daemon参数

3、根据网上的demo编写好程序之后，运行时，如果出现marking the coordinator host:9092 for dead group consumer-test错误，则需要在客户端机器的host文件，对kafka服务器的地址和主机名进行配置

4、Caused by: java.lang.BootstrapMethodError: java.lang.NoSuchMethodError: org.springframework.kafka.listener.config.ContainerProperties.setClientId(Ljava/lang/String;)V   出现这个错是因为自己Pom文件里写的版本和Springboot版本里Kafka不兼容，去掉自定义的版本号，直接用Springboot自带的

以上就是我在安装kafka时，遇到的问题点，希望这些坑能帮助大家节省时间

 

 

MALE_2
关注
Kafka在Linux上的安装
WdzDevops的博客
09-22 358
本文提供了在Linux系统上安装Kafka的详细步骤，包括Java的安装、Kafka二进制文件的下载和解压缩、配置Kafka、启动Kafka服务器、创建主题以及发送和接收消息的示例。通过按照这些步骤，您可以在Linux上成功安装和使用Kafka，并开始构建高效可靠的实时数据流应用程序。在Linux系统上安装Kafka之前，您需要下载Kafka的二进制文件。解压缩后，您将得到一个名为kafka_2.13-2.8.0的文件夹，其中包含Kafka的所有文件。这将打开一个命令行界面，您可以在其中查看接收到的消息。
kafka linux部署并测试。
qq_38640546的博客
10-19 376
前言kafka是一个优秀的消息队列框架，现在基于linux安装写个文档记录下。提示：以下是本篇文章正文内容，下面案例可供参考一、环境准备1.下载linux 安装包。在这里插入图片描述注意下载二进制包，如果不是下载二进制包，就要自己编译了，这里不需要这么麻烦，就直接下载了。官网推荐下载2.13版本，就下载这个版本就行了。2. 注意这个版本已经内嵌了zookeeper了，不需要再去安装zookeeper了。
Linux kafka安装
ys3909656的博客
04-13 2212
一 JDK安装： 1.jdk1.7.0_55.tar.gz 准备安装包 2.tar -zxvf 安装包进行当前位置解压(一般解压在根目录opt下) 3.vi /etc/profile 编辑文本最下面加入以下内容进行保存： JAVA_HOME=jdk解压目录（注意最后没有/） PATH=$JAVA_HOME/bin:$PATH CLASSPATH=.:$JAVA_HOME/lib/d...
linux 安装kafka服务
最新发布
分享各类领域技术问题
06-18 451
linux 安装kafka服务
linux kafka安装包
06-27
linux kafka安装包，linux kafka安装包，linux kafka安装包
Linux下Kafka单机安装配置方法(图文)
09-15
Kafka是一个分布式的、可分区的、可复制的消息系统。它提供了普通消息系统的功能，但具有自己独特的设计。这个独特的设计是什么样的呢
Linux 安装 kafka
qq_42923937的博客
03-04 7078
例如：随着人工智能的不断发展，机器学习这门技术也越来越重要，很多人都开启了学习机器学习，本文就介绍了机器学习的基础内容。提示：以下是本篇文章正文内容，下面案例可供参考Kafka是由Apache软件基金会开发的一个开源流处理平台，由Scala和Java编写。Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者规模的网站中的所有动作流数据。这种动作（网页浏览，搜索和其他用户的行动）是在现代网络上的许多社会功能的一个关键因素。这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。
kafka监控工具：kafka eagle安装踩坑
运西北
12-29 2317
1、背景： 本人kafka使用小白，使用kafka produce生产数据的时候，从后台看kafka topic有没有数据很不方便，从网上找了找，发现有个开源工具kafka eagle比较好使。 2、软件准备： 官方网站链接：EFAK 刚开始下载了一个官方最新版的，v2.0.9版本，但是安装一直失败，报jvm崩溃，刚开始也不知道什么原因，选择了一个比较低的版本v1.4.8版本 3、安装流程： （1）从官网获取安装包，一直解压，/opt/software/kafka_eagle/kafka-eag
kafka安装与使用远程代码进行访问 --附踩坑记录
一只码农的成长之路
09-15 2786
转载请注明出处、毕竟纯手打 谢谢 kafka安装和使用java连接远程服务器进行消息的生成与消费 首先要使用kafka，要有jdk和zookeeper的环境 本文在阿里云的centos7环境上进行 jdk版本选择的是1.8.0_181 zookeeper的版本是3.4.12 kafka的版本是2.12-1.1.1 关于kafka命令的介绍 本文不介绍了 只介绍怎么搭建一个kafka单点...
那些年spark踩过的坑1
08-08
例如，如果您安装了Hadoop 2.7.5，那么应将`winutils.exe`放在`Hadoop安装目录\bin`下。 - **配置环境变量：**在系统的环境变量中设置`HADOOP_HOME`指向Hadoop的安装目录。这样，Spark就可以找到必要的工具。 #####...
生产环境开发踩过的坑～
xljiayou_的博客
03-31 3085
记录一些开发中踩过的坑～ 2020.03.31 不能拉取test分支合并到自己分支 只能将代码往test分支合，不能将test分支合并到自己分支，否则会污染自己分支，导致报废。应该将自己代码合并到test分支，在测试环境通过后，将自己分支合并到master，可以拉去master分支到自己分支。 2020.03.31 微服务是无状态的 直播截图。 我在这块最开始的思路是直播回调接口后，开一个协程去定...
Linux 安装kafka
zhuyouyong的专栏
12-28 5719
  下载地址：https://www.apache.org/dyn/closer.cgi?path=/kafka/0.8.1.1/kafka_2.10-0.8.1.1.tgz 安装以及启动kafka 步骤1：安装kafka  $tar -xzf kafka_2.10-0.8.1.1.tgz $ cd kafka_2.10-0.8.1.1.tgz   步骤2：配置server.prop...
Linux安装Kafka
perturb的博客
04-07 2634
kafka简介： kafka是一款分布式、支持分区的、多副本，基于zookeeper协调的分布式消息系统。最大的特性就是可以实时处理大量数据来满足需求。 kafka的安装： 1.下载kafka到本地（tgz版本） 官网：Apache Kafka 2.在usr/local中新建kafka文件夹 mkdir kafka 3.将下载好的包拖入kafka文件夹中 4.解压kafka_2.11-2.4.0.tgz [root@VM-16-8-centos local]# c...
Linux安装kafka
HQ DevJ的专栏
10-12 2343
Linux安装kafka下载运行 Kafka是由Apache软件基金会开发的一个开源流处理平台，由Scala和Java编写。Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者在网站中的所有动作流数据。 这种动作是在现代网络上的许多社会功能的一个关键因素。 这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。 对于像Hadoop一样的日志数据和离线分析系统，但又要求实时处理的限制，这是一个可行的解决方案。Kafka的目的是通过Hadoop的并行加载机制来统一线上和离线的消息处理，也是
Linux下kafka的安装
0 error(s)
12-15 2662
文章目录kafka的下载解压kafka安装包kafka配置修改kafka启动kafka生产与消费的示例参考文献 写在前面：kafka的使用需要zookeeper环境 kafka的下载 我们直接从官网上下载： wget http://archive.apache.org/dist/kafka/2.0.0/kafka_2.11-2.0.0.tgz 解压kafka安装包 sudo tar zxvf kafka_2.11-2.0.0.tgz 之后，我们添加配置环境变量，配置kafka的快捷方式： expo
linux安装kafka
YoungLee16的博客
07-16 708
安装kafka之前需要保证zookeeper已经安装成功.... 安装zookeeper 下载linux版本的kafka版本.kafka_2.11-2.0.1.... 解压压缩包 tar -xzf kafka_2.11-2.0.0.tgz 进入/home/soft/kafka_2.11-2.0.1/config, 修改配置文件:server.properties broker.id...
Linux下安装Kafka
NAMELI的博客
06-29 5556
zookeeper.connect：申明kafka所连接的zookeeper的地址，需配置为zookeeper的地址，由于本次使用的是kafka高版本中自带zookeeper，使用默认配置即可。添加开放端口：firewall-cmd --zone=public --add-port=80/tcp --premanent （–premanent永久生效，没有此参数，重启后失效）查看开放端口：firewall-cmd --list-port。重新载入规则：firewall-cmd --reload。
Kafka在linux中的安装
Andy的java博客
07-07 4835
本篇讲解以下kafka集群的搭建，这里搭建了两种Kafka集群，一种是使用ZK的传统集群，一种是不需要ZK的实验版集群，后期Kafka将会废弃ZK，但是现阶段还是推荐使用带有ZK的，因为不需要ZK的还处于实验性质Kafka的共识机制KRaft，仍然处于预览机制。未来KRaft将作为Apache Kafka的内置共识机制将取代Zookeeper，该模式在2.8版本当中就已经发布了体验版本，在3.X系列中KRaft是一个稳定release版本。
Linux下Kafka安装与集群部署详解
本文档详细介绍了在Linux环境下安装和部署Apache Kafka以及构建高可用的Kafka集群的过程。首先，作者强调了从Apache Kafka官方网站下载预编译的二进制包，而不是源代码，推荐选择与Scala 2.11兼容的版本，如kafka_...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值