【安装】kafka单机版升级为3.8.1

最新推荐文章于 2025-09-10 10:26:50 发布
原创 最新推荐文章于 2025-09-10 10:26:50 发布 · 547 阅读 · 5 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#kafka #分布式

升级前注意做好集群的备份

一、解压

sudo su - 
tar -zxvf  kafka_2.12-3.8.1.tgz
sudo ln -s /opt/kafka_2.12-3.8.1 /opt/kafka

 

二、配置server.properties

hostname -i 获取本机ip ，修改配置文件中/opt/kafka/conf/server.properties 中的localhost为本机ip，如下图有两处需要修改

hostname -i
vim /opt/kafka/conf/server.properties

在这里插入图片描述

 <

最低0.47元/天 解锁文章
大数据FLINK实时数仓项目实战
悦分享
10-06 8320
普通的实时计算优先考虑时效性，所以从数据源采集经过实时计算直接得到结果。如此做时效性更好，但是弊端是由于计算过程中的中间结果没有沉淀下来，所以当面对大量实时需求的时候，计算的复用性较差，开发成本随着需求增加直线上升。实时数仓基于一定的数据仓库理念，对数据处理流程进行规划、分层，目的是提高数据的复用性。 原始数据，日志和业务数据 。根据数据对象为单位进行分流，比如订单、页面访问等等。维度数据。对于部分数据对象进行进一步加工，比如独立访问、跳出行为，也可以和维度进行关联，形成宽表，依旧是明细数据。根据某个主题将
大数据领域异常检测的集群部署方案
最新发布
软件工程实践的博客
10-14 1027
异常（Anomaly）指“与预期行为或模式显著偏离的数据点或事件”，在不同场景中表述不同（如离群点、异常值、故障、欺诈等）。
01.生产环境-01-kafka3.8 集群部署
Anwen的博客
04-02 494
在生产者控制台输入hello kafka，消费者控制台，就可以消费到生产者的消息，输出 hello kafka，表示消费端成功消费了生产者生产的消息！–replication-factor 指定副本数，必须小于等于集群节点数，否则报错。–partitions 指定分区数，如果设置3个分区，则最多3个消费者同时消费信息。生成集群ID → 格式化存储 → 启动所有节点 → 验证元数据 → 功能测试。–bootstrap-server 可以指定集群任意一个节，或所有节点。所有节点配置启动服务。
Kafka安装
小何的博客
11-02 1095
Kafka安装
kafka3.8集群搭建
w2909526的博客
09-10 293
kafka集群搭建
Docker单点部署apache/kafka:3.8.1
Spiral_Cow的博客
01-21 342
【代码】Docker单点部署apache/kafka:3.8.1。
kafka3.8的基本操作
sqlora的专栏
09-20 1464
WATCHER::[1, 2, 3]WATCHER::[][0, 1][state]nullnullnull相关参考：内存不足问题：thenfi。
kafka3.8.0笔记（Centos7）
孤独天狼的博客
10-30 553
1、需要jdk8以上。
数仓体系与数据治理全集
weixin_44687655的博客
04-06 3947
数据仓库（Data Warehouse），可简写为DW或DWH。数据仓库，是为企业所有级别的决策制定过程，提供所有类型数据支持的战略集合。它出于分析性报告和决策支持目的而创建。
一文探究数据仓库体系(2.7万字建议收藏)
我的祖传代码
10-19 3452
​ 一什么是数据仓库 1.1数据仓库概念 数据仓库，英文名称为Data Warehouse，可简写为DW或DWH。数据仓库，是为企业所有级别的决策制定过程，提供所有类型数据支持的战略集合。它出于分析性报告和决策支持目的而创建。 1.2数据仓库特点 1.2.1面向主题 普通的操作型数据库主要面向事务性处理，而数据仓库中的所有数据一般按照主题进行划分。主题是对业务数据的一种抽象，是从较高层次上对信息系统中的数据进行归纳和整理。 面向主题的数据可以划分成两部分--...
linux环境最新kafka3.8.0单节点kraft+ssl部署
weixin_39004677的博客
09-05 2976
本文档介绍了如何进行kafka单节点kraft部署及如何在kafka中配置SSL加密，包括证书的重新生成过程，如单节点kraft服务启动，创建主题，查看主题，订阅主题，消费主题，为broker生成SSL密钥和证书，创建CA证书，签名证书，验证服务。
winds版kafka3.8.0增加SASL_PLAINTEXT 认证
a1011259215的博客
09-23 1749
kafka3.8.0 SASL_PLAINTEXT 认证 winds版本 配置简单
Spring Cloud Stream 3.x+kafka 3.8整合
StreamlineWq的博客
10-09 2720
SpringCloud Alibaba五大组件之——RocketMQ，趁着此机会，继续学习了解一下Spring Cloud Stream，本文就以kafka为例。本文项目用到的所有Maven依赖和版本，都是和前面几篇文章一样。由于整合kafka 不需要用到Cloud Alibaba一系列的技术，所以下载到源码运行不起来的，请删除mysql，nacos，dubbo，redis等一系列相关的依赖和代码。本文写下的时候，kafka最新版本为3.8版本，所以就以3.8版本举例说明。
生产环境kafka升级过程
moxiaotian0510的博客
12-17 1046
Kafka 是一个分布式流处理平台，广泛应用于大数据领域。随着技术的发展，不断更新和升级 Kafka 版本可以带来更好的性能、更高的稳定性和更多的功能。本文档将指导您如何将现有的 Kafka 集群从旧版本升级到 Kafka 3.8.0，并确保集群的顺利运行。首先，确保所有 Kafka 服务已经停止。重复上述步骤，依次对集群中的其他节点进行升级。
Kafka3.8.0+Centos7.9的安装参考
sqlora的专栏
09-20 2794
Kafka Eagle可以监控 Kafka 集群的健康状态，消费者组的消费情况，创建和删除 Topic，支持使用 KSQL 对 Kafka 消息做 Ad-hoc 查询，支持多种告警方式等等。log.dirs=/opt/kafka/kafkalogs/ #消息存放的目录，这个目录可以配置为“，”逗号分割的表达式，上面的num.io.threads要大于这个目录的个数这个目录，如果配置多个目录，新创建的topic他把消息持久化的地方是，当前以逗号分割的目录中，那个分区数最少就放那一个。
CentOS 上 Apache Kafka 2.13-3.8.1 集群部署指南（ZooKeeper 模式）
xhcx_25的博客
03-29 1700
准备至少 3 台 CentOS 服务器（可以是虚拟机或实体机），用于部署 3 个 Kafka broker 节点和 3 个 ZooKeeper 实例。这样可以形成一个具有高可用性的生产级基本集群（典型架构一般使用 3 个 ZooKeeper 节点，必要时可扩展到 5 个。确保这些服务器网络互通，并为它们配置合适的主机名或 IP 地址（以下文档中假定主机名分别为kafka1kafka2kafka3如果没有 DNS，可在每台服务器的/etc/hosts文件中添加相应条目以解析主机名。
Linux之kafka单机安装和使用简介
月生的静心苑
08-26 1208
Apache Kafka 是一个分布式流处理平台，最初由 LinkedIn 开发，并于 2011 年开源，随后捐赠给 Apache 基金会。Kafka 被广泛应用于构建实时数据管道和流处理应用，旨在以高吞吐量、低延迟和高容错性处理大量实时数据流。 我们创建一个主题，通过生产消息，消费者可以正常消费获得消息，说明服务正常。创建主题查看主题test发送消息hello wuhs另起一个窗口，消费消息。
KAFKA集群安装与配置（带Zookeeper）2023版
harryxia2014的博客
02-26 1836
主要内容 1、JDK1.8安装配置 2、ZooKeeper3.81安装配置 3、kafka3.4安装配置
单机版kafka 3.8.1安装
01-30
### 安装单机版 Kafka 3.8.1 #### 下载 Kafka 为了安装单节点版本的 Apache Kafka 3.8.1，首先需要下载对应的压缩包。可以从Apache官方网站获取该软件的稳定版本[^1]。 ```bash wget https://downloads.apache.org/kafka/3.8.1/kafka_2.13-3.8.1.tgz ``` #### 解压文件 下载完成后解压所获得的 tarball 文件到指定目录下以便后续配置和启动服务[^1]。 ```bash tar -xzf kafka_2.13-3.8.1.tgz -C /opt/ cd /opt/kafka_2.13-3.8.1 ``` #### 配置环境变量 (可选) 为了让命令行工具能够全局访问，可以考虑设置 `PATH` 环境变量来包含Kafka二进制文件路径[^1]。 ```bash export PATH=$PATH:/opt/kafka_2.13-3.8.1/bin ``` #### 启动 Zookeeper 和 Kafka Broker 由于 Kafka 使用Zookeeper来进行协调工作，在运行Kafka之前先要启动Zookeeper实例。对于开发测试用途，默认配置通常已经足够满足需求[^1]。 ```bash # Start ZooKeeper server using default configuration bin/zookeeper-server-start.sh config/zookeeper.properties & # Wait a few seconds before starting the broker to ensure that ZooKeeper is ready. sleep 5 # Start Kafka broker with default settings bin/kafka-server-start.sh config/server.properties & ``` #### 创建主题并发送消息 完成上述步骤之后就可以创建一个简单的topic，并通过生产者向其中写入一些数据验证集群是否正常运作了[^1]。 ```bash # Create topic named &#39;test&#39; bin/kafka-topics.sh --create --topic test --bootstrap-server localhost:9092 --partitions 1 --replication-factor 1 # Produce messages into this new topic interactively or via file input bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test > This is my first message ^D # Press Ctrl-D when done typing your messages. # Consume these produced records from beginning of time offset bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --from-beginning --topic test This is my first message ```
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

roman_日积跬步-终至千里

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值