linux 安装kafka并创建topic

如何安装配置kafka 本文介绍了如何安装kafka,如何配置kafka,kafka集群启动、停止及kafka基本操作方法。 阅读详情
## 安装kafka
### kafka 自带 zookeeper
机器 ip  :192.168.26.128
```bash
cd /opt
wget https://archive.apache.org/dist/kafka/2.0.0/kafka_2.12-2.0.0.tgz
tar -zxvf kafka_2.12-2.0.0.tgz

#zookeeper默认配置即可

#配置kafka
cd kafka_2.12-2.0.0
vim config/server.properties 
#在broker.id=0 下面追加
port=9092 
host.name=localhost 
listeners=PLAINTEXT://192.168.26.128:9092
advertised.listeners=PLAINTEXT://192.168.26.128:9092

#保存退出

#后台启动zookeeper(可配置成systemctl方式启动)
./bin/zookeeper-server-start.sh -daemon ./config/zookeeper.properties &

#启动kafka(可配置成systemctl方式启动)
./bin/kafka-server-start.sh config/server.properties &
#查看进程启动情况
ps -ef |grep kafka

zookeeper
在这里插入图片描述
kafka
在这里插入图片描述

创建topic并查看

创建topic

cd /opt/kafka_2.12-2.0.0

./bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test1

在这里插入图片描述

查看topic

./bin/kafka-topics.sh --list --zookeeper localhost:2181

在这里插入图片描述

springboot整合kafka 业务中需要使用到异步消息队列,为了快速搭建一个消息中间件,这里选了kafka,一方面是kafka搭建比较简单,而且这个中间件比较成熟,而且对于大数据量的消息支持很好,下面首先说说kafka的安装,我这里演示一下在linux上如何搭建kafka, 1、首先安装zookeeper,kafka的启动需要依赖zookeeper,zookeeper安装比较简单,基本上就是上传压缩包,解压,然后启动即可, ... 阅读详情

相关推荐

Ubuntu开机卡在BusyBox?3种方法快速修复initramfs错误(附详细命令)

本文详细介绍了Ubuntu开机卡在BusyBox并出现initramfs错误的3种修复方法,包括使用fsck检查文件系统、调整BIOS/UEFI存储设置以及修改GRUB内核参数。针对常见的文件系统错误和根设备无法找到问题,提供了具体的命令行操作步骤和实用技巧,帮助用户快速恢复系统启动。

milk8的博客 786

Linux安装Kafka,创建topic、生产者、消费者

1.创建安装目录/usr/local/kafka。5.进入kafka-3.3.1-src目录。6.修改zookeeper配置。7.启动zookeeper。8.修改kafka配置。

qq_36397267的博客 2876

Avalonia 项目结构说明

Avalonia UI

bjxingch的博客 1273

Kafka创建Topic的两种方式

创建topic的两种方式: 方法一: bin/kafka-topics.sh --create --topic topicname --replication-factor 1 --partitions 1 --zookeeper localhost:2181 -topic 指定topic -partitions指定分区数 kafka通过分区策略,将不同的分区分配在一个集群中的broker上,一般会分散在不同的broker上,当只有一个broker时,所有的分区就只能分配到该broker上。 消息会通过浮

weixin_47681855的博客 3万+

CF鼠标宏防封指南:手把手教你调校罗技G HUB压枪脚本的延迟与随机数

本文详细解析了如何通过罗技G HUB的Lua脚本功能调校鼠标宏,实现拟真操作体验。重点介绍了随机数应用、动态后坐力补偿和智能操作序列等高级技术,帮助玩家在不违反游戏规则的前提下提升操作精度。

weixin_26841957的博客 337

ptrade量化策略之沪深300指数增强

本策略的核心是在沪深300股票池中选股,选择的股票都是市值比较大,业绩比较好的白马股,根据市场相对位置以及基本面因子来选择股票

qq_29301281的博客 1192

kafka是如何创建topic的

Kafka创建topic命令很简单,一条命令足矣:bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 3 --partitions 3 --topic test   这条命令会创建一个名为test的topic,有3个分区,每个分区需分配3个副本。那么在这条命令之后Kafka又做了什么事情呢?本文将对此进行一下梳理,完整地阐述Kafka topic是如何创建的。   topic创建主要分为两个部分...

只为成功找方法 不为失败找借口 7873

STM8S全解析之系列文章4---STM8S芯片项目升级引导程序(使用中断接收升级数据)

STM8S全解析之系列文章4—STM8S芯片项目升级引导程序(使用中断接收升级数据) 提示:这里可以添加系列文章的所有文章的目录,目录需要自己手动添加 例如:第一章 Python 机器学习入门之pandas的使用 文章目录STM8S全解析之系列文章4---STM8S芯片项目升级引导程序(使用中断接收升级数据)前言一、Flash划分boot和App二、使用步骤1.引入库2.读入数据总结 前言 用过STM8S都知道它没有中断向量重定向,也就意味着STM8S的中断向量没办法指向其他的位置,间接说明升级的引导

weixin_39853312的博客 1033

基于java实现通过zookeeper创建kafka topic

基于java实现通过zookeeper创建kafka topic 之前有个需求,通过接口创建kafka topic,网上也找了好多资料,最开始通过python实现了一版,思路是通过ssh连接zookeeper服务器,然后执行创建topic的命令,不是理想的实现方式。后来查资料,在java里,可以使用zookeeper工具类和kafka adminutils类实现这个功能,做一下笔记。 使用的依赖包...

weixin_39587278的博客 1544

深入解析LCD DRM驱动框架中的KMS与GEM机制

本文深入解析了Linux内核中DRM(Direct Rendering Manager)驱动框架的核心机制,重点剖析了KMS(内核模式设置)与GEM(图形执行管理器)的工作原理。KMS作为显示系统的总指挥,负责原子化地控制CRTC、Encoder、Plane等硬件资源,确保画面同步更新,避免撕裂;GEM则作为显存大管家,通过DUMB和PRIME机制高效管理图形缓冲区的分配、共享与同步。文章结合RK3568平台实战,阐述了如何利用这些机制优化显示性能,并提供了调试技巧与常见问题解决方案。

weixin_29188997的博客 388

ransac拟合2D圆(三点定圆 c++详细版)

RANSAC(Random Sample Consensus,随机采样一致性)算法是一种基于随机采样的迭代算法,主要用于从一组包含大量噪声和异常值(外点)的数据中估计数学模型的参数。

twnkie的博客 1048

【kafka】主题topic

本文介绍kafka topic的相关操作,以及深入底层逻辑

thinking-fish的博客 5128

在 SAP 里,想让“同一笔业务”在多个账套(平行分类账)中生成不同编号的会计凭证,标准做法就是

摘要:SAP系统中实现同一业务在不同分类账生成独立凭证号的方法是为每个分类账配置独立的凭证类型-编号范围映射。通过FBN1/OBA7等事务码为各分类账分配专属编号段,系统过账时会按分类账自动取号,确保凭证号互不冲突。该方案适用于S/4HANA和ECC系统,支持标准过账(F-02)或分类账专属过账(FB01L)两种模式,最终实现"一业务多账套,各自独立编号"的目标。

金牌架构师 550

Linux查看topic的数据,kafka启动、kafka查看、创建topic的命令

这里目前只是记录了我使用过的操作,所以并不完整。一、kafka启动(linux环境)1、单节点启动(非集群)(1)下载kafka安装包http://kafka.apache.org/downloads,我这里下载的是kafka_2.11-2.3.0.tgz(2)解压(不需要安装,直接配置可用) tar -xzvfkafka_2.11-2.3.0.tgz(3)对于单节点kafka,我们配置很简单,...

weixin_28941715的博客 6029

efm32 入门.pdf

本PDF共计22页,介绍的是操作驱动API,下载与否自己斟酌。

廖雪峰Python教程[完整版]

廖雪峰的python教程整理的,已经排好版了,而且还是完整的,适合小白

kafka学习之linux单机安装kafka

linux单机安装kafka 一、关闭SELINUX vi /etc/selinux/config #SELINUX=enforcing #注释掉 #SELINUXTYPE=targeted #注释掉 SELINUX=disabled #增加 :wq! #保存退出 setenforce 0 #使配置立即生效 二、配置关闭防火墙,开启9092端口 启动一个服务:systemctl start firewalld.service 关闭一个服务:systemctl stop firewalld.service

zll_1234的博客 331

OV9734 DATASHEET,完整规格书

OV9734完整规格书,包括电气参数,尺寸规格,寄存器配置表等

在Ubuntu上安装kafka

最近在学习Flink 需要用上kafka 访问Kafka官方下载页面,下载稳定版本kafka.此安装包内已经附带zookeeper,不需要额外安装zookeeper.按顺序执行如下步骤: 以安装基于scala 版本2.12 为例 cd ~/下载 sudo tar -zxf kafka_2.12-2.7.0.tgz -C /usr/local cd /usr/local sudo mv kafka_2.11-0.10.1.0/ ./kafka sudo chown -R hadoop ./kafka 核心

HadwinLing 1473

C# WinForm 基于DirectShow.dll编写的程序,可边预览边保存视频,音频和图片

基于微软的DirectShow.dll的二次开发1.自动识别连接的摄像头跟麦克风且可以对其进行选择(默认选中第一个)2.可录制wmv和avi两种格式的视频并且都带有音频,avi可以录制的分辨率和帧数进行选择,wmv默认进行了淸晰度优化如不喜欢可去除代码中有相关提示3.可在预览点开之后进行拍照,也可边录制视频边拍照4.添加了视频和音频的压缩功能(酌情使用)这次二次开发发现C#对DirectShow的相关信息太少,这次做完也不敢藏私共享出来,还望大家指正

Linux安装 kafka 详细步骤

Linux安装 kafka 详细步骤一、安装JDK环境1.1、下载jdk1.2、上传jdk到linux1.3、解压jdk1.4、配置环境变量1.5、测试jdk安装是否成功二、安装Zookeper2.1、下载安装包2.2、创建安装目录2.3、修改配置2.4、创建节点的myid:2.5、启动ZooKeeper三、安装Kafka3.1、下载kafka3.2、创建工作目录&启动3.3、开启远程链接3.4、创建和查看topic 一、安装JDK环境 1.1、下载jdk jdk下载链接: http://www.j

qq_45887180的博客 5843

linux下安装kafka 及集群的简单搭建

linux下安装kafka 安装条件: 确保zookeeper已经安装成功。zookeeper安装过程见:https://www.cnblogs.com/expiator/p/9853378.html 1.下载kafka 进入Apache官网   http://kafka.apache.org/downloads.html 选择Binary downlo...

qq_40597878的博客 461

Linux安装Kafka,并使用Flink连接读取Kafka

文章目录 前言 一、获取Kafka安装包 二、安装步骤 1.解压文件 2.重命名 3.设置环境变量 4.使环境变量生效 三、启动Kafka 1.先启动ZooKeeper服务 2.启动kafka服务 3.创建一个名为"topTest"的topic 4.打开Producer(生产者)服务 5.打开Customer(消费者)服务 四,Java连接kafka 1.maven依赖 2.实体类 3.连接工具类 4.运行 五,Flink连接读取Kafka 1.主方法类 2.运行

growing1224的博客 1307

Linux部署Kafka及常见问题记录

(物理上不同Topic的消息分开存储,逻辑上一个Topic的消息虽然保存于一个或多个broker上但用户只需指定消息的Topic即可生产或消费数据而不必关心数据存于何处)kafka消息发送的时候 ,考虑到性能 可以采用打包方式发送, 也就是说 传统的消息是一条一条发送, 现在可以先把需要发送的消息缓存在客户端, 等到达一定数值时, 再一起打包发送, 而且还可以对发送的数据进行压缩处理,减少在数据传输时的开销。topic命令时的警告 创建topic的时候,如果名称中包含. 或者_,kafka会抛出警告。

leeindex的博客 2897

Kafka安装测试

1、下载kafka wgethttp://mirrors.tuna.tsinghua.edu.cn/apache/kafka/2.4.0/kafka_2.12-2.4.0.tgz 2、上传至linux下并解压 3、启动服务 3.1、启动zookeeper (启动zk有两种方式,第一种是使用kafka自己带的一个zk。) bin/zookeeper-server-start.sh config/zookeeper.properties & 另一种是使用其它的zookeeper,可以位..

朱庆昌摩羯座 153

Linux解压安装Kafka

Linux解压安装Kafka MacBook Linux安装zookeeper MacBook Linux安装Kafka Kafka依赖Zookeeper Kafka依赖Zookeeper,可以单独安装Zookeeper,也可以直接启动Kafka包里自带的Zookeeper Kafka 安装 cd /data/software #下载 wget http://mirror.bit.edu.cn/apache/kafka/2.0.1/kafka_2.11-2.0.1.tgz wget http://mirr

yinjl123456的博客 1030

CentOS 7 安装配置 kafka,并配置开机自启

本文将详细介绍如何在Linux环境下安装并配置Apache Kafka。Kafka是一个分布式流处理平台,广泛应用于消息系统、指标收集、日志聚合等场景。为了顺利运行Kafka,首先需要确保已安装JDK。

leafseelight的专栏 1377

kafka发送端源码 java_Linux系统中KafKa安装和使用方法 java客户端连接kafka

kafka linux单机安装1 下载并安装kafka#tarzxvfkafka_2.12-1.1.0tgz#mvkafka_2.12-1.1.0/usr/local/kafka#cd/usr/local/kafka2 启动服务运行kafka需要使用Zookeeper,所以需要先启动一个Zookeeper服务器,如果没有Zookeeper,可以使用kafka自带打包和配置好的Zoo...

weixin_33481663的博客 149

kafka下载安装

kafka下载与Linux下安装配置一览

shangyupeng_的博客 1万+

centos7系统安装kafka单机版

centos7安装kafka的单机版

笑对人生的博客 620
上一篇: MySql主从复制的同步方式(四)
下一篇: MySql主从复制的同步方式(五)
宁漂打工仔
博客等级 码龄9年 1万+粉丝 153原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

宁漂打工仔

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值