kafka 命令列表

Kafka常用的Topic命令 本文介绍了一些在Kafka中常用的Topic命令,包括创建Topic、查看Topic列表、查看Topic详细信息、修改Topic配置以及删除Topic。该命令将在本地的Kafka服务器上创建一个名为"my_topic"的Topic,该Topic将被分为3个分区,并且每个分区将被复制到2个副本中。该命令将返回关于"my_topic"的详细信息,包括分区数量、副本分配以及每个副本的状态等信息。该命令将从Kafka服务器中删除名为"my_topic"的Topic。该命令将将"my_topic"的。 阅读详情
kafka 基于0.8.0版本的命令用法:
查看topic分布情况kafka-list-topic.sh
# bin/kafka-list-topic.sh --zookeeper 192.168.197.170:2181,192.168.197.171:2181 (列出所有topic的分区情况)
# bin/kafka-list-topic.sh --zookeeper 192.168.197.170:2181,192.168.197.171:2181 --topic test (查看test的分区情况)


其实kafka-list-topic.sh里面就一句
exec $(dirname $0)/kafka-run-class.sh kafka.admin.ListTopicCommand $@
实际是通过 kafka-run-class.sh脚本执行的包kafka.admin下面的类
##创建TOPIC kafka-create-topic.sh
# bin/kafka-create-topic.sh --replica 2 --partition 8 --topic test --zookeeper 192.168.197.170:2181,192.168.197.171:2181
创建名为test的topic, 8个分区分别存放数据,数据备份总共2份

# bin/kafka-create-topic.sh --replica 1 --partition 1 --topic test2 --zookeeper 192.168.197.170:2181,192.168.197.171:2181
结果 topic: test2 partition: 0 leader: 170 replicas: 170 isr: 170
##重新分配分区kafka-reassign-partitions.sh
这个命令可以分区指定到想要的--broker-list上
# bin/kafka-reassign-partitions.sh --topics-to-move-json-file topics-to-move.json --broker-list "171" --zookeeper 192.168.197.170:2181,192.168.197.171:2181 --execute
cat topic-to-move.json
{"topics":
[{"topic": "test2"}],
"version":1
}
##为Topic增加 partition数目kafka-add-partitions.sh
#bin/kafka-add-partitions.sh --topic test --partition 2 --zookeeper 192.168.197.170:2181,192.168.197.171:2181 (为topic test增加2个分区)

##控制台接收消息
#bin/kafka-console-consumer.sh --zookeeper 192.168.197.170:2181,192.168.197.171:2181 --from-beginning --topic test
##控制台发送消息
# bin/kafka-console-producer.sh --broker-list 192.168.197.170:9092,192.168.197.171: 9092 --topic test
##手动均衡topic, kafka-preferred-replica-election.sh
# bin/kafka-preferred-replica-election.sh --zookeeper 192.168.197.170:2181,192.168.197.171:2181 --path-to-json-file preferred-click.json

cat preferred-click.json
{
"partitions":
[
{"topic": "click", "partition": 0},
{"topic": "click", "partition": 1},
{"topic": "click", "partition": 2},
{"topic": "click", "partition": 3},
{"topic": "click", "partition": 4},
{"topic": "click", "partition": 5},
{"topic": "click", "partition": 6},
{"topic": "click", "partition": 7},
{"topic": "play", "partition": 0},
{"topic": "play", "partition": 1},
{"topic": "play", "partition": 2},
{"topic": "play", "partition": 3},
{"topic": "play", "partition": 4},
{"topic": "play", "partition": 5},
{"topic": "play", "partition": 6},
{"topic": "play", "partition": 7}

]
}

##删除topic,慎用,只会删除zookeeper中的元数据,消息文件须手动删除
# bin/kafka-run-class.sh kafka.admin.DeleteTopicCommand --topic test666 --zookeeper 192.168.197.170:2181 ,192.168.197.171:2181
Difftest踩坑笔记(一) Difftest是差分测试框架,有什么用呢?高性能CPU的设计需要做复杂的测试,传统的测试方法运行较慢,而且出了问题很难定位,Difftest就是为了解决这两个问题。 阅读详情

相关推荐

机器学习(ML)在材料领域应用

机器学习作为一种兼顾开发效率以及开发成本的方法,已经逐渐应用于材料发现、结构分析、性质预测、反向设计等多个领域,并且在材料学研究中展现出惊人的潜力。传统的发现新材料的方法,如经验试错法和基于密度泛函理论(DFT)的方法,往往需要较长的研发周期,成本高、效率低,已经不能很好的适应如今需求量激增的材料学领域 ...

W5632DE的博客 3714

Kafka_命令经验集

1. 查看所有 topic 列表 ./kafka-topics.sh --zookeeper {ip}:2181 --list 2. 创建 topic 主题 ./kafka-topics.sh --create --zookeeper {ip}:2181 --replication-factor 1 --partitions 1 --topic {topic_name} 3. 创建生产者消息 ./kafka-console-producer.sh --broker-list {ip}:9093 --topi

初学者乐园的博客 1037

告别手动标注!用ENVI Classic高效搞定高光谱图像语义分割标签(以农业/地物分类为例)

本文详细介绍了如何利用ENVI Classic实现高光谱图像的半自动化智能标注,特别针对农业和地物分类场景。通过光谱特征分析、智能标注技巧和MAT文件转换,显著提升标注效率和质量,助力AI模型训练。

weixin_28694169的博客 251

kafka中关于消息的命令

bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test6 --from-beginning bin/kaf...

wyqwilliam的博客 2066

卷积神经网络-猫狗识别(附源码)

利用python实现一个卷积神经网络,训练猫狗数据集,实现对猫狗图片的预测识别

m0_63223213的博客 2万+

Visual Studio Installer下载失败的5种修复方法(含DNS修改/补丁安装)

本文针对Visual Studio Installer下载安装文件失败的问题,提供了从网络层到系统层的深度排查与修复指南。详细介绍了DNS修改、代理配置、防火墙设置、系统服务检查等5种核心修复方法,并包含离线安装与手动补丁等替代方案,帮助开发者彻底解决安装难题。

sprite的博客 1615

kafka常用命令及配置参数详解

kafka常用命令及配置参数详解 常用命令 1、启动zookeeper ​ bin/zookeeper-server-start.sh config/zookeeper.properties & 2、启动kafka bin/kafka-server-start.sh config/server.properties & 3、停止kafka bin/kafka-server-...

wyht1222的博客 2276

西门子 标准程序解读---> 机器手抓取和涂胶控制程序

摘要 该程序实现机械手在OP70/OP90工位的自动化控制,核心功能包括: 流程控制:分段(Seg1-Seg11)管理抓件、涂胶、放件等动作,结合DB1050/DB1250数据块监控工位状态及变位机位置反馈。 安全机制:配置干涉区(FC124)、实时检测安全光/急停信号,防止碰撞;服务程序(FB191)支持维修位触发与安全隔离。 参数配置:通过DB块关联机器人速度、节拍(FB27)、车型编码(如空过=2)及手自动模式(DB70.DBX21.2)。 应用场景:适用于汽车焊接/装配线

工控智联驿站 1239

kafka常用命令汇总(亲测自用)

kafka常用命令

全栈开发的博客 3287

使用TBtools进行物种间共线性分析

Sequence Toolkit ---Fasta Tools ----ID Prefix (fasta文件)

sunny_dayone的博客 8744

如何在Jetson Nano上快速搭建Pytorch环境(含torchvision安装教程)

本文详细介绍了在Jetson Nano上快速搭建PyTorch环境的完整步骤,包括系统准备、PyTorch安装优化、torchvision编译安装及环境测试。通过本指南,开发者可以高效部署深度学习开发环境,充分利用Jetson Nano的GPU加速能力进行计算机视觉项目开发。

weixin_42628941的博客 340

kafka基本管理操作命令

##列出所有主题 kafka-topics.bat --zookeeper localhost:2181/kafka --list ##列出所有主题的详细信息 kafka-topics.bat --zookeeper localhost:2181/kafka --describe ##创建主题 主题名 my-topic,1副本,8分区 kafka-topics.bat --zookeeper localhost:2181/kafka --create --replication-factor 1 --p

Leon_Jinhai_Sun的博客 158

快手NS sig3签名算法(2025年1月)

快手NS sig3签名算法(2025年1月)

sh_moranliunian的博客 3670

kafka查看Topic列表及消费状态等常用命令

kafka查看Topic列表及消费状态等常用命令 - EdisonYao - 博客园

u013452335的博客 2107

WINCC7.3破解文件

WINCC7.3硬件够破解文件,有需要的下载!WINCC7.3硬件够破解文件,有需要的下载!

jre9下载 jdk9

(Java SE Runtime Environment 9.0) 9.0u175 官方最新版 【x86|x64】

kafka tools topic列表打不开_kafka java api对比springboot整合kafka以及常用命令

概述最近在使用kafka,需要往kafka中发送消息以及消费,这里就复习下kafka api的基本使用情环境kafka java api我们先来看看java api 然后在对比使用springboot整合KafkaConfig获取KafkaProducer 和KafkaConsumer实例,这里写成了单例模式KafkaProducerTrain (生产者)KafkaConsumerTrain(消费...

weixin_39765100的博客 430

汉书HE8,好用的汇编代码编写工具

汉书HE8,好用的汇编代码编写工具早期编写汇编代码所用功能强大

kafka 命令行工具常用命令行操作

文章目录1. 数据命令1.1 启动kafka服务1.2 创建topic1.3 向topic中发送数据1.4 开启一个消费端2. check命令2.1 查看kafka topic列表2.2 查看kafka特定topic的详情2.3 查看consumer group列表2.4 查看特定consumer group 详情2.5 查看指定topic上每个partition的offset 1. 数据命令 1...

小鹅鹅的博客 1万+

C# WinForm 基于DirectShow.dll编写的程序,可边预览边保存视频,音频和图片

基于微软的DirectShow.dll的二次开发1.自动识别连接的摄像头跟麦克风且可以对其进行选择(默认选中第一个)2.可录制wmv和avi两种格式的视频并且都带有音频,avi可以录制的分辨率和帧数进行选择,wmv默认进行了淸晰度优化如不喜欢可去除代码中有相关提示3.可在预览点开之后进行拍照,也可边录制视频边拍照4.添加了视频和音频的压缩功能(酌情使用)这次二次开发发现C#对DirectShow的相关信息太少,这次做完也不敢藏私共享出来,还望大家指正

Kafka常用命令

Kafka常用命令 1.启动kafka server.properties中配置参数- bin/kafka-server-start.sh config/server.properties & 2. 创建一个Topic bin/kafka-topics.sh –create –zookeeper localhost:2181 –replication-factor

Yore_的博客 541

获取 Tcopic 主题列表

bin/kafka-topics.sh --list --zookeeper itcast:2181

小憨憨的博客 146

Kafka查看topic、consumer group状态命令

bin/kafka-consumer-groups.sh --zookeeper 127.0.0.1:2181 --list

mhbsoft的博客 6650

Kafka 命令详解及使用示例

Kafka 提供了丰富的命令行工具,用于主题、消费者组、配置、权限等的管理。灵活使用这些命令,可以帮助我们高效地维护 Kafka 集群。

XMYX-0 2496

kafka命令

kafka 常用命令 ----创建topic bin/kafka-topics.sh --create --zookeeper 172.16.10*1.70:2181 --replication-factor 1 --partitions 1 --topic test ----查看topic列表 bin/kafka-topics.sh --list --zookeeper 172.16.101....

YongGanDeYingZi的博客 224

kafka常用命令

创建topic bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic mytest 查看topic列表 bin/kafka-topics.sh --list --zookeeper localhost:2181 创建consumer bin/ka...

vincent_duan的专栏 279

kafka创建topic命令_Kafka查看topic、consumer group状态命令,你也是这样的吗

最近工作中遇到需要使用kafka的场景,测试消费程序启动后,要莫名的过几十秒乃至几分钟才能成功获取到到topic的partition和offset,而后开始消费数据,于是学习了一下查看kafka broker里topic和consumer group状态的相关命令,这里记录一下。命令参考自《Kafka: The Definitive Guide》 Chapter 9 Administrating ...

weixin_39911916的博客 1184

kafka查看topic是否成功创建命令

首先进入到kafka服务的bin目录下,指定kafka的zookeeper地址,需要端口(kafka依赖它)然后就能从打印的日志中看到了。

前方的路在刚开始 218

【2022版】 Kafka面试题整理(含答案解析)

Kafka是面试很重要的一部分

m0_68102173的博客 6361

kafka的topic管理常用命令

1.查看 Topic 列表 bin/kafka-topics.sh --list --bootstrap-server node1:9092,node2:9092,node3:9092 2.查看指定 Topic 明细 bin/kafka-topics.sh --describe --bootstrap-server node1:9092,node2:9092,node3:9092 --topic topicName 3.创建 Topic bin/kafka-topics.sh --create --bo

诸葛小猿 2798
上一篇: Java8新特性——StreamAPI(一)
下一篇: 推荐:分布式系统理论基础 - CAP
大树叶
博客等级 码龄12年 1171粉丝 664原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值