kafka----------------topic的创建，查询，删除详解

最新推荐文章于 2024-05-13 23:33:30 发布
原创 最新推荐文章于 2024-05-13 23:33:30 发布 · 480 阅读 · 3 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#kafka #大数据 #zookeeper #分布式

本文详细介绍了Kafka中如何创建、查询和删除topic，包括启动zookeeper、设置topic的分区和副本、使用生产者和消费者、调整分区数以及动态管理配置。还特别提到删除topic的注意事项，需要配置`delete.topic.enable=true`才能立即删除。

**

在kafka中要创建topic，首先的保证zookeeper是正常启动的，如果你有集群，要启动全部集群

**
zookeeper的启动命令：

/export/server/zookeeper/bin/zkServer.sh start

启动完毕后在用jps查看下，确保启动正确
（也要启动其他集群的zookeeper）
在这里插入图片描述

创建topic

创建名为test的主题，有三个分区，两个副本


cd /export/servers/kafka_2.11-1.0.0 
bin/kafka-topics.sh --create --zookeeper node01:2181 --replication-factor 2 --partitions 3 --topic test

查看topic

查看kafka中存在的主题


                

                
                
        

    


  


        

            

                      
                        最低0.47元/天 解锁文章
                          
                      
            

        


    



                



	

		

			

				
					
kafka_topic创建、分区、删除管理

				
			

			

				

					11-23
				

			

		

		

			
				
kafka管理工具，主要用于创建、删除、查看管理topic信息

			
		

	



                

            
              



	

		

			

				
					
Kafka—topic的查询和创建

				
			

			

				

					Andya_net的博客
				

				

					03-26
					
					1404
					
				

			

		

		

			
				
记录常用的kafka常用的topic相关命令
查看topic列表
[root@shtest01 ~]# /usr/lib/kafka/bin/./kafka-topics.sh --list --zookeeper localhost:2181/kafka

创建topic
[root@shtest01 ~]# /usr/lib/kafka/bin/./kafka-topics.sh --crea...

			
		

	



              


  
              

                


	

		

			

				
					
kafka中topic的创建和查询

				
			

			

				

					jjt_zaj的博客
				

				

					11-21
					
					3533
					
				

			

		

		

			
				
kafka topic

			
		

	





	

		

			

				
					
查询kafka信息，并设置Kafka的偏移量Offset

				
			

			

				

					熊浪的博客
				

				

					01-10
					
					4696
					
				

			

		

		

			
				
查询某个kafka的消费者信息

./kafka-consumer-groups.sh --bootstrap-server 10.0.0.198:9092 --list



查询某个topic的分区情况
./kafka-topics.sh --zookeeper 10.0.0.198:2181 --topic alikafka-topic_can_information_statistic...

			
		

	



		

			
		



	

		

			

				
					
kafka创建topic并且查看topic情况

					
最新发布

				
			

			

				

					hjx_dou的专栏
				

				

					05-13
					
					959
					
				

			

		

		

			
				
【代码】kafka创建topic并且查看topic情况。

			
		

	





	

		

			

				
					
kafka-manager-1.3.3.23.zip

				
			

			

				

					03-05
				

			

		

		

			
				
2. **创建与管理Topic**：支持创建、修改和删除Topic，以及调整Partition数量，以满足不同的数据量需求和容错策略。  3. **监控与报警**：可以实时监控每个broker和topic的性能指标，如CPU使用率、磁盘空间、网络I/O...

			
		

	





	

		

			

          精选资源
				
					
kafka-manager.zip管理工具

				
			

			

				

					11-03
				

			

		

		

			
				
2. **主题操作**：通过Kafka-Manager，你可以创建、删除和修改topic的配置。它支持批量操作，便于管理大量topics。  3. **消费者组管理**：查看消费者组的详细信息，包括组内成员、offset信息以及滞后情况，有助于...

			
		

	





	

		

			

				
					
kafka-manager-2.0.0.2.zip 已经编译

				
			

			

				

					12-31
				

			

		

		

			
				
2. Topic管理：创建、删除、扩展Topic，调整Replication Factor和Partition数量。 3. Broker管理：监控Broker状态，查看日志，进行重启操作。 4. Consumer Group管理：监控Consumer Group的消费进度，查看滞后情况。...

			
		

	





	

		

			

				
					
编译后kafka-manager-2.0.0.0.rar

				
			

			

				

					12-15
				

			

		

		

			
				
3. **Topic管理**：Kafka-Manager允许用户创建、删除、修改Topic的配置，如分区数、副本数等。此外，还可以进行Rebalance操作，调整Partition的分布，优化集群性能。  4. **Consumer Group管理**：Kafka-Manager提供...

			
		

	





	

		

			

          精选资源
				
					
CentOS7安装kafka-manager.docx

				
			

			

				

					10-26
				

			

		

		

			
				
它提供了直观的用户界面，使得在CentOS7系统上管理Kafka集群变得简单易行，包括查看集群状态、创建和删除Topic、调整分区和副本等操作。  【标签】：CentOS7，Kafka-Manager，安装，配置，监控，管理  **详细步骤：*...

			
		

	





	

		

			

				
					
kafka常用命令 topic创建 删除 设置保存时间 消费情况 zookeeper 启动停止

				
			

			

				

					weixin_51613454的博客
				

				

					02-22
					
					3313
					
				

			

		

		

			
				
kafka基础操作命令
kafka 启动 停止  topic 创建，删除 ，设置日志存储时间命令

			
		

	





	

		

			

				
					
kafka 设置topic的数据时间为log日志生成的时间

				
			

			

				

					m0_65850671的博客
				

				

					02-08
					
					2226
					
				

			

		

		

			
				
message.timestamp.type

			
		

	





	

		

			

				
					
Kafka在Linux环境下搭建过程

				
			

			

				

					weixin_30407613的博客
				

				

					12-16
					
					185
					
				

			

		

		

			
				
准备工作
　　Kafka集群是把状态保存在Zookeeper中的，首先要搭建Zookeeper集群。由于我们之前的分布式系统中已经安装zookeeper服务，这里不进行zookeeper安装教程以及应用教程图解。需要注意的是：Zookeeper集群的工作是超过半数才能对外提供服务，3台中超过两台超过半数，允许1台挂掉 ，是否可以用偶数，其实没必要。如果有四台那么挂掉一台还剩下三台服务器，如果在挂...

			
		

	





	

		

			

				
					
Kafka删除Topic

				
			

			

				

					L, there!
				

				

					09-04
					
					632
					
				

			

		

		

			
				
CDH平台



勾选 delete.topics.enable

重启Kafka，否则Topic会标记为marked for deletion，重启才会真正删除。

取消 auto.create.topics.enable

如果有相关程序运行，如Flume，需要关闭自动创建。





查看Topics


kafka-topics.sh \
--zookeeper cdh-master:...

			
		

	





	

		

			

				
					
Kafka常用操作：创建，删除，生产，消费topic。Too many open file问题修复。修改偏移量，重新消费。

				
			

			

				

					u010479989的博客
				

				

					01-25
					
					6015
					
				

			

		

		

			
				
Topic命令

创建topic

kafka-topics.bat --create --zookeeper localhost:2181 --replication-factor 1 --partitions 3 --topic test

192.168.6.57:9092,192.168.6.58:9092,192.168.6.59:9092

删除topic

./kafka-topics.sh –delete -zookeeper kafka-1:2181,kafka-2:2181,kafka-

			
		

	





	

		

			

				
					
Kafka  : kafka查询某时间段内的消息

				
			

			

				

					九师兄
				

				

					07-04
					
					1万+
					
				

			

		

		

			
				
1.美图
2. 根据写入kafka的时间查询
//筛选时间戳范围内的消息
./kafka-console-consumer.sh --topic ejabberd-chat-messages --zookeeper 192.168.151.18:2181 --from-beginning |awk -F ":" '{print $2 $0}' |awk -F "," '$1>= 154114...

			
		

	





	

		

			

				
					
kafka命令行操作（topic增删查改、修改分区数、发送消息、消费消息、 查看消费者组 、更新消费者组中topic的偏移位置）

					
热门推荐

				
			

			

				

					不是一枚开发
				

				

					07-20
					
					6万+
					
				

			

		

		

			
				
kafka

			
		

	





	

		

			

				
					
kafka 创建topic，查看topic

				
			

			

				

					每天记录一点点，20181220回头看看是什么样
				

				

					11-09
					
					4万+
					
				

			

		

		

			
				
创建
创建kafka topic
bin/kafka-topics.sh --create --topic topicname --replication-factor 1 --partitions 1 --zookeeper localhost:2181  


方法一：
执行linux命令：
bin/kafka-topics.sh --create --topic topicna

			
		

	





	

		

			

				
					
【原创】Kafka topic常见命令解析

				
			

			

				

					weixin_33725270的博客
				

				

					06-12
					
					862
					
				

			

		

		

			
				
本文着重介绍几个常用的topic命令行命令，包括listTopic，createTopic，deleteTopic和describeTopic等。由于alterTopic并不是很常用，本文中就不涉及了。另外本文的代码分析是基于kafka_2.10-0.8.2.1的(虽然截图是Kafka 0.8.1的^_^ )
 
一. list topic 显示所有topic


1. 从zookeep...

			
		

	





	

		

			

				
					
分享kafka-eagle v1.4.8安装包，便捷监控Kafka集群

				
			

			

				

					
				

			

		

		

			
				
资源摘要信息:"Kafka-Eagle 是一款基于Web的Kafka集群监控和告警系统，它能够提供实时的 Topic、Broker、Partition、Consumer Group、Consumer Lag 等信息。Kafka-Eagle v1.4.8是该软件的一个版本号，表示这套工具在...

			
		

	



              




          




        



    





    



      

      

        
      

      





	

		评论	
	

  

	
    

      

      

      

        
        

          
          

            

              成就一亿技术人!
            

            

              拼手气红包6.0元
            

          

        

        

          

            还能输入1000个字符
          

          

             
          

          

            

              红包
              添加红包
            

            

              表情包
              插入表情
              

                

              

            

            

              表情包
              代码片
              

                
              

            

            

              
              
              
              
              
              
              
            

          

        

      

    

		

			

			

			

					 条评论被折叠 查看
			

			

				
			

		

	

	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值