Kafka3.2教程（二）在Linux环境下搭建与测试运行

原创 已于 2022-05-21 16:50:34 修改 · 1.6k 阅读 · 4 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#linux #kafka #zookeeper

于 2022-05-21 16:05:42 首次发布
本文详细指导如何在HP2服务器上安装并配置单机版Kafka，包括ZooKeeper的搭建、环境配置、Topic管理及生产者消费者操作，适合快速入门者学习。

安装单机版的Kafka：
下载kafka_2.13-3.2.0.tgz，上传到hp2服务器。
Kafka运行，依赖于ZooKeeper，需要先搭建好Zookeeper，其中安装Zookeeper请参见本博客专门文章：
ZooKeeper3.4.6分布式环境搭建
部署单机版Kafka环境：
解压：

tar -xvf /apps/kafka_2.13-3.2.0.tgz -C /usr/local/

建立软连接：

 ln -s kafka_2.13-3.2.0/ kafka3

配置环境变量：
在/etc/profile.d中新建kafka.sh


                

                
                
        

    

  


        

            

                      
                        最低0.47元/天 解锁文章
                          
                      
            

        


    



                



	

		

			

				
					
kafka linux部署并测试。

				
			

			

				

					qq_38640546的博客
				

				

					10-19
					
					424
					
				

			

		

		

			
				
前言kafka是一个优秀的消息队列框架，现在基于linux安装写个文档记录下。提示：以下是本篇文章正文内容，下面案例可供参考一、环境准备1.下载linux 安装包。在这里插入图片描述注意下载二进制包，如果不是下载二进制包，就要自己编译了，这里不需要这么麻烦，就直接下载了。官网推荐下载2.13版本，就下载这个版本就行了。2. 注意这个版本已经内嵌了zookeeper了，不需要再去安装zookeeper了。

			
		

	



                

            
              



	

		

			

				
					
Linux下kafka部署及简单测试

				
			

			

				

					westbrookliu的博客
				

				

					08-19
					
					2338
					
				

			

		

		

			
				
依赖
kafka依赖zookeeper，而zookeeper又依赖Java
Java就不讲怎么安装了，应该都装过了，验证Java是否安装成功：
$ java -version
openjdk version "1.8.0_171"
OpenJDK Runtime Environment (build 1.8.0_171-8u171-b11-2-b11)
OpenJDK 64-Bit Server ...

			
		

	



              


  
              

                


	

		

			

				
					
kafka消息监控(linux运行_window查看)

				
			

			

				

					07-20
				

			

		

		

			
				
该工具主要用于查看kafka topic生产者和消费者信息

			
		

	





	

		

			

				
					
Linux下安装Kafka

				
			

			

				

					刘伟佳的博客
				

				

					12-09
					
					1405
					
				

			

		

		

			
				
一、Kafka的下载安装
1.1 Kafka下载
前往官网下载Kafka：
https://kafka.apache.org/downloads
点击链接：

进入此页面，复制此链接。

我们会得到一个地址：
https://dlcdn.apache.org/kafka/3.0.0/kafka_2.13-3.0.0.tgz

进入Linux中，使用wget命令下载这个文件，我下载在root的家目录下面：
wget https://dlcdn.apache.org/kafka/3.0.0/kafka_2.13

			
		

	



		

			
		



	

		

			

				
					
linux单机安装测试kafka

				
			

			

				

					u013759134的博客
				

				

					08-22
					
					602
					
				

			

		

		

			
				
首先要安装并启动zookeeper，特别注意的是zoo.cfg中有项配置 "dataDir=/tmp/zookeeper"，一定要有对应目录，否则启动zookeeper时可能可以启动，但是kafka连不上zookeeper。

 安装kafka，使用命令/bin/kafka-server-start.sh config/server.properties启动。

 测试kafka...

			
		

	





	

		

			

				
					
jdk1.8+kafka3.2  linux版本

				
			

			

				

					08-03
				

			

		

		

			
				
本文将详细阐述如何在Linux环境下利用JDK 1.8和Kafka 3.2来搭建一个稳定的Kafka环境。  首先，我们需要了解JDK（Java Development Kit）的重要性。JDK是开发和运行Java应用程序的基础，它包含了Java编译器、Java运行...

			
		

	





	

		

			

				
					
搭建kafka环境：jdk1.8与kafka3.2在linux下的安装指南

				
			

			

				

					
				

			

		

		

			
				
在搭建Kafka环境时，选择与JDK 1.8兼容的Linux版本至关重要，因为这将影响到整个系统的稳定运行和性能。通常情况下，Kafka及JDK 1.8都能很好地在主流的Linux发行版（如CentOS、Ubuntu等）上运行。  4. 文件压缩包...

			
		

	





	

		

			

				
					
Linux 下 kafka 集群部署

				
			

			

				

					qq_59998784的博客
				

				

					07-03
					
					3877
					
				

			

		

		

			
				
本文将以三台服务器为例，介绍在 linux 系统下kafka的部署方式。

			
		

	





	

		

			

				
					
linux搭建kafka 3.2.0集群

				
			

			

				

					m0_68311068的博客
				

				

					07-20
					
					246
					
				

			

		

		

			
				
linux搭建kafka 3.2.0集群

			
		

	





	

		

			

				
					
kafka安装并测试

				
			

			

				

					一去二三里...的博客
				

				

					03-27
					
					1487
					
				

			

		

		

			
				
每条消息调用一次该回调函数，说明消息是传递成功(rkmessage->err == RD_KAFKA_RESP_ERR_NO_ERROR)= RD_KAFKA_RESP_ERR_NO_ERROR)设置发送报告回调函数，rd_kafka_produce()接收的每条消息都会调用一次该回调函数。发送报告回调函数(和其他注册过的回调函数)期间，要确保rd_kafka_poll()rd_kafka_flush是rd_kafka_poll()的抽象化，第二个参数是最大阻塞时间，如果设为0，将会是非阻塞的调用。

			
		

	





	

		

			

				
					
linux中如何操作kafka

				
			

			

				

					10-07
				

			

		

		

			
				
kafka常用操作命令,启动,新增topic,删除topic,查看topic列表

			
		

	





	

		

			

				
					
Linux搭建kafka集群并测试

				
			

			

				

					Java Spring Elasticsearch
				

				

					01-11
					
					1032
					
				

			

		

		

			
				
Linux搭建kafka集群1 准备3台机器1.1host配置2 zookeeper配置3 安装kafka3.1 设置环境变量3.2 修改改$KAFKA_HOME/config 目录下的server.properties文件3.4 启动zookeeper和kafka
1 准备3台机器




hostname
ip




server1
192.168.16.151


server2
192....

			
		

	





	

		

			

				
					
kafka3.2集群搭建

				
			

			

				

					u012893747的博客
				

				

					07-04
					
					841
					
				

			

		

		

			
				
kafka3.2集群搭建

			
		

	





	

		

			

				
					
kafka3.3.2集群搭建

				
			

			

				

					cangt的博客
				

				

					06-07
					
					636
					
				

			

		

		

			
				
添加 -Djava.security.auth.login.config=/opt/kafka/config/kafka_server_jaas.conf。KafkaClient这个名称不能变，保持大小严格。注意事项：kafka需要在zookeeper后面启动。配置中的username和password为。”不能少且位置不能变。中配置的user_开头的用户及对。重启验证所有配置是否正常。

			
		

	





	

		

			

				
					
Linux安装kafka服务器（已解决启动失败问题）及消息分发测试

				
			

			

				

					qq_63922721的博客
				

				

					11-04
					
					1445
					
				

			

		

		

			
				
以上是我初始对kafka学习的见解，后面会更多的去学习了解使用kafka消息中间件，以上可能还有欠缺之处，还望指正！总之，学习永无止境，想要学好就要坚持，细心才是重中之重（抱拳）。

			
		

	





	

		

			

				
					
OpenEuler 22.03 不依赖zookeeper安装 kafka 3.3.2集群

					
最新发布

				
			

			

				

					暗黑世界
				

				

					12-22
					
					1466
					
				

			

		

		

			
				
本次计划安装三台OpenEuler 22.03 版本操作系统的服务器，用于搭建 kafka和flink 集群。因为从kafka 2.8 版本以后开始不依赖 zookeeper ，同时考虑到需要找一个发布时间早于  flink 1.17 的kafka 版本且应尽量稳定，综合考虑下选择了 kafka 3.3.2。

			
		

	





	

		

			

				
					
Kafka3.2教程（一）消息队列与Kafka原理

				
			

			

				

					Java朱老师博客
				

				

					05-21
					
					1242
					
				

			

		

		

			
				
        在ActiverMQ、RabbitMQ、RocketMQ等等诸多的消息队列技术中，Kafka是适合于大数据领域使用的消息队列。
        Kafka是一个采用发布-订阅模式的消息队列，具有以下特点：易用性好，提供了较少的核心功能，但是提供超高的吞吐量，毫秒级的延迟，对数据可以持久化，并且根据需要可以任意搭建集群扩展。
&nbsp

			
		

	





	

		

			

				
					
Java项目连接kafka3.3.2失败

				
			

			

				

					tqwer的专栏
				

				

					12-10
					
					851
					
				

			

		

		

			
				
修改kafka安装目录下的config/server.properties文件，最下方添加下面配置：host.name=10.10.69.105。listeners=PLAINTEXT://:9092 改为 listeners=PLAINTEXT://ip:9092。使用如下官网代码连接服务器kafka。

			
		

	





	

		

			

				
					
Kafka 单机部署

				
			

			

				

					LmzActionscript的博客
				

				

					09-21
					
					838
					
				

			

		

		

			
				
恭喜！你已经成功在单机环境下部署和配置了 Kafka，并使用命令行工具发布和消费了消息。Kafka 提供了丰富的 API 和客户端库，使得开发者能够构建高性能、可靠的分布式系统。希望本文对你有所帮助，祝你在使用 Kafka 的过程中取得成功！

			
		

	



              




          




        



    





    



      

      

        
      

      





	

		评论	
	

  

	
    

      

      

      

        
        

          
          

            

              成就一亿技术人!
            

            

              拼手气红包6.0元
            

          

        

        

          

            还能输入1000个字符
          

          

             
          

          

            

              红包
              添加红包
            

            

              表情包
              插入表情
              

                

              

            

            

              表情包
              代码片
              

                
              

            

            

              
              
              
              
              
              
              
            

          

        

      

    

		

			

			

			

					 条评论被折叠 查看
			

			

				
			

		

	

	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值