Kafka开启SASL认证，访问速度很慢

已于 2023-06-05 14:27:03 修改
阅读量1k 收藏 2
点赞数 2
分类专栏： kafka 文章标签： kafka java 分布式
于 2023-06-05 14:26:18 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/java_creatMylief/article/details/131047274
版权
开启Kafka集群SASL安全配置后，使用本地kafkatools连接变慢，而生产环境的kafkaconsumer不受影响。问题在于本地没有配置集群域名。解决方案是将集群域名添加到本地hosts文件，通过域名而非IP地址进行连接，从而提高连接速度。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

问题

kafka集群开启sasl配置后，本地电脑使用kafkatools连接kafka集群速度非常非常慢，但是生产环境的kafkaconsumer却很快，而且不采用sasl模式也是很快的，

解决方案

最后在本地hosts添加kafka集群的域名配置，连接地址采用域名(不使用域名也可以)

Kafka 开启SASL/SCRAM认证 及 ACL授权（二）ACL
代码讲故事
10-13 969
Kafka 开启SASL/SCRAM认证 及 ACL授权（二）ACL。
Kafka开启SASL认证，认证很慢，需要20秒问题排查
随笔
04-07 7564
kafka sasl认证很慢问题
kafka第一次send/生产时，响应很慢
loney_wolf的博客
04-22 3099
        首先排除版本与依赖不一致的情况后：         Kafka在第一次加载时，会首先加载元数据，在向Kafka服务器发送元数据更新请求时，如果服务器与客户端在同一个网段，那么首次加载更新元数据时，会很快。         Kafka服务器与客户端不在同一网
Apache zookeeper kafka 开启SASL安全认证_kafka开启认证
2401_84968371的博客
05-16 2418
自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。深知大多数网络安全工程师，想要提升技能，往往是自己摸索成长，但自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！因此收集整理了一份《2024年网络安全全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友。既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上网络安全知识点！真正的体系化！
kafka开启ACL,请求慢出现超时的解决办法
程序猿的樊笼
07-07 1629
正常情况下，使用某个kafka管理平台（或者是使用kafka提供的admin client）调用kafka的接口查询相关信息，比如查询topic列表，请求是很快的，如下：正常情况（网络也没问题），请求一般是很快的，如果通过一些管理平台，页面显示也是很流畅的。目前有几次遇到请求特别慢，接近10秒甚至数十秒的情况，一些管理平台就可能出现超时现象或者查询的特别慢。我目前遇到2次，说明如下：环境信息如下：当时在公司的时候是没有问题的，回家的时候因为要开启VPN就会出现这个问题，管理平台页面特别慢，甚至查询不出来。环
kafka用户认证与权限管理（SASL/PLAIN+ACL）
浪子天涯行世录
11-18 2904
Kafka 目前支持SSL、SASL/Kerberos、SASL/PLAIN三种认证机制 kafka的认证范围 kafka client 与 kafka server(broker) broker与broker之间 broker与zookeeper之间 zookpeer认证 在zookeeper安装根目录的conf目录下，创建zk_server_jaas.conf文件 Server {...
【Kafka】Kafka启用SASL连接提示Timeout卡顿源码分析
最新发布
metaldong的博客
09-13 729
Kafka启用SASL连接提示Timeout卡顿源码分析
谁是性能杀手？Kafka多Topic下启用SSL时延增大问题分析
middleware2018的博客
12-23 561
问题背景 项目中将Kafka接口进行RESTful封装，在使用RESTful接口进行性能测试时，发现Topic数增多后，开启SSL与非SSL进行测试，发现开启SSL后性能下降得厉害。例如600个Topic总数每个Topic3分区3副本的场景下，使用1200个线程只发送10个Topic，开启SSL的TPS只有3100，但是不开启SSL性能达到11000。   其中测试客户端会启动多个线程，每个...
Kafka集群多用户访问权限分治和消息共享配置指导
企业实战系列集 ●●● https://ximenjianxue.blog.youkuaiyun.com
04-24 3221
这明显在生产环境，这种认证方式时不符合实际业务场景的。allow.everyone.if.no.acl.found=true #false的话就只能超级用户才能访问资源，true的话其他也可以，如果用户读写一个 Topic，但是没有配置 ACL 权限，客户端会报认证失败错误。现场业务由于多厂商集成，共享数据需要，需对接当前kafka集群，为做到类似租户隔离的功能，需要开启kafka的权限控制和动态用户管理功能，实现不同厂商访问被授权的合法资源，消费者账号只能消费数据，生产者账号只能生产数据。
kafka基本知识点
weixin_38446891的博客
12-15 2027
由Scala和Java编写,Kafka是一种Kafka是最初由Linkedin公司开发，是一个，它的最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如基于hadoop的批处理系统、低延迟的实时系统、storm/Spark流式处理引擎，web/nginx日志、访问日志，消息服务等等。
zookeeper集群 + kafka集群
lxplxplike的博客
07-14 1183
主要原因是由于在高并发环境下，同步请求来不及处理，请求往往会发生阻塞。比如大量的请求并发访问数据库，导致行锁表锁，最后请求线程会堆积过多，从而触发 too many connection 错误，引发雪崩效应。我们使用消息队列，通过异步处理请求，从而缓解系统的压力。消息队列常应用于异步处理，流量削峰，应用解耦，消息通讯等场景。当前比较常见的 MQ 中间件有 ActiveMQ、RabbitMQ、RocketMQ、Kafka、Pulsar 等。中间件 实现应用解耦、异步处理。
Offset explorer连接Kerberos认证的Kafka
weixin_36340771的博客
07-28 5018
Offset explorer连接Kerberos认证的Kafka
Java增加线程后kafka仍然消费很慢
全栈开发的博客
07-04 1699
概念：max.poll.interval.ms是Kafka消费者端的一个配置参数，用于设置消费者在轮询过程中处理消息的最大时间间隔。根据实际业务需求和消息处理的复杂性，设置合理的max.poll.interval.ms值，以确保消费者有足够的时间来处理消息。考虑到网络延迟和消息处理的时间，建议将max.poll.interval.ms设置为较大的值，以避免过早地将消费者标记为故障。同时，也要注意将max.poll.interval.ms设置为一个合理的值，以避免消费者长时间无响应而导致消息处理的延迟。
Kafka 典型问题与排查以及相关优化
qq_54188720的博客
07-09 2635
Kafka 是一个高吞吐量的分布式消息系统，但在实际应用中，用户经常会遇到一些性能问题和消息堆积的问题。本文将介绍 Kafka 中一些典型问题的原因和排查方法，帮助用户解决问题并优化 Kafka 集群的性能。
kafka漏洞升级记录，基于SASL JAAS 配置和 SASL 协议，涉及版本3.4以下
c1115759748的博客
02-10 1210
攻击者可以使用基于 SASL JAAS 配置和 SASL 协议的任意 Kafka 客户端，在对 Kafka Connect worker 创建或修改连接器时，通过构造特殊的配置，进行 JNDI 注入。影响范围：2.3.0
kafka producer端发送很慢？一招轻松解决
Therefore的专栏
04-10 1万+
使用场景：kafka发送producer为单实例（使用new kafkaProducer）并且使用同步发送，发送kafka使用线程池执行发送任务，任务队列大小为2000，kafka连接server端使用kerboeros认证。 当业务下发从nginx进入，两个tomcat节点进行发送kafka处理，1200TPS时会偶现几次处理时延很长，直接导致nginx504，第一时间打开debug日志，发...
一次解决kafka producer发送很慢的经历
热门推荐
qq_18581221的博客
12-11 1万+
一次解决kafka producer发送很慢的经历 使用场景：kafka发送producer为单实例并且使用同步发送，发送kafka使用线程池执行发送任务，任务队列大小为2000，kafka连接server端使用kerboeros认证 当业务下发从nginx进入，两个tomcat节点进行发送kafka处理，1200TPS时会偶现几次处理时延很长，直接导致nginx504，第一时间打开debug日志...
Kafka sasl配置
qq_39816041的博客
08-27 507
Kafka开启使用 SASL_PLAINTEXT认证： 　　输入下面命令，关闭kafka： 　　　　bin/kafka-server-stop.sh 　　输入下面命令，关闭zookeeper： 　　　　bin/zookeeper-server-stop.sh 　　进入config目录，增加如下配置文件： 　　　　cd config 　　　　（1）touch kafka_server...
kafka入门踩坑 连接超时问题
cai_ji_1997的博客
05-04 8279
Timed out waiting for connection while in state: CONNECTING
kafkatools连接kafka集群
03-16
KafkaTools是一个开源的Kafka管理工具，可以用来连接Kafka集群。它提供了一些有用的功能，如创建和管理主题、消费者组和分区等。使用KafkaTools连接Kafka集群，可以方便地监控和管理Kafka集群。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值