
kafka
文章平均质量分 80
王者丶丿风范
亦是习惯,亦是信仰
展开
-
控制kafka consumer service topic热启停的一种思路
我们在编写完成kakfa consumer service,将其部署到线上后有时会有启停某个topic的需求,而toipc在我们编写消费入口时就已经指定启停状态,本文提供一种热启停思路。 包含: 服务启动时只启动指定的topic 服务在线上运行时通过调用接口启停全部或指定的topic(借鉴es restful 控制) 项目使用spring boot 2.3.3.RELEASE ,spring-kafka 2.5.5.RELEASE gradle依赖如下 ext.springbootVersion = '原创 2021-03-21 21:51:14 · 617 阅读 · 1 评论 -
Kafka MirrorMaker 搭建异地同步集群
Kafka MirrorMaker 搭建异地同步集群 由于业务需要,要求异地的两套kafka集群同步数据,于是使用乐kafka自带的MirrorMaker工具kafka版本(kafka_2.12-2.1.0),zookeeper版本(zookeeper-3.4.13)。 下面介绍的是本地测试部署的环境, 启动两套kafka-zookeeper 环境 第一套集群的zookeeper使用默认端口218...原创 2020-03-13 14:08:24 · 981 阅读 · 0 评论 -
windows安装 kafka 解决(找不到或无法加载主类问题)
1.kafka需要jdk 8版本 u131以上,先将jdk升级一下,配置好环境变量。我这里选择 8u191 。 2.kafka需要Zookeeper做底层支持,需要先安装Zookeeper 下载地址:https://zookeeper.apache.org/releases.html 下载后,解压放在目录D:\king(本文所用的目录)下,关于zookeeper以及kafka的目录,路径中最好不要...原创 2018-12-06 10:36:07 · 6013 阅读 · 2 评论 -
java.lang.IllegalStateException: Error processing condition on org.springframework.boot.autoconfigur
springboot启动时遇到上述问题,原因是包冲突 <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-web</artifactId> ...原创 2019-05-08 16:15:13 · 65347 阅读 · 0 评论 -
java.lang.NoSuchMethodError: org.springframework.util.ObjectUtils.unwrapOptional(Ljava/lang/Object;)
springboot启动时遇到上述问题,原因是包冲突 <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-web</artifactId> <versi...原创 2019-05-08 16:19:07 · 2078 阅读 · 0 评论 -
[Consumer clientId=consumer-23, groupId=test-consumer-group] Connection to node -1 could not be esta
springboot启动后kafka报错如下 首先,你是用的是spring2.x.x,因为spring1.x.x遇到这种情况直接启动失败 出现这种情况有这么几个原因 其一,项目中关于卡夫卡的地址写错 比如在我的项目中, 这个地址错误了, 然后修改为 问题解决 其二:kafka服务器上的防火墙未开启 如果kafka运行在window系统上,关闭windows系统防火墙。 cmd下执行 nets...原创 2019-05-08 16:39:41 · 8660 阅读 · 0 评论