
kafka
楚景然
风起于青萍之末 浪成于微澜之间
展开
-
Kafka入门(五)spring集成kafka
已经在docker上安装zookeeper和kafka现在尝试在springBoot中集成kafka为了方便测试,将consumer和produce原创 2021-06-03 23:21:57 · 3449 阅读 · 4 评论 -
Kafka入门(四)Consumer
Consumer注意事项◆单个分区的消息 只能由ConsumerGroup中某个Consumer消费◆Consumer从Partition中消费消息 是顺序,默认从头开始消费◆单个ConsumerGroup会消费所有Partition中的消息Consumer: Producer=>1:1/1:n一个Producer不能对应同一个ConsumerGroup 多个Consumer代码示例以及说明package com.item.kafka.consumer;...原创 2021-05-23 23:16:48 · 843 阅读 · 0 评论 -
Kafka入门(常见命令)
linux下1:启动Kafka./bin/kafka-server-start.sh -daemon config/server.properties #或者./kafka-server-start.sh ../config/server.properties1.1:查看状态jps 2:停止Kafka./bin/kafka-server-stop.sh 3:创建Topic./bin/kafka-topics.sh --create --zookeeper 172.16.0.11:原创 2021-05-23 22:41:13 · 140 阅读 · 0 评论 -
Kafka入门 发布到linux上
1.发布之前的注意首先确定zookeeper和kafka正在运行, 确定kafka的config文件夹下server.properties相关的配置是否配置完毕 注意pom.xml是否配置打包配置<!-- 打包发布--> <build> <plugins> <plugin> <groupId>org.springframework.boot</g原创 2021-05-23 18:06:17 · 122 阅读 · 0 评论 -
Kafka入门(常见错误)
1:Consider defining a bean of type 'org.apache.kafka.clients.producer.Producer' in your configuration.是因为没有配置Kafka基础配置,解决方式原创 2021-05-16 22:06:02 · 1242 阅读 · 0 评论 -
Kafka入门(三)Kafka 生产者 Producer
1基础1.1Producer发送模式◆同步发送(异步阻塞)◆异步发送◆异步回调发送1.2代码片段package com.item.kafka.producer;import org.apache.kafka.clients.producer.*;import java.util.Properties;import java.util.concurrent.ExecutionException;import java.util.concurrent.Future;.原创 2021-05-16 22:03:43 · 415 阅读 · 0 评论 -
Kafka入门(二)Kafka客户端操作 --AdminClient API
1基础首先了解一下KafkaApi类型,本次全是AdminClient API1.1Kafka客户端API类型◆AdminClient API:允许管理和检测Topic、broker以及其它Kafka对象◆Producer API:发布消息到1个或多个topic◆Consumer API:订阅- -个或多个topic,并处理产生的消息◆Streams API:高效地将输入流转换到输出流◆Connector API:从一些源系统或应用程序中拉取数据到kafka1.2Adm.原创 2021-05-16 16:36:28 · 1511 阅读 · 0 评论 -
Kafka入门(一)环境搭建
1环境搭建操作系统:Centos7需要安装的 一共三个:apache-zookeeper-3.5.7-bin.tar.gz、kafka_2.11-2.4.0.tgz、java jdk;1.1安装apache-zookeeper(注意关于zookeeper启动命令、查看安装命令需要在bin文件夹下才能运行)首先在Centos中解压,tar -zxvf apache-zookeeper-3.6.2-bin.tar.gz tar -zxvf 解压包然后进入config文件夹,可以看.原创 2021-05-13 23:10:57 · 1360 阅读 · 13 评论