
Kafka
文章平均质量分 70
Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者在网站中的所有动作流数据。 这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。 对于像Hadoop一样的日志数据和离线分析系统,但又要求实时处理的限制,这是一个可行的解决方案。
y_bccl27
这个作者很懒,什么都没留下…
展开
-
使用Docker安装Kafka
使用Docker安装Kafka原创 2023-05-31 12:23:15 · 1565 阅读 · 0 评论 -
Kafka的常用命令
Kafka的常用命令原创 2023-05-31 12:36:14 · 6414 阅读 · 0 评论 -
Docker安装kafka可视化管理工具 - Kafka Manager
Docker安装kafka可视化管理工具 - Kafka Manager原创 2023-05-31 14:17:11 · 3608 阅读 · 2 评论 -
Docker安装kafka可视化管理工具 - Kafka Eagle
Docker安装kafka可视化管理工具 - Kafka Eagle原创 2023-05-31 14:45:37 · 3030 阅读 · 1 评论 -
Spring Boot 集成Kafka简单应用
Spring Boot 集成Kafka简单应用原创 2023-05-31 22:21:45 · 3057 阅读 · 0 评论 -
Kafka中的auto-offset-reset配置
如果kafka服务器记录有消费者消费到的offset,那么消费者会从该offset开始消费。如果Kafka中没有初始偏移量,或者当前偏移量在服务器上不再存在(例如,因为该数据已被删除),那么这时 auto.offset.reset 配置项就会起作用。原创 2023-12-02 10:00:00 · 5595 阅读 · 0 评论 -
Kafka中的enable-auto-commit和auto-commit-interval配置
Kafka中的enable-auto-commit和auto-commit-interval配置原创 2023-12-16 11:00:00 · 6269 阅读 · 0 评论 -
Kafka中的fetch-min-size、fetch-max-wait和request.timeout.ms配置
Kafka中的fetch-min-size和fetch-max-wait配置原创 2023-12-16 10:00:00 · 3687 阅读 · 0 评论 -
Kafka中的max-poll-records和listener.concurrency配置
Kafka中的max-poll-records和listener.concurrency配置原创 2023-12-23 10:00:00 · 8604 阅读 · 0 评论 -
kafka的版本问题
问题描述:项目中pom.xml关于kafka的依赖为如下所示:<dependency> <groupId>org.apache.kafka</groupId> <artifactId>kafka_2.11</artifactId> <version>1.0.0</version></dependency>如果在项目中出现了kafka.javaapi.consumer.Consu原创 2020-06-12 16:05:01 · 1050 阅读 · 0 评论 -
Kafka中的配置项参数unclean.leader.election.enable
Kafka 某个节点挂掉,导致整个服务异常,为了保证服务容灾,可对unclean.leader.election.enable参数进行调整,该字段的官方解释为:Indicates whether to enable replicas not in the ISR set to be selected as leader as a last resort, even though doing so may result in data loss.即:指示是否启用不在ISR集中的副本作为最后选择,即使这原创 2020-05-30 17:36:01 · 2081 阅读 · 0 评论 -
kafka集群部署成功后,创建生产者往指定主题里面发送消息时出错
问题描述:kafka集群部署成功后,创建生产者往指定主题里面发送消息时出错,如下所示:解决办法:在kafka的server.properties配置文件中需要打开listenner配置行,不能使用默认的。使用默认的就会出现上述类似错误,打开该配置行后,需要将your.host.name配置为整个集群环境可以访问的本机IP...原创 2020-05-06 23:48:18 · 647 阅读 · 0 评论