
Kafka
fyq2016
一个工地搬砖的
展开
-
Kafka的IRS
Kafka ISRkafka replicaData Replication如何Propagate(扩散出去)消息?Data Replication何时Commit?Data Replication如何处理Replica恢复Data Replication如何处理Replica全部宕机kafka replica当某个topic的replication-factor为N且N大于1时,每个Par...转载 2019-12-22 09:49:11 · 488 阅读 · 0 评论 -
Kafka客户端(2.1.0)
Kafka的客户端程序准备工作生产者普通生产者带回调的生产者自定义分区策略实现Partitioner 接口在配置项中指定Partitioner类同步生产者消费者简单消费者重置offset设置offset重置策略为earliest设置offset重置策略为latest设置offset重置策略为none手动提交offset准备工作要使用kafka的客户端,首先要引入Kafka客户端的依赖,下面是2...原创 2019-12-08 17:47:51 · 538 阅读 · 0 评论 -
Kafka2.1.0允许远程连接
Kafka集群模式启动后,直接用控制台的producer、consumer去收发消息,会有异常提示,这是因为默认的kafka是不支持远程连接导致的我们观察server.properties配置文件,重点关注31和36行先看看listeners这个配置项The address the socket server listens on. It will get the value return...原创 2019-12-01 17:49:00 · 2324 阅读 · 0 评论 -
混乱的Kafka命令行客户端连接方式
混乱的Kafka命令行客户端连接方式初次使用Kafka(版本2.1.0)命令行客户端,发现Topic、Producer、Consumer等各个命令行工具连接Kafka服务器的方式各不相同,在此做个记录支持 --bootstrap-server 的kafka-console-consumer.shkafka-consumer-groups.sh支持 --broker-list 的kaf...原创 2019-12-01 14:42:41 · 1448 阅读 · 0 评论