
Kafka
Keal、
To make each day count.
展开
-
Kafka事务提交位点失败
记一次kafka事务提交失败线上业务报错:2019-10-29/20:27:48.621|l-fin-ycb-sync-server1.toc.pre.ali.dm|-|-|^_^|[org.springframework.kafka.KafkaListenerEndpointContainer#1-1-C-1] ERROR o.s.k.l.KafkaMessageListenerContai...原创 2019-11-01 20:24:58 · 2725 阅读 · 1 评论 -
Kafka-ACL权限搭建
1.Kafka Broker端配置添加kafka_server_jaas.conf 文件在 kafka/config目录下配置用户名:KafkaServer {org.apache.kafka.common.security.plain.PlainLoginModule requiredusername="admin"password="admin"user_admin="admin...原创 2019-07-26 15:34:24 · 915 阅读 · 0 评论 -
Kafka在什么情况下会丢数据
Kafka是高吞吐量数据总线,使用得当会使我们处理业务如鱼得水,如虎添翼。处理不当也会使系统残破不堪,维护起来痛苦万分,我们针对数据可靠性这点,来分析下这个消息组件在什么情况下会丢失数据。一、producer配置acks=0在acks=0模式下,消息传输到Broker端没收到Broker的反馈即发送下一条,这种纯异步的发送方式,难免会丢数据。二、producer配置acks=1在ack=...原创 2019-08-06 11:12:15 · 4099 阅读 · 0 评论 -
Kafka操作命令大全
启动nohup ./kafka-server-start.sh ../config/server.properties > /dev/null 2>&1 &停止./kafka-server-stop.sh 生产消息./kafka-console-producer.sh --broker-list *:9092 --topic test查看Topics状...原创 2019-08-28 14:41:11 · 364 阅读 · 0 评论