20210617

一、filebeat连kafka报错:circuit breaker is open


现象:疯狂重复下列打印

2021-06-17T09:10:56.052Z	INFO	[publisher]	pipeline/retry.go:219	retryer: send unwait signal to consumer
2021-06-17T09:10:56.052Z	INFO	[publisher]	pipeline/retry.go:223	  done

在filebeat的yml文件中添加下列选项打开调试信息:

logging.level: debug

重启进程,就会获得更多的打印信息:

2021-06-17T09:10:58.312Z	DEBUG	[kafka]	kafka/client.go:292	Kafka publish failed with: circuit breaker is open
2021-06-17T09:10:58.312Z	INFO	[publisher]	pipeline/retry.go:219	retryer: send unwait signal to consumer
2021-06-17T09:10:58.312Z	INFO	[publisher]	pipeline/retry.go:223	  done

[kafka] kafka/client.go:292 Kafka publish failed with: circuit breaker is open 的原因google了下很多,但都没有找到我的这种情况。最后发现原因是 filebeat 推送的 topic 在 kafka 上不存在。修改topic后就正常了。

二、netstat 查看系统中的连接

netstat -nat
# -n: Show numerical addresses instead of trying to determine symbolic host, port or user names.
# -a: 不管已连接还是未连接都显示。Show both listening and non-listening (for TCP this means established connections) sockets.
# -t: 只看tcp连接。不加这个选项会会同时显示 unix udp 等类型。

https://blog.51cto.com/sadoc/1932028

三、共享内存和unix域套接字在跨进程通信的效率差异


域套接字通信域共享内存通信性能比较 这篇博客给出的测试代码说差了三十倍。
共享内存不愧是最快的IPC方式啊。

评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值