Storm的topology.max.spout.pending属性用于控制Spout的发送速率，防止下游Bolt处理不过来导致浪费资源。然而，此参数可能无法确保最佳的反压性能，并且在某些场景下设置无效。文中介绍了一种自动反压（ABP）方案，利用ZooKeeper和Disruptor队列实现快速响应的流量控制。当executor接收队列超过高水位时，启动反压机制，通知Spout降低发射tuple的速度。此外，文中提到Alibaba的JStorm提供了不同的反压解决方案。
topology.max.spout.pending 的意义在于 ，缓存spout 发送出去的tuple，当下流的bolt还有to
Storm 反压机制 back pressure设置失效
最低0.47元/天 解锁文章
扫一扫
评论
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
查看更多评论
添加红包
