Flume 总结（八）sink processor类型-1.9.0新版

于 2020-10-10 23:22:01 发布
阅读量1k 收藏 1
点赞数
分类专栏： 行为日志 flume 大数据 文章标签： flume cloudera 大数据 分布式
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/xiaohu21/article/details/109005952
版权
本文总结了Flume 1.9.0版本中的Sink Processor类型，包括Default Sink Processor和Failover Sink Processor。Failover Processor用于构建高可用的Flume代理网络，当高优先级sink发送失败时，低优先级sink接管。而Load Balancing Sink Processor则实现数据在多个sink间的轮转分布，支持round-robin和random策略。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

Flume 总结（八）sink processor类型-1.9.0新版

1. sink processor

在这里插入图片描述

  1. Default Sink Processor
    在这里插入图片描述
  2. Failover Sink Processor
    在这里插入图片描述

使用这个结合agent级联，可以搭建高可用HA agen网络
一组中只有优先级高的那个sink在工作，另一个是等待中
如果高优先级的sink发送数据失败，则专用低优先级的sink去工作！并且，在配置时间penalty之后，还会尝试用高优先级的去发送数据！

  1. Load balancing Sink Processor
    在这里插入图片描述<
最低0.47元/天 解锁文章
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值