什么是flume
flume是数据采集工具,长用于日志收集。
flume特点:
flume版本:
分为:flume OG和flume NG一般用NG,OG太复杂。(此文介绍NG)
flume架构:
Agent是flume的基本单元。
event是flume基本数据类型单元。也可以称之为数据格式。因为flume可以从不同的系统或数据源采集数据,而采集到数据结构也会不一致。flume对不同的数据源都统一封装为它自己的数据格式即event。
Agent三要素:source, channel, sink。
Event:
Agent:
Source:
Channel:
Sink:
其他组件:
本文介绍了Flume这一数据采集工具的基础概念及其核心架构。Flume主要用于日志收集,具有高度的灵活性和可靠性。文章详细解释了Flume的基本单元Agent的工作原理,包括其组成部分Source、Channel和Sink的功能及作用。
1696

被折叠的 条评论
为什么被折叠?



