Flume NG源码分析（三）使用Event接口表示数据流

最新推荐文章于 2022-09-07 00:33:59 发布

原创

最新推荐文章于 2022-09-07 00:33:59 发布 · 2.6k 阅读

1 ·

CC 4.0 BY-SA版权

文章标签：

#Flume NG #Event

本文深入探讨Flume NG中的核心组件Event，它是数据流在Source、Channel和Sink之间传递的基础。Event通过header和body两部分封装数据，常用于如ExecSource这样的组件处理本地日志数据。

Flume NG有4个主要的组件：

Event表示在Flume各个Agent之间传递的数据流

Source表示从外部源接收Event数据流，然后传递给Channel

Channel表示对从Source传递的Event数据流的临时存储

Sink表示从Channel中接收存储的Event数据流，并传递给下游的Source或者终点仓库

这篇看一下Event接口表示的数据流。Source, Channel, Sink操作的数据流都是基于Event接口的封装。

public interface Event {

  /**
   * Returns a map of name-value pairs describing the data stored in the body.
   */
  public Map<String, String> getHeaders();

  /**
   * Set the event headers
   * @param headers Map of headers to replace the current headers.
   */
  public void setHeaders(Map<String, String> headers);

  /**
   * Returns the raw byte array of the data contained in this event.
   */
  public byte[] getBody();

  /**
   * Sets the raw