myt0929的专栏

  如果数据是在MySQL中的话，需要用到Sqoop工具将数据导入大数据平台。如果是日志类型的日志，需要用到Flume导入大数据平台。   Flume是一个分布式、 基于流式数据。Flume的灵魂（Agent）就是采集（source）、聚合（channel）、转移（sink）。对于Flume只需要会配置，并不需要（或者很少）需要自己开发代码。Flume在CDH中是更改过的，使用的是1.6.0版本...

  一般的agent的数据源过来是从Source->Channel->Sink。在上一长讲解的时候都是单Sink，单Channel，单Source，其实三个组件之间还有有一层架构。