
hadoop-2.x
文章平均质量分 79
hpttlook
这个作者很懒,什么都没留下…
展开
-
flume初探
flume的历史 flume最早是由cloudera开发的一个分布式的、高可用、高可靠的日志收集系统。后将项目转移到apache进行管理,目前属于apache的定级项目。 flume版本 在项目进入apache后,对flume进行了大规模的整体重构,由原始的一个分布式系统,逐渐的变为一个tool或者service。不再包含zookeeper等逐渐,也不存在master等管理节点。原创 2013-11-28 22:34:27 · 4603 阅读 · 0 评论 -
日志收集之flume-ng源码分析
Flume-ng 源码分析 简介 近期由于项目需要开发独特的flume-source,因此简单看了下flume的源码。Flume的架构还是比较简单,各个模块功能源码比较清晰。 源码目录结构 flume-ng-channels 里面包含了filechannel和jdbcchannel的实现;没有追过早期的flume代码,不过从这目录结构看来,m原创 2014-04-01 23:05:12 · 10392 阅读 · 4 评论