架构技术专栏

问题导读： 1.如何配置分布式flume 2.master与node之间该如何配置，有什么异同？ 3.启动命令是什么？ 4.flume把数据插入hbase，该如何配置？ 一、Flume-ng配置插入hdfs 1）简介 Flume是一个分布式、可靠、和高可用的海量日志聚合的系统，支持在系统中定制各类数据发送方，用于收集数据；同时，Fl

Flume NG：Flume 发展史上的第一次革命 看看新闻网＞看引擎＞IBM 背景 Cloudera 开发的分布式日志收集系统 Flume，是 hadoop 周边组件之一。其可以实时的将分布在不同节点、机器上的日志收集到 hdfs 中。Flume 初始的发行版本目前被统称为 Flume OG（original generation），属于 cloudera。但随着 FLu

这篇文章主要讲了一些配置，如果各位看官

flume-ng 1.4的安装 flume-ng是一个分布式、高可靠和高效的日志收集系统，具体说明参看flume-ng使用指南：http://blog.youkuaiyun.com/zhu_xun/article/details/16859645 flume-ng是flume的新版本的意思，其中“ng”意为new generate(新一代)，目前来说，flume-ng 1.4是最新的版本 1

近期在做日志系统，所以选配  flume-ng去连接hbase # Describe  the sink a1.sinks.k1.type  = org.apache.flume.sink.hbase.AsyncHBaseSink a1.sinks.k1.table = Router #设置hbase的表名 a1.sinks.k1.columnFamily = log #设置