先锋WEB技术

Flume的介绍就不多说了，大家可以自己搜索。但是目前网上大都是Flume 1.4版本或之前的资料，Flume 1.5感觉变化挺大的，如果你准备尝试一下，我这里给大家介绍一下最小化搭建方案，并且使用MongoSink将数据存入mongodb。完全单机运行，没有master，没有collector（说白了collector也就是一个agent，只是数据来源于多个其他agent），只有一个agent。

必要安装：JDK1.7（JDK1.6.0_20以下的话会有问题，JDK1.6.0_20以上也行）SSH client和service（hadoop通过脚本连接ssh管理远程节点）免密码SSH登陆由于hadoop需要通过ssh管理系统级守护进程，并且在运行hadoop命令时使用的是当前操作者的用户名去登陆其他机器的SSH，所以所有节点必须使用同一个账户（密码可以不同），并建立