
Flume
Clozzz
在撸码的道路上越走越远
展开
-
大数据基础之Flume——Flume基础及Flume agent配置以及自定义拦截器
Flume简介Flume用于将多种来源的日志以流的方式传输至Hadoop或者其他目的地 - 一种可靠、可用的高效分布式数据收集服务Flume拥有基于数据流上的简单灵活架构,支持容错、故障转移与恢复由Cloudera 2009年捐赠给Apache,现为Apache顶级项目Flume架构Client:客户端,数据产生的地方,如Web服务器Event:事件,指通过Agent传输的单个数据包,如日志数据通常对应一行数据Agent:代理,一个独立的JVM进程 - Flume以一个或多个Ag原创 2020-08-10 19:52:36 · 733 阅读 · 0 评论 -
大数据基础之Flume——Flume安装
软件资源https://pan.baidu.com/s/1OLp711YieFsEz5Hnw0zaBA提取码:46zv将软件上传到Linux上并解压tar -zxf /opt/flume-ng-1.6.0-cdh5.14.2.tar.gz//个人习惯将安装的软件放在soft文件夹里,如果没有请自建mv apache-flume-ng-1.6.0-cdh5.14.2 /opt/soft/flume160修改配置文件//进入flume的conf文件夹cd /opt/soft/flume160原创 2020-08-10 11:12:02 · 204 阅读 · 0 评论