Flume安装部署及配置

一、Flume地址

1.Flume官网地址：Welcome to Apache Flume — Apache Flume

2.文档查看地址：Flume 1.10.0 User Guide — Apache Flume

3.下载地址：http://archive.apache.org/dist/flume/

二、安装

1.解压命令

安装1.9.0稳定版

[root@liuyizhao01 /]$ tar  -zxvf  /opt/software/apache-flume-1.9.0-bin.tar.gz  -C  /opt

1.-C（大写）指定安装目录

修改apache-flume-1.9.0-bin的名称为flume

[root@liuyizhao01 /]$  mv /opt/apache-flume-1.9.0-bin /opt/flume

将lib文件夹下的guava-11.0.2.jar删除（或修改名称）以兼容Hadoop 3.1.3(3.0.0及以上)，否则依赖冲突

1.删除

[root@liuyizhao01 lib]$  rm /opt/flume/lib/guava-11.0.2.jar

2.修改名称

[root@liuyizhao01 lib]$  mv /opt/flume/lib/guava-11.0.2.jar /opt/flume/lib/guava-11.0.2.jar.rm

修改conf下的log4j.properties确定日志打印的位置

[root@liuyizhao01 flume]$ cd /opt/flume/conf

[root@liuyizhao01 flume]$ vim log4j.properties

修改：

#console表示同时将日志输出到控制台，LOGFILE生成文件，console打印控制台

flume.root.logger=INFO,LOGFILE,console

#固定日志输出的位置

flume.log.dir=/opt/module/flume/logs

#日志文件的名称

flume.log.file=flume.log

三、调试flume

1.调试官方案例：

监控端口数据，使用Flume监听一个端口，收集该端口数据，并打印到控制台。

未写完待定……