Joker_Jiang3的博客

基于Flume日志采集框架（完整版） 一.框架流程图 这篇博客有讲Spring boot+log4j+flume+Kafka的日志实现的上半部分，这里是在上半部分的基础上完成下半部分，形成一整套流程 二.配置文件设置 1.在/usr/local/flume/test的目录下，复制demo.properties 文件为flume1.conf 这是采集的配置文件 cp demo.properties flume1.conf 2.创建输送数据的配置文件flume2.conf 所有配置文件的IP都改成自己的 #

Flume详解 ​ 百度收集整理的Flume详解 一.概述 Flume是由cloudera软件公司产出的可分布式日志收集系统，在2009年捐赠了apache软件基金会，为hadoop相关组件之一。尤其近几年随着flume的不断被完善以及升级版本的逐一推出，特别是flume-ng;同时flume内部的各种组件不断丰富，用户在开发的过程中使用的便利性得到很大的改善，现已成为apache top项目之一. 二.特点 Flume 提供的日志收集系统，具有分布式、高可靠、高可用性等特

Flume安装及配置 1.安装 下载地址：Flume下载连接 解压到/usr/local目录下，并重命名为flume。（我的版本为1.9） 2. 配置环境变量 export FLUME_HOME=/usr/local/flume export PATH=$PATH:$FLUME_HOME/bin 使环境生效 source ~/.bashrc 验证版本 3. 配置flume-env.sh文件的JDK路径 在flume的conf目录下，复制配置文件 cp flume-env.sh.template flu