Flume-agent内部架构:
1. 下载flume及kafka
地址:http://flume.apache.org/ 版本:apache-flume-1.8.0-bin.tar.gz
地址:http://kafka.apache.org/ 版本:kafka_2.11-1.0.0.tgz
2. 解压及移动
解压文件并移动到自己熟悉的位置,我的kafka和flume都放在/usr/local里
~/Downloads $ tar zxvf apache-flume-1.8.0-bin.tar.gz
~/Downloads $ mv apache-flume-1.8.0-bin /usr/local #注意root执行
~/Downloads $ tar zxf kafka_2.11-1.0.0.tgz
~/Downloads $ mv kafka_2.11-1.0.0.tgz /usr/local #注意root执行
3. 配置文件
在flume文件夹下conf文件夹下新建flume-kafka.conf文件
apache-flume-1.8.0-bin/conf $ touch flume-kafka.conf
apache-flume-1.8.0-bin/conf $ vim flume-kafka.conf
编辑配置文件如下: