flume---2中channel file和memory

最新推荐文章于 2025-02-06 17:10:57 发布

转载最新推荐文章于 2025-02-06 17:10:57 发布 · 288 阅读

0 ·

CC 4.0 BY-SA版权

原文链接：http://www.cnblogs.com/JBLi/p/10867292.html

文章标签：

#大数据 #开发工具

本文详细介绍了如何使用Flume进行文件通道配置，包括源、通道和接收器的设置，以及具体的目录路径和文件后缀说明。通过实例展示了如何启动Flume代理并监控结果。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

//之前一直用的是memory缓存

channels通道类型为文件形式

[root@linux05 conf]# vim filechannel.conf

a1.sources=r1
a1.channels=c1
a1.sinks=k1

a1.sources.r1.type=spooldir
a1.sources.r1.spoolDir=/flume
a1.sources.r1.fileSuffix=.fuck

a1.channels.c1.type = file
a1.channels.c1.checkpointDir = /flumelogs/checkpoint
a1.channels.c1.dataDir = /flumelogs/data

a1.sinks.k1.type=logger

a1.sinks.k1.channel=c1
a1.sources.r1.channels=c1
*********************************************************************