Flume安装与配置

最新推荐文章于 2024-10-25 19:29:03 发布

q435201823

最新推荐文章于 2024-10-25 19:29:03 发布

阅读量529

点赞数 1

CC 4.0 BY-SA版权

分类专栏： Hadoop Flume

版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文链接：https://blog.youkuaiyun.com/q435201823/article/details/88560500

本文档详细介绍了如何在Ubuntu18.04环境中安装和配置Flume1.9.0，包括下载Flume、解压、设置环境变量、修改启动环境和配置文件，以及如何配置Flume将数据流从Spooldir源通过内存通道（memchanal）传输到Kafka目标。特别提示，配置文件中细节至关重要，如recursiveDirectorySearch选项和channel与sink的拼写要格外注意。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

环境

Ubuntu18.04
Flume1.9.0
Kafka2.1.1

下载

解压

先找个地方建个文件夹

mkdir flume

解压到文件夹中

tar -zxvf apache-flume-1.9.0-bin.tar.gz -C ~/flume

设置环境变量

编辑profile

sudo vim /etc/profile

直接将我的环境变量贴出来，不赘述了。
在这里插入图片描述
使其生效

source /etc/profile

修改Flume启动环境

修改flume-env. sh
如果没有在个文件就把flume-env. sh. template复制以下并重新命名为flume-env. sh
添加JAVA_HOME

export JAVA_HOME=/usr/lib/jdk/jdk1.8.0_201

在这里插入图片描述

最低0.47元/天解锁文章

200万优质内容无限畅学

博客等级

码龄8年

222
原创

274
点赞

295
收藏

178
粉丝

关注

私信

热门文章

分类专栏

展开全部收起

上一篇：: Hbase API 编程

下一篇：: Java内存-运行时数据区域

最新评论

E-邝博士的问题-中南林业科技大学第十一届程序设计大赛
晴空～蓝兮: 真的假的，原来以前这个邝老师负责的啊，23集训队蒟蒻呆了快一年我见都没见过，也是无语，学校集训队也是垃圾了，几年没牌子了，23拉不到人打了已经
如何配置通过Steam启动SMAPI
m0_65050112: 请问我下载完Smapi后点击install on windows 然后输入1，为什么它显示我这是无效的选择啊老版的Smapi和mod我都删了
serde json 常用实践
JA+: 加类型后又变成这样 error[E0277]: the trait bound `Person: serde::de::Deserialize<'_>` is not satisfied --> src\lib.rs:127:34 | 127 | match serde_json::from_str::<Person>(data){ | ^^^^^^ the trait `serde::de::Deserialize<'_>` is not implemented for `Person` | = help: the following other types implement trait `serde::de::Deserialize<'de>`: &'a Path &'a [u8] &'a str () (T0, T1) (T0, T1, T2) (T0, T1, T2, T3) (T0, T1, T2, T3, T4) and 127 others note: required by a bound in `serde_json::from_str` --> C:\Users\xxxx\.cargo\registry\src\mirrors.ustc.edu.cn-61ef6e0cd06fb9b8\serde_json-1.0.94\src\de.rs:2603:8 | 2603 | T: de::Deserialize<'a>, | ^^^^^^^^^^^^^^^^^^^ required by this bound in `serde_json::from_str`
serde json 常用实践
JA+: 引用「let v: Value = serde_json::from_str(data)?;」你这个是官网例子吧，为什么我报这个啊 [code=plain]error[E0282]: type annotations needed --> src\lib.rs:127:11 | 127 | match serde_json::from_str(data){ | ^^^^^^^^^^^^^^^^^^^^ cannot infer type of the type parameter `T` declared on the function `from_str` 128 | Ok(json) => { 129 | println!("{:?}",json.name); | ---- type must be known at this point | help: consider specifying the generic argument | 127 | match serde_json::from_str::<T>(data){ | +++++ [/code]
U盘安装 Kali Linux 安装无法挂载问题已解决（kali+win7双系统）
亻三几又: 用rufus安装两次都是安装到媒体加载时读不了U盘，安装不下去，后来把ISO模式改为DD模式就好了

大家在看

最新文章

目录

展开全部

收起

评论

被折叠的条评论为什么被折叠?

到【灌水乐园】发言

查看更多评论

添加红包

成就一亿技术人!

hope_wisdom

发出的红包

实付元

使用余额支付

点击重新获取

扫码支付

钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。