flume安装

最新推荐文章于 2024-08-13 15:44:06 发布
最新推荐文章于 2024-08-13 15:44:06 发布
阅读量286 收藏
点赞数
分类专栏： 安装文档
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/senvil/article/details/48893973
版权

flume安装

1.  上传

用工具或者命令上传安装文件到/home/hadoop下

2.  解压

su – hadoop

tar –zxvf apache-flume-1.4.0-bin.tar

3.  重命名

mv apache-flume-1.4.0 flume

4.  修改环境变量

su – root

vi /etc/proflie

添加内容：

export FLUME_HOME=/home/hadoop/flume

export FLUME_CONF_DIR=$FLUME_HOME/conf

export PATH=$PATH:$FLUME_HOME/bin

source /etc/profile

su - hadoop

5.  修改配置文件

cd /home/hadoop/flume/conf

cp /home/hadoop/flume/conf/flume-env.sh.template/home/hadoop/flume/conf/flume-env.sh

vi flume-env.sh

修改JAVA_HOME=/usr/jdk

6.  测试

查看版本：

flume-ng version

 

6、Flume安装
赞的心路历程
09-09 1034
按照规划，需要采集的用户行为日志文件存放在hadoop102，故需要在该节点配置日志采集Flume。日志采集Flume需要采集日志文件内容，并对日志格式（JSON）进行校验，然后将校验通过的日志发送到Kafka。此处可选择TaildirSource和KafkaChannel，并配置日志校验拦截器。选择TailDirSource和KafkaChannel的原因如下：TailDirSource相比ExecSource、SpoolingDirectorySource的优势。
flume安装配置
最新发布
2301_77635787的博客
12-09 499
方法1：[hadoop@hadoop1 app]$scp -r apache-flume-1.9.0-bin hadoop@hadoop2:/home/hadoop/app/[hadoop@hadoop1 app]$scp -r apache-flume-1.9.0-bin hadoop@hadoop3:/home/hadoop/app/下载flume安装包然后上传至 hadoop1节点的/home/hadoop/app目录下并解压，具体操作如下所示。Flume的安装配置非常简单，详细的安装步骤如下所示。
Flume安装部署
搞数据
09-05 1912
Apache Flume 是一个从可以收集例如日志，事件等数据资源，并将这些数量庞大的数据从各项数据资源中集中起来存储的工具/服务，或者数集中机制。flume具有高可用，分布式，配置工具，其设计的原理也是基于将数据流，如日志数据从各种网站服务器上汇集起来存储到HDFS，HBase等集中存储器中。目前官方网站已经更新到1.10.1，本安装过程中，采用老版本1.8.0。将安装包上传至 /export/software下。解压安装包至 /export/server。保存退出，FLume安装完成。
Flume 安装
weixin_52515393的博客
04-21 497
虚拟机安装flume
Flume安装配置(Linux)
m2e=的博客
08-13 960
Flume是开源日志系统。Flume是流式日志采集工具。 提供从固定目录下采集日志信息到目的地（HDFS，HBase，Kafka）能力。 提供实时采集日志信息（taidir）到目的地的能力。
flume安装教程
Andy86666的博客
11-28 821
（谷歌开发的工具包，但是和其他的组件的版本不统一）进行到flume的安装路径中，需要修改conf中。，并在里面添加JDK的路径。
Flume安装过程
2301_76737204的博客
12-26 989
具体方法是，打开“控制面板”，进入“默认程序”，在出现的界面的左侧底部点击“程序和功能”，再在出现的界面的左侧顶部点击“打开或关闭。写入数据，产生日志数据输出到控制台（屏幕）。下面首先介绍操作系统。这时就可以从键盘输入一些英文单词，比如“客户端”都选中，然后点击“确定”按钮。为了顺利完成后面的测试，首先开启。窗口，就可以看到屏幕上显示了“这里给出一个简单的实例，假设。环境的支持，因此，需要在。中的操作方法，然后再介绍。在这个配置文件中，设置了。
Flume安装
狐誩的博客
11-03 298
Flume安装
Flume安装测试
qq_45360515的博客
10-26 1443
Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统，Flume支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写到各种数据接受方（可定制）的能力。 当前Flume有两个版本Flume 0.9X版本的统称Flume-og，Flume1.X版本的统称Flume-ng。由于Flume-ng经过重大重构，与Flume-og有很大不同，使用时请注意区分。
flume安装程序
12-10
在本安装指南中，我们将深入探讨如何使用提供的`flume-1.6.0-bin.tar`安装包来安装和配置Apache Flume。 1. **下载与准备**： 首先，你需要从Apache官方网站下载Flume的最新稳定版本。在本例中，我们已有一个名为`...
Flume安装详细步骤
11-30
Flume安装详细步骤 Flume是一款基于Java的分布式日志收集系统，主要用于收集和传输大规模日志数据。下面是Flume安装的详细步骤： Step 1: 安装JDK环境 在安装Flume之前，需要确保JDK环境已经安装。这里我们使用...
flume安装配置.doc
12-09
配置文件位于Flume安装目录下的conf子目录中。配置文件名从flume-conf.properties.template修改为flume-conf.properties，意味着从模板属性文件转换为实际的配置文件。在这个文件中，需要定义source、channel和sink...
Hadoop2.6.0eclipse插件制作与安装
senvil的专栏
10-04 1349
1、下载 1、首先从git下载源码 https://github.com/winghc/hadoop2x-eclipse-plugin 2、编译准备 win7编译首先需要安装jdk、ant、Eclipse 3、解压插件 将插件hadoop2x-eclipse-plugin-master.zip解压到某个的目录。 如：D:\ hadoop2x-eclipse-plugin-master
修改hive的元数据库
senvil的专栏
10-04 715
修改hive的元数据库 1.  安装mysql 1.1.  通过yum来进行mysql的安装 su - root yum install -y mysql-server mysql mysql-deve 在等待了一番时间后…… 1.2.  查看mysql版本 rpm -qi mysql-server 至此我们的mysql数据库已经安装完成了。 2.  启动mysql 2
mahout安装
senvil的专栏
10-04 430
mahout安装 1.  安装 1.1.  上传 用工具将mahout安装文件mahout-distribution-0.9.tar.gz上传到/home/hadoop文件夹下 1.2.  解压 su – hadoop tar –zxvf mahout-distribution-0.9.tar.gz 1.3.  重命名 mv mahout-distribution-0.9 maho
sqoop安装
senvil的专栏
10-04 416
sqoop安装 1.  上传、解压、重命名 1.1.  在任意hive机器上上传sqoop su - hadoop rz –y 1.2.  解压 tar -zxvfsqoop-1.4.4.bin__hadoop-1.0.0.tar.gz 1.3.  重命名 mv sqoop-1.4.4.bin__hadoop-1.0.0 sqoop 2.  设置环境变量 su – root
storm安装文档
senvil的专栏
10-04 405
storm安装文档 1.  安装python 注：默认centos6.5中已经存在python2.6.6,可以使用python –V查看，我的机器默认已存在所以在此我就不安装了，提供步骤如下。 1.1.  上传 用工具上传python安装文件 1.2.  解压 tar –jxvf Python-2.6.6.tar.bz2 1.3.  编译 cd Python-2.6.6   
hadoop2安装文档
senvil的专栏
10-04 399
hadoop2安装文档 1.  安装jdk 每台机器都安装 2.  安装ssh 每台机器都安装 3.  安装zookeeper 随便找奇数台机器上安装。 我的是在：master1:2181,master1ha:2181,master2:2181 4.  配置host、机器规划 机器规划： master1:    192.168.56.151    (active
Flume安装与配置指南
以下是从标题和描述中提取的Flume安装与配置的关键知识点： 1. Flume安装 - 首先，你需要将Flume的安装包上传到Linux服务器，可以通过FTP或SCP等工具完成。 - 安装包解压：使用`tar`命令解压缩，例如`tar -zxvf ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值