- 博客(5)
- 收藏
- 关注
RSS订阅原创 flume(三)
一、安装flume在官网可以下载flume-ng 1.9 flume下载flume的官方用户手册用户指南开发者指南 用户指南 开发者指南1.把下载的apache-flume-1.9.0-bin.tar解压到linux文件夹下。sudo tar -xvf apache-flume-1.9.0-bin.tar -C /opt2.切换目录，把解压以后的apache-flume-1.9.0文件夹，改名字为flume。a.切换目录cd /optb.改名字sudo ln -s apac
2022-05-20 17:08:27
171
原创 flume（二）
一、SourceSource是数据的收集端，负责将数据捕获后进行特殊的格式化，将数据封装到事件(event)里，然后将事件推入Channel中。flume提供了很多内置的Source，每个Source都表示不同的功能，可以从不同的位置读取数据。flume的Source一些常用的Source二、ChannelChannel连接Source和sink的组件，大家可以将它看做一个数据的缓冲区，它可以将事件暂存到内存中也可以持久化到本地磁盘上，直到Sink处理完该事件。flume提供了很多内置
2022-05-20 16:16:44
281
原创 flume(一)
一、简介1.分布式日志采集系统这里的日志指的是人机交互所产生的数据。可以得到flume是采集人机交互数据的工具。采集数据就会有三个核心部分:数据来源，数据数据通道，数据流向目的地。2. Flume最早是Cloudera提供的日志收集系统，目前是Apache下的一个孵化项目，Flume支持在日志系统中定制各类数据发送方，用于收集数据。3. Flume是一个分布式、可靠、高可用的海量日志聚合系统，支持在系统中定制各类数据发送方，用于收集数据﹔同时，Flume提供对数据的简单处理，并写到各种数据接收方
2022-05-20 15:48:38
333
原创 关于Linux16.04如何更新源及部分更新源列表
为什么要更改更新源由于linux系统自带的镜像源都在国外，国内用户下载或更新软件会比较慢，有时是非常慢，所以国内某些机构，如大学，研究院所，就在国内建了linux的镜像源服务器供国内linux用户使用，而我们要使用这些源，就要更改自己linux系统的更新源配置文件，下面是更新源操作步骤。1.备份系统自带更新源配置文件sudo cp /etc/apt/sources.list /etc/apt/sources.list.bak2.修改配置文件sources.list内容输入命令 sudo vi /e
2022-04-21 19:53:51
4281
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人