Flume
关注
分享
扫一扫
yield-bytes
Java高级后端、大数据开发、Python高级开发、数据分析与挖掘
展开
-
flume集群高可用连接kafka集群
文章目录前言1、在kafka集群上创建相应的topic2、单节点配置flume的agent sink为sink2.1 配置flume 文件2.2 测试数据消费情况3 、flume NG集群连接kafka集群 前言 在前面blog文章中：《在hadoopHA节点上部署flume高可用组件》和《在hadoopHA节点上部署kafka集群组件》，已经实现大数据实时数据流传输两大组件的部署和测试，本文...原创 2019-12-05 21:00:22 · 1836 阅读 · 0 评论 -
在hadoopHA节点上部署flume高可用组件
文章目录前言1、flume 的基本介绍1.1 基本介绍1.2 数据流模型2、flume的配置文件说明2.1 配置过程3、单点flume agent测试3.1 基本安装3.2 启动flume agent进程3.3 将source.type配成tail F4、flume高可用配置4.1 三个agent的flume配置4.2 配置 collector 前言 前面的blog已实现了hadoopHA的项...原创 2019-11-24 16:17:22 · 1153 阅读 · 0 评论