
Sven_大数据
剑行极锋
Challenges make me excited!
展开
-
选azkaban还是oozie?各种调度工具对比
各种调度工具对比 下面的表格对上述四种hadoop工作流调度器的关键特征进行了比较,尽管这些工作流调度器能够解决需求场景基本一致,但在设计理念,目标用户,应用场景等方面还是存在显著的区别,在技术选型时可供参考 特性 hamake oozie azkaban cascading 工...原创 2019-05-09 09:58:50 · 2073 阅读 · 0 评论 -
Logstash的介绍与使用
一、Logstash介绍 Logstash是开源的服务器端数据处理管道,能够从多个来源采集数据,转换数据,然后将数据发送到Elastic search。 Elastic search是主流的分布式大数据存储和搜索引擎。 二、Logstash的工作原理 Logstash时间处理管道又三个阶段:输入-->过滤器-->输出。输入生成时间,过滤器修改他们,输出将他们发送到其他地方。输入...翻译 2019-06-24 15:07:27 · 696 阅读 · 0 评论