本文介绍了阿里巴巴收购Data Artisans并全面采用Flink背后的原因。Flink是一个分布式流处理引擎，以其无序数据处理、有状态容错和低延迟高吞吐等特性脱颖而出。阿里巴巴利用Flink搭建的实时计算平台服务于内部业务及开发者生态，提供毫秒级延迟的金融级数据处理能力。Flink作为统一的大数据引擎，未来将在大数据领域扮演重要角色。
前言
2018年底发生了一件震惊大数据圈的事情，阿里巴巴以9000万欧元的价格收购了位于柏林的Data Artisans这家最牛逼的开源流引擎Flink背后的创业公司。
在Hadoop生态圈，Flink是一个比Spark更新的引擎。Spark你肯定知道了，就是那个取代了MapReduce成为新一代数据处理引擎霸主的。但是你可能不知道，阿里巴巴内部已经全面用Flink取代了Spark。那么到底什么是Flink呢？阿里又为什么会选择Flink呢？
Flink简介
Flink 是一个针对流数据和批数据的分布式处理引擎。它主要是由 Java 代码实现。目前主要还是依靠开源社区的贡献而发展。对 Flink 而言，其所要处理的主要场景就是流数据，批数据只是流数据的一个极限特例而已。再换句话说，Flink 会把所有任务当成流来处理，这也是其最大的特点。Flink 可以支持本地的快速迭代，以及一些环形的迭代任务。
Flink的特性：
Flink是个分布式流处理开源框架：
1： 即使数据源是无序的或者晚到达的数据，也能保持结果准确性
2：有状态并且容错，可以无缝的从失败中恢复，并可以保持exactly-once
3：大规模分布式
Flink可以确保仅一次语义状态计算；Flink有状态意味着，程序可以保持已经处理过的数据；
Flink支持流处理和窗口事件时间语
最低0.47元/天 解锁文章
扫一扫
3250
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
