在看到这个松鼠的时候我首先想到DOTA2里的蓝胖的经典台词!!!
“刚刚是几级?”
“一级!”
“你先请!”
“你先请!”
“那是只松鼠吗?”
“得了吧你!那明明是只鸟!”
蓝胖子愣住了。
那明明是一只金鹏……可它的眼眸里,竟反射出了熟悉的光——是专属于那只松鼠的狡黠。
1.Flink的介绍(背景):
这几年大数据的飞速发展,出现了很多热门的开源社区,其中著名的有 Hadoop、Storm,以及后来的 Spark,他们都有着各自专注的应用场景。Spark 掀开了内存计算的先河,也以内存为赌注,赢得了内存计算的飞速发展。 Spark 的火热或多或少的掩盖了其他分布式计算的系统身影。就像 Flink,也就在这个时候默默的发展着。在国外一些社区,有很多人将
大数据的计算引擎分成了 4 代,当然,也有很多人不会认同。我们先姑且这么认为和讨论。
首先第一代的计算引擎,无疑就是 Hadoop 承载的 MapReduce。这里大家应该都不会对MapReduce 陌生,它将计算分为两个阶段,分别为 Map 和 Reduce。对于上层应用来说,就不得不想方设法去拆分算法,甚至于不得不在上层应用实现多个 Job 的串联,以完成一个完整的算法,例如迭代计算。
由于这样的弊端ÿ