
计算框架
shark.zyq
work@alibaba
hangzhou
展开
-
Spark Streaming基础概念介绍
有很多文章讲解storm与spark streaming的区别,都非常详细。本文就介绍一下spark streaming比较重要的概念Storm可以实现亚秒级时延的处理,而每次只处理一条event,而Spark Streaming可以在一个短暂的时间窗口里面处理多条(batches)Event。所以说Storm可以实现亚秒级时延的处理,而Spark Streaming则有一定的时延。在Storm中,每条记录在系统的移动过程中都需要被标记跟踪,所以Storm只能保证每条记录最少被处理一次(Triden原创 2015-09-29 09:19:05 · 2031 阅读 · 0 评论 -
Hadoop RPC
hadoop RPC源码原创 2014-07-01 20:22:44 · 724 阅读 · 0 评论