Course - Spark大数据实战班
关注
分享
扫一扫
文章平均质量分 92
Sarah ฅʕ•̫͡•ʔฅ
勿忘初心
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Lecture 9 流式计算简介 及 sparkstreaming
与 流式计算 对应的是 批量计算，流式计算 可以 及时反馈结果，而批量计算 往往伴随着延时。本节主要总结两点内容：sparkstreaming消息队列（Kafka）一、sparkstreaming首先给出流式计算的一个框架：LAMBADA 架构：如图：上半部分为 批量计算；下半部分 为 流式计算；共同构成了 LAMBADA 架构；1、sparkstreaming 架构spar...原创 2019-05-08 22:29:05 · 277 阅读 · 0 评论 -
Lecture 10 实时计算平台（设计与实战）
接着上一节的总结：一、Spark Streaming1、Reciever dstream && direct dstream在应用时，Kafka version很重要：kafka 0.8 和 kafka 0.10的一个重要不同在于：有没有Reciever dstream，0.8 有，0.10 没有。先看一下，Reciever dstream的工作流程：在Rec...原创 2019-05-09 16:36:49 · 159 阅读 · 0 评论