
sparkStreaming
starkpan
日出东海落西山,喜也一天,愁也一天。
遇事不钻牛角尖,人也舒坦,心也舒坦。
展开
-
spark之sparkStreaming实时流处理
1、sparkStream官网http://spark.apache.org/streaming/2、什么是sparksreaming?sparkStreamin是一种构建在spark之上的实时计算框架,他扩展了spark处理打过莫流失数据的能力,吞吐量高,容错能力强。(对标hadoop中storm)3、处理数据方式 sparkStreaming将输入的数据按照时间...原创 2019-01-26 11:58:20 · 462 阅读 · 0 评论 -
sparkStream 实例
一、搭建spark环境https://blog.youkuaiyun.com/starkpan/article/details/86437089二、实例1、spark中自带的例子打开两个termial(或shell终端) 一个终端输入,通过nc进行内容传输nc -lk 9999a a a b b b c c c c c 一个终端启动sparkStream实例,...原创 2019-02-09 12:02:38 · 647 阅读 · 0 评论