
Storm
小飞猪小肥猪
这个作者很懒,什么都没留下…
展开
-
三个版本的WorkCount
Java版的wordcount 1.读取文件的数据,一行行读。 FileRead.readline( ); 2.对读取的数据进行切割(比如 “ ”) line.sqlit (" "); string[ ] words=line.split ( " "); 3. 对数组中的单词进行统计 Map<String,Integer> count= new HashMap<...原创 2018-12-17 19:25:01 · 343 阅读 · 0 评论 -
Storm
水槽实时采集,低延迟 kafaka消息队列,低延迟 风暴实时计算,低延迟 Redis的实时存储,低延迟 风暴用来实时处理数据,特点:低延迟,高可用,分布式,可扩展,数据不丢失提供简单理解的接口,便于开发。 海量数据?数据类型很多,产生数据的终端很多,处理数据能力增强。 风暴与Hadoop的的区别 风暴用于实时计算,Hadoop的用于离线计算 风暴处理的数据保存在内存中,源源不断; ...原创 2018-12-17 20:41:39 · 134 阅读 · 0 评论 -
Storm单词技术案例
功能说明: 设计一个topology,来实现对文档里面的单词出现的频率进行统计 整个totopolgy分为三个部分: 1. RandomSentenceSpout:数据源,在已知的英文句子中,随机发送一条句子出去。 2. SplitSentenceBolt : 负责将单行文本记录(句子)切分为单词. 3. WordcountBolt :负责对单词的频率进行累加 7.6、Stream G...原创 2018-12-21 17:46:58 · 262 阅读 · 0 评论