
storm
tianjinsong
0101101001001
展开
-
Storm安装和使用Demo
http://blog.youkuaiyun.com/sqh201030412/article/details/78426812 一,Storm集群的安装 1.下载安装包: wget http://archive.apache.org/dist/storm/apache-storm-0.9.7/apache-storm-0.9.7.tar.gz 2.解压移动到软件安转载 2017-11-14 15:30:16 · 2689 阅读 · 0 评论 -
Flume+Kafka+Storm+Redis构建大数据实时处理系统:实时统计网站PV、UV+展示
https://mp.youkuaiyun.com/postlist 1 大数据处理的常用方法 前面在我的另一篇文章中《大数据采集、清洗、处理:使用MapReduce进行离线数据分析完整案例》中已经有提及到,这里依然给出下面的图示: 前面给出的那篇文章是基于MapReduce的离线数据分析案例,其通过对网站产生的用户访问日志进行处理并分析出该网站在某天的PV、UV等数据,对应上面的图示,其走的就是离...转载 2018-11-26 19:17:07 · 7614 阅读 · 0 评论 -
Flume+Kafka+Storm+Redis构建大数据实时处理系统:实时统计网站PV、UV+展示
http://blog.51cto.com/xpleaf/2104160?cid=704690 1 大数据处理的常用方法 前面在我的另一篇文章中《大数据采集、清洗、处理:使用MapReduce进行离线数据分析完整案例》中已经有提及到,这里依然给出下面的图示: 前面给出的那篇文章是基于MapReduce的离线数据分析案例,其通过对网站产生的用户访问日志进行处理并分析出该网站在某天的PV、U...转载 2018-12-06 13:51:09 · 13070 阅读 · 0 评论 -
Strom+Kafka + redis实时计算单词出现频率的案例
https://blog.youkuaiyun.com/tototuzuoquan/article/details/73528405 案例要实现的目标 在Kafka的shell 客户端中输入内容,通过Storm实时去kafka中取数据并进行计算单词出现的次数,并且实时把这些数据信息存储到redis中。 代码编写 编写Pom文件,代码如下: <?xml version="1.0" encoding...转载 2018-12-06 13:53:04 · 14400 阅读 · 0 评论 -
Spark(2.3.1)集群安装【一篇就够】
https://blog.youkuaiyun.com/sjmz30071360/article/details/82561867 操作系统:Linux(CenOS7) Spark集群至少需要有JDK、Hadoop、Scala、Spark 一、安装Spark依赖的Scala(每个节点都安装) 1.1 下载Scala(2.11.12) wget "https://downloads.lightbend...转载 2018-12-19 16:42:40 · 15840 阅读 · 0 评论