大数据storm视频教程完整版

最新推荐文章于 2025-06-14 08:00:00 发布

转载最新推荐文章于 2025-06-14 08:00:00 发布 · 4.7k 阅读

本教程分为三个阶段，从Storm集群的搭建开始，逐步深入到Storm应用的精通及实战项目。涵盖Storm集群部署、核心概念、API使用、消息机制等，并通过整合Kafka进行项目实践，最终实现数据处理与存储的完整流程。

课程共分三门：
1、storm集群搭建（8讲）
2、storm入门到精通（15讲）
3、storm项目实战课程（18讲）

一、课程介绍：
第一阶段：storm集群的搭建（8讲）
1、storm简介
2、storm部署-1
3、storm部署-2
4、storm部署概念
5、streamgrouping
6、storm组件生命周期
7、storm可靠性1
8、storm可靠性2
*************************************************************

第二阶段：storm入门到精通（15讲）
01.Storm基础知识
02.Storm集群安装-1
03.Storm集群安装-2
04.starter打包运行测试
05.Storm配置文件配置项讲解
06.Maven环境快速搭建教程
07.Storm基本API介绍
08.Storm Topology的并发度
09.Strom消息机制原理讲解
10.Storm DRPC实战讲解
11.Storm Transaction原理&实战讲解
12.Storm实现滑动窗口计数和TopN排序
13.Storm0.9.1&kafka0.8.1集成-1
14.Storm0.9.1&kafka0.8.1集成-2
15.Storm0.9.1&kafka0.8.1集成-3
*************************************************************

第三阶段：storm项目实战课程（18讲）
01、storm+kafka环境搭建-1
02、storm+kafka环境搭建-2
03、storm+kafka环境搭建-3
04、项目分析
05、kafka producer测试
06、storm整合kafka
07、整合项目测试
08、storm 订单有效性检查
09、storm 数据修正
10、storm 数据业务入库处理-1
11、storm 数据业务入库处理-2
12、storm 数据定时存库处理
13、入库mysql并进行测试和bug修复-1
14、入库mysql并进行测试和bug修复-2
15、优化数据结构-确保数据不丢失
16、zookeeper锁机制
17、增加zookeeper锁，保证多线程同时处理数据-1
18、增加zookeeper锁，保证多线程同时处理数据-2