一.三种方案
-
方案1. spark streaming 做实时数据分析,hive 做数据仓库 ,spark sql 做离线数据分析

- 方案2. spark streaming 做数据同步,es做数据仓库, spark sql 做离线数据分析

- 方案3:spark streaming 做数据同步,doris 做实时数据分析, spark sql 做离线数据分析

二. 方案优缺点对比
| 方案一 | 方案二 |
本文探讨了三种游戏报表方案,包括使用spark streaming结合hive、es和doris进行实时与离线数据分析。方案三详细介绍了利用flume自定义source进行数据同步,doris的四层数据结构,以及在复杂计算场景下如何结合spark进行离线分析。
方案1. spark streaming 做实时数据分析,hive 做数据仓库 ,spark sql 做离线数据分析



| 方案一 | 方案二 |
1306
534

被折叠的 条评论
为什么被折叠?