Spark(六-2)交互式数据分析怎么对外提供数据分析服务?

本文探讨了如何设计一个交互式的数据分析系统,利用Spark进行实时处理,针对不同条件运行Spark作业并即时反馈结果,旨在实现高效的数据分析流程。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

六-1中我们分析了我们实际场景中的一个需求,但是如果要完全支持需求的话我们得考虑一下整个系统怎么跑起来了?我们自己测试的时候都是单机跑,难不成线上我们也这么做?显然不可能。

我的交互式的理解:选择一个条件 --> 跑该条件的spark 作业 -->生成结果 -->反馈结果(达到交互式的效果)

因此基于此,有如果的架构图:
在这里插入图片描述
Spark1作业 ,Spark2作业, Spark3作业针对的是用户选择的不同的条件
基于上述的理念图去做交互式分析的系统设计应该八九不离十了吧,当然了这只是整个数据分析架构内的一小块,后续要基于更高的高度去看大数据平台的架构。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值