项目二:利用Spark SQL计算平均分

该博客介绍了如何利用Spark SQL来计算多个成绩文件中每个学生的平均分。首先提出任务,要求计算python.txt、spark.txt、django.txt三个成绩表的平均分。接着详细讲解了完成任务的步骤,包括新建Maven项目、添加Spark相关依赖、创建日志配置文件、编写计算平均分的单例对象以及本地运行验证结果。最后提出了两个课后练习,一是按平均分降序排列计算结果,二是使用Spark RDD方法进行平均分计算。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

一、提出任务

  • 有多科成绩表,比如python.txt、spark.txt、django.txt,计算每个学生三科平均分

  • Python成绩表 - python.txt

1 张三丰 89
2 李孟达 95
3 唐雨涵 92
4 王晓云 93
5 张晓琳 88
6 佟湘玉 88
7 杨文达 66
8
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

酒城译痴无心剑

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值