使用spark rdd计算手机在基站停留时间

置顶

活出别致的高傲

于 2018-10-31 10:37:01 发布

阅读量793

点赞数 3

分类专栏：陶笔记文章标签：使用spark rdd计算手机在基站停留时间

本文链接：https://blog.youkuaiyun.com/qq_43006059/article/details/83506431

版权

这篇博客介绍如何利用Spark RDD处理用户手机在基站的日志数据，通过分析lac_log.txt和user.log来确定用户的常驻地点，即停留时间最长的两个位置。实现过程包括读取基站信息和用户日志，计算每个位置的停留时长，并最终输出手机号及对应的位置和停留时长。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

lac_log.txt

9F36407EAD0629FC166F14DDE7970F68,116.304864,40.050645,6
CC0710CC94ECC657A8561DE549D940E0,116.303955,40.041935,6
16030401EAFB68F1E3CDF819735E1C66,116.296302,40.032296,6

user.log

18611132889,20160327075000,9F36407EAD0629FC166F14DDE7970F68,1
18688888888,20160327075100,9F36407EAD0629FC166F14DDE7970F68,1
18611132889,20160327081000,9F36407EAD0629FC166F14DDE7970F68,0
18688888888,20160327081300,9F36407EAD0629FC166F14DDE7970F68,0
18688888888,20160327175000,9F36407EAD0629FC166F14DDE7970F68,1
18611132889,20160327182000,9F36407EAD0629FC166F14DDE7970F68,1
18688888888,20160327220000,9F36407EAD0629FC166F14DDE7970F68,0

通过用户手机连接信号塔(也称基站)产生的日志信息，判断用户的家庭地址和工作地址,也就是求出用户的手机在哪2个位置停留时间最长。现在有两张表，
用户产生的访问日志表(user.log),格式如下: