Hive编程题：求每月的累计访问数

最新推荐文章于 2024-10-28 18:45:19 发布

转载最新推荐文章于 2024-10-28 18:45:19 发布 · 961 阅读

5 ·

CC 4.0 BY-SA版权

原文链接：https://my.oschina.net/u/3730508/blog/1588075

文章标签：

#大数据

本文介绍如何使用Hive SQL进行复杂的数据统计，包括求取每个用户每月的总访问次数，最大单月访问次数，以及累计到该月的总访问次数。通过两步操作实现：首先创建临时表汇总每月访问次数；然后通过自连接表计算累计和最大访问次数。

题目：每个用户截止到每月为止的最大单月访问次数和累计到该月的总访问次数：用户名，月份，访问次数 A, 2015-01, 5 A, 2015-01, 15 B, 2015-01, 5 A, 2015-01, 8 B, 2015-01, 25 A, 2015-01, 5 A, 2015-02, 4 A, 2015-02, 6 B, 2015-02, 10 B, 2015-02, 5 A, 2015-03, 16 A, 2015-03, 22 B, 2015-03, 23 B, 2015-03, 10 B, 2015-03, 11 最后结果展示: 用户月份最大访问次数总访问次数当月访问次数 A 2015-01 33 33 33
A 2015-02 33 43 10 A 2015-03 38 81 38 B 2015-01 30 30 30 B 2015-02 30 45 15 B 2015-03 44 89 44 解题思路： 1>先求出每月的总访问次数

hive> create table hrT1 as select id, datetime as month, sum(times) as times from hrtest group by id,datetime;

输入图片说明

2>自连，并以第一张表为主，实现求和、排序、分组

hive> select f.id,f.month,f.times,sum(s.times) sumtime,max(s.times) maxtime from hrT1 f inner join hrT1 s on f.id=s.id where f.month>=s.month group by f.id,f.month,f.times order by f.id,f.month;

输入图片说明