Hive级联求和

最新推荐文章于 2024-01-08 09:28:55 发布

原创

最新推荐文章于 2024-01-08 09:28:55 发布 · 1k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#hive #大数据

这篇博客详细介绍了如何在Hive中通过级联求和的方法，计算每个用户每个月的累计收入。首先，对原始数据按用户和月份求月总金额；接着，通过自连接得到同一用户不同月份的工资数据；最后，通过分组查询，根据b.month小于等于a.month的条件，求得累计工资。

**tip：**在hive中，如果从分析出计算当前的数据跟之前的状态数据有关（比如漏斗模型算转化率）--------->先把自己跟自己join–>就会把自己当前的状态数据跟之前的状态数据join起来出现在一行中。
例子：

create table t_salary_detail(username string,month string,salary int)
row format delimited fields terminated by ',';

load data local inpath '/root/hivedata/t_salary_detail.dat' into table t_salary_detail;

A,2015-01,5
A,2015-01,15
B,2015-01,5
A,2015-01,8
B,2015-01,25
A,2015-01,5
A,2015-02,4
A,2015-02,6
B,2015-02,10
B,2015-02,5
A,2015-03,7
A,2015-03,9
B,2015-03,11
B,2015-03,6

±-------------------------±----------------------±-----------------------±-+
| t_salary_detail.username | t_salary_detail.month | t_salary_detail.salary |
±-------------------------±----------------------±-----------------------±-+
| A | 2015-01 | 5 |
| A | 2015-01 | 15 |
| B | 2015-01 | 5 |
| A | 2015-01 | 8 |
| B | 2015-01 | 25 |
| A | 2015-01 | 5 |
| A | 2015-02 | 4 |
| A | 2015-02 | 6 |
| B | 2015-02 | 10 |
| B | 2015-02 | 5 |
| A | 2015-03 | 7 |
| A | 2015-03 | 9 |
| B | 2015-03 | 11 |
| B | 201