HIVE中对于时间变换的处理

最新推荐文章于 2024-08-05 11:52:11 发布

A_static500

最新推荐文章于 2024-08-05 11:52:11 发布

阅读量2.2k

点赞数 1

CC 4.0 BY-SA版权

分类专栏： hive 文章标签：大数据 hive sql spark

本文链接：https://blog.youkuaiyun.com/A_static/article/details/125744710

hive 专栏收录该内容

4 篇文章

订阅专栏

本文介绍了如何使用SQL函数如last_day, floor_month, trunc等获取月份第一天和最后一天，以及如何通过floor_year, trunc处理年份边界。同时展示了两种方法来处理时间区间，涉及posexplode, split和space等技术。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

一、获取月份第一天/最后一天

--需求一：获取月份第一天/最后一天
--方式一：last_day
--获取当月第一天
select date_add(last_day(add_months('2020-06-14',-1)),1);
--获取当月最后一天
select last_day('2020-06-14');

--方式二：floor_month（注：必须转换成时间戳处理！）
--获取当月第一天
select to_date(floor_month(cast('2020-06-14' as timestamp)));
select to_date(floor_month(from_utc_timestamp(unix_timestamp('2020-06-14','yyyy-MM-dd')*1000,'GMT+8')));
--获取当月最后一天
select date_sub(add_months(floor_month(cast('2020-06-14' as timestamp)),1),1);

--方式三：trunc
desc function extended trunc;
--获得当月的第一天
select trunc('2020-06-14','MM');
--获得当月的最后一天
select date_sub(trunc(add_months('2020-06-14',1),'MM'),1);

二、获得年份的第一天/最后一天

--方式一：floor_year获取当年的第一天
--from_unixtime返回'string'型
select to_date(floor_year(cast(from_unixtime(unix_timestamp()) as timestamp)));

--floor_year获取当年的最后一天
select to_date(date_sub(add_months(floor_year(cast(from_unixtime(unix_timestamp()) as timestamp)),12),1));

--方式二：trunc获取当年的第一天/最后一天

--trunc获取当年的第一天
select trunc(from_unixtime(unix_timestamp()),'YYYY');

--trunc获取当年的最后一天
select date_sub(add_months(trunc(from_unixtime(unix_timestamp()),'YYYY'),12),1);

三、获取时间区间中的连续区间日期

--获得时间区间的方法一：
--利用函数关系做变换，逻辑强
select if(year(start_time_t)=year(add_months(start_time_t,12*p)),start_time_t,trunc(add_months(start_time_t,12*p),'YYYY')) start_time_t_sec,
       if(year(stop_time_t)=year(add_months(start_time_t,12*p)),stop_time_t,add_months(date_sub(trunc(add_months(start_time_t,12*p),'YYYY'),1),12)) stop_time_t_sec
from (
         select from_unixtime(unix_timestamp(start_time, 'yyyyMdd'), 'yyyy-MM-dd') start_time_t,
                from_unixtime(unix_timestamp(stop_time, 'yyyyMdd'), 'yyyy-MM-dd')  stop_time_t
         from (
                  select '2015506' start_time,
                         '2022712' stop_time
              ) t1
     )t2
lateral view posexplode(split(space(year(stop_time_t)-year(start_time_t)),' ')) tmp as p,v;

--获得时间区间的方法二：
--拼接写法似乎也差不多代码量，但是逻辑简单
select if(year(start_time_t)=year(add_months(start_time_t,12*p)),start_time_t,concat(year(add_months(start_time_t,12*p)),'-','01-01')) start_time_t_sec,
       if(year(stop_time_t)=year(add_months(start_time_t,12*p)),stop_time_t,concat(year(add_months(start_time_t,12*p)),'-','12-31')) stop_time_t_sec

from (
         select from_unixtime(unix_timestamp(start_time, 'yyyyMMdd'), 'yyyy-MM-dd') start_time_t,
                from_unixtime(unix_timestamp(stop_time, 'yyyyMMdd'), 'yyyy-MM-dd')  stop_time_t
         from (
                  select '20150506' start_time,
                         '20220712' stop_time
              ) t1
     )t2
         lateral view posexplode(split(space(year(stop_time_t)-year(start_time_t)),' ')) tmp as p,v;

该需求的结果显示：