hive timestamp类型增加小时

最新推荐文章于 2024-08-25 03:47:25 发布

原创最新推荐文章于 2024-08-25 03:47:25 发布 · 5.2k 阅读

4 ·

CC 4.0 BY-SA版权

大数据问题专栏收录该内容

6 篇文章

订阅专栏

本文介绍了一个使用Hive SQL进行数据更新的复杂案例，包括通过时间戳比较来判断数据是否超过六小时未更新的方法。涉及到的SQL操作包括插入覆盖、时间戳转换以及条件判断。

hive -e "insert overwrite table test.mydate select from_unixtime( unix_timestamp(deptno )+6*60*60)from test.mydate;"

insert overwrite table test.mydate
select
`if`(mytime < curentime,add_time,deptno)
from
(select from_unixtime(unix_timestamp(deptno)+6*60*60,'yyyy-MM-dd HH:mm:ss') mytime,
        from_unixtime(unix_timestamp(deptno)+10*60,'yyyy-MM-dd HH:mm:ss') add_time,
        from_unixtime(unix_timestamp(),'yyyy-MM-dd HH:mm:ss') curentime,
        deptno
from test.mydate) tt;

#!  /bin/bash

time=`hive -e "select deptno from test.mydate;" | tail -n 1`

echo $time

current_time=`date +%s`
mytime_stamp=`date -d "$time" +%s`
echo $current_time
echo $mytime_stamp

let diff_stamp=($current_time - $mytime_stamp)
echo $diff_stamp

if (( $diff_stamp > 21600 ))
then
	echo "大于6个小时没有数据!!!"
fi