删除hive内部表指定前n天的分区,删除hive外部表指定前n天的分区以及hdfs的数据

#!/bin/sh
#date:2019-01-17
#creator:xxxxxxx
#useto:删除hive内部表指定前n天的分区,删除hive外部表指定前n天的分区以及hdfs的数据(删除数据有两种:一种是根据文件名,一种是根据更新日期)。执行两者的前提为必须以日期为分区
source ~/.bashrc
# 当前时间戳
today_timestamp=$(date -d "$(date +"%Y-%m-%d %H:%M")" +%s)
#删除多少日前的数据和分区,必须为整数
outday=$1
#要删除的最后一天日期 ,通过脚本接受的第一个参数得出
current_date=`date -d "$outday days ago" +%Y-%m-%d` 
#要删除的最后一天日期戳
current_timestamp=$(date -d "$current_date" +%s)
#hive的databases名字
dbname=$2
#将待检测的目录和表名(可以为多个)加载至数组中
OLD_IFS="$IFS" 
IFS="," 
table_array=($3) #多个表名
hdfs_array=($4)  #多个文件路径
IFS="$OLD_IFS" 
#删除hdfs文件的方式,filepath代表根据文件后缀删除,update_day代表根据更新时间删除
way=$5

#范列及提示
example(){

    echo "------------------------------------------------------------------------"
    echo "| 删除内部表分区或只删除外部表分区:                                                          |"
    echo "| sh rmr.sh 30 test t1,t1                                          | "                         
    echo "|----------------------------------------------------------------------|"
    e
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值