shell调度-crontab定时任务示例

最新推荐文章于 2023-06-28 11:07:22 发布

原创

最新推荐文章于 2023-06-28 11:07:22 发布 · 479 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#shell #crontab #sql #hadoop

本文介绍了如何利用shell的crontab命令设置每天定时任务，并讲解了如何处理日期参数，确保在上游表成功标志存在时执行sql语句。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

shell调度-定时任务示例：

1）crontab定时任务，每天执行

2）日期参数处理：传入日期参数时变量等于传入日期，未传入日期参数时变量等于昨日

3）依赖检测：执行sql语句前对上游表进行检测，若成功标志存在则执行，否则等待下次检测

终端执行：sh home_recommend.sh [date可选]

终端中后台执行：nohup sh home_recommend.sh [date可选] &

定时任务：50 8 * * * cd /home/xxx/crontab/home_recommend && nohup sh home_recommend.sh [date可选] > log 2>&1 &

# home_recommend.sh
#! /bin/bash

source /etc/profile
hive=$HIVE_HOME/bin/hive
python=/usr/local/bin/python
hadoop=$HADOOP_HOME/bin/hadoop


##########################################################################################
###                              handle date args                                      ###
##########################################################################################
date=`date -d" 1 day ago" +"%Y%m%d"`
year=`date -d"$date" +"%Y"`
month=`date -d"$date" +"%m"`
day=`date