#!/bin/bash
# A script to perform incremental backups using rsync
set -o errexit # 它使得脚本只要发生错误,就终止执行,而不是一声不响地往下执行
set -o nounset # 在shell中,遇到变量不存在,并不会报错,而是输出空,然后继续执行后续代码
# 开启nounset选项后,脚本若碰到变量为定义则报错并终止
set -o pipefail # 上面的选项errexit针对管道命令是无效的,比如xxx | echo "egon",并不存在
# xxx命令,但是该管道命令整体是执行成功的,加上pipefail选项后则可以防止这件事
#以下几个参数自行设置
readonly ADMIN_EMAIL="xxxx@xx.com" # 管理员邮箱
readonly THRESHOLD=1800 # 存储空间阈值,当备份盘占用达到1800G就发送邮件提醒用户清理空间
readonly SOURCE_DIR="${HOME}/net_storage" # 待备份目录
readonly DAY=90 #保留90天
readonly BACKUP_LOG="${SOURCE_DIR}/data/log/backup_log.txt" # 日志存放目录
if [ ! -d "${SOURCE_DIR}/pool/lost+found" ];then
echo "$(date '+%Y-%m-%d %H:%M')硬盘未挂载" | mutt -s "硬盘未挂载" "${ADMIN_EMAIL}"
exit 1
fi
readonly TARGET_START_DIR="${HOME}/backups" # 目标目录的起始目录
readonly TARGET_DIR="${TARGET_START_DIR}/$(date '+%Y-%m-%d_%H:%M:%S')" # 目标目录
readonly LATEST_LINK="${TARGET_START_DIR}/latest" # 基准目录
mkdir -p "${TARGET_START_DIR}" # 先把目标目录的起始目录创建好
echo "=====================" >> "${BACKUP_LOG}"
echo "$(date '+%Y-%m-%d %H时')" >> "${BACKUP_LOG}"
echo "$(date '+%H时 %M:%S') 备份开始" >> "${BACKUP_LOG}"
rsync -av --delete \
"${SOURCE_DIR}/" \
--link-dest "${LATEST_LINK}" \
--include={'data','pool'}\
--exclude={'/data/lost+found','/pool/lost+found'} \
"${TARGET_DIR}"
# 删除基准目录LATEST_LINK,然将最新一次备份ok的目标目录链接到LATEST_LINK作为下一次的基准目录
rm -rf "${LATEST_LINK}"
ln -s "${TARGET_DIR}" "${LATEST_LINK}"
echo "$(date '+%H时 %M:%S') 备份结束" >> "${BACKUP_LOG}"
#以下是清理过期备份
echo "检查备份数量" >> "${BACKUP_LOG}"
num=$(ls "${TARGET_START_DIR}" | wc -l)
size=$["$(du -s ${TARGET_START_DIR} | awk '{print $1}')"/1024/1024]
if [ $size -ge $THRESHOLD ];then
echo "$(date '+%Y-%m-%d %H:%M') 磁盘空间达到${THRESHOLD}G, 请及时清理! " | mutt -s "硬盘将满" "${ADMIN_EMAIL}"
exit 1
fi
echo "备份数量: ${num}, 已使用空间: ${size}GB" >> "${BACKUP_LOG}"
if [ $num -ge $[DAY*2+1] ];then
list=$(ls "${TARGET_START_DIR}" | head -n $[num-DAY*2+1])
#如果备份数量达到三个月的数量+1个latest软链接,就只保留最后这三个月+latest,其他全删除
for dir in $list
do
rm -rf "${TARGET_START_DIR}/${dir}"
echo "已删除${dir}" >> "${BACKUP_LOG}"
done
fi
个人rsync脚本记录
于 2022-07-27 13:21:19 首次发布