rsync数据同步备份

rsync数据同步模式

推、上传

拉、下载

 

rsync备份方式

增量

全量

 

rsync传输模式

3种

本地传输，直接cp即可

远程传输，系统用户

守护进程，使用虚拟用户

 

--delete 无差异同步

--bwlimit 限速

--password-file 指定客户端密码

export RSYNC_PASSWORD=

-avz （客户端使用root用户，服务端rsync 客户端root 服务端root 客户端oldboy 服务端oldboy）

-P 显示速率

 

Rsync守护进程

1.安装

2.配置

3.启动

 

 

客户端需求

1.客户端提前准备存放的备份的目录，目录规则如下:/backup/nfs_172.16.1.31_2018-09-02

2.客户端在本地打包备份(系统配置文件、应用配置等)拷贝至/backup/nfs_172.16.1.31_2018-09-02

3.客户端最后将备份的数据进行推送至备份服务器

4.客户端每天凌晨1点定时执行该脚本

5.客户端本地保留最近7天的数据, 避免浪费磁盘空间

 

服务端需求

1.服务端部署rsync，用于接收客户端推送过来的备份数据

2.服务端需要每天校验客户端推送过来的数据是否完整

3.服务端需要每天校验的结果通知给管理员

4.服务端仅保留6个月的备份数据,其余的全部删除

 

注意：所有服务器的备份目录必须都为/backup

1.客户端将需要备份的文件放入指定的目录中 /backup/nfs_172.16.1.31_2018-09-02

2.客户端每天凌晨1点使用rsync命令推送一次nfs_172.16.1.31_2018-09-0

3.客户端保留最近7天的数据即可

 

-------------------------------------------------------------------------

烂货->打标记->装车->运输

散货->打包->胶布->装车-->运输

 

1.我要备份什么？

/etc/fstab /var/spool/cron/USERNAME /server/scripts

2.我要怎么备份？

/backup/主机名_ip地址_时间 命名的目录中

3.我要备份到哪？

rsync备份服务器 172.16.1.41

--------------------------------------------------------------------------------------------------

客户端脚本的位置

#批量修改时间。并执行脚本，产生数据文件

[root@nfs ~]# for i in {1..30};do date -s 2018/12/$i;sh /server/scripts/client_push_data.sh ;done

[root@nfs ~]# cat /server/scripts/client_push_data.sh

#!/bin/bash

#1.定义变量

PATH=/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/root/bin

SRC=/backup

HOST=$(hostname)

ADDR=$(ifconfig eth1|awk 'NR==2 {print $2}')

$DATE=(date +%F)

DEST=${HOST}_${ADDR}_${DATE}

 

#2.创建目录

[ -d $SRC/$DEST ] || mkdir -p $SRC/$DEST

 

#3.备份文件

cd / && \

[ -f $SRC/$DEST/sys.tar.gz ] || tar czf $SRC/$DEST/sys.tar.gz etc/fstab etc/passwd && \

[ -f $SRC/$DEST/other.tar.gz ] || tar czf $SRC/$DEST/other.tar.gz var/spool/cron/ server/scripts && \

 

#4.使用md5打标记

[ -f $SRC/$DEST/flag_$DATE ] || md5sum $SRC/$DEST/*.tar.gz > $SRC/$DEST/flag_$DATE

 

#4.本地推送到备份服务器

export RSYNC_PASSWORD=123456

rsync -avz $SRC/$DEST rsync_backup@172.16.1.41::backup

 

#5.保留本地最近7天的数据

find $SRC/ -type d -mtime +7|xargs rm -rf

-------------------------------------------------------------------------------------------------

服务端操作如下：

 

1.配置邮件

[root@backup ~]# yum install mailx -y

[root@backup ~]# vim /etc/mail.rc

set from=1123669204@qq.com

set smtp=smtps://smtp.qq.com:465

set smtp-auth-user=1123669204@qq.com

set smtp-auth-password=olspebolslujiibi

set smtp-auth=login

set ssl-verify=ignore

set nss-config-dir=/etc/pki/nssdb/

 

2.验证能否成功的发送邮件

[root@backup ~]# mkdir /server/scripts -p

[root@backup ~]# cat /server/scripts/check_client_data.sh

#!/bin/bash

#1.定义变量

PATH=/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/root/bin

SRC=/backup

DATE=$(date +%F)

 

#1.使用md5进行校验，并保存校验的结果

md5sum -c $SRC/*_$DATE/flag_$DATE > $SRC/result_$DATE

 

#2.将保存的结果文件发送给管理员

mail -s "Rsync Backup $DATE" 572891887@qq.com <$SRC/result_$DATE

 

#3.保留最近180天的数据

find $SRC/ -type d -mtime +180|xargs rm -rf

 

 

最后进行整体测试：

1.删除客户端的整个目录

2.删除服务端/backup下面的所有内容

3.编写定时任务测试【在修改客户端每天凌晨1点，服务端每天凌晨5点】

 

 

如何扩展备份多台服务器：

[root@web01 ~]# rsync -avz root@172.16.1.31:/server /

[root@web01 ~]# sh /server/scripts/client_push_data.sh