rsync---全网备份---实现步骤
具体要求如下:
1)所有服务器的备份目录必须都为/backup
2)要备份的系统配置文件包括但不限于:
a.定时任务服务的配置文件(/var/spool/cron/root)(适合web和nfs服务器)
b.开机自启动的配置文件(/etc/rc.local)(适合web和nfs服务器)
c.日常脚本的目录(/server/scripts)
d.防火墙iptables的配置文件(/etc/sysconfig/iptables)
e..............
3)Web服务器站点目录假定为(/var/html/www)
4)Web服务器A访问日志路径假定为(/app/logs)
5)Web服务器保留打包后的7天的备份数据即可(本地留存不能多于7天,因为太多硬盘会满)
6)备份服务器上,保留每周一的所有数据副本,其它要保留6个月的数据副本。
7)备份服务器上要按照备份数据服务器的内网IP为目录保存备份,备份的文件按照时间名字保存
8)*需要确保备份的数据尽量完整正确,在备份服务器上对备份的数据进行检查,把备份的成功及失败结果信息发 给系统管理员邮箱中
PS1="\[\e[32;1m\][\u@\h \W]\\$ \[\e[0m\]" >>/etc/bashrc ##小功能优化sed -i.bak 's@#UseDNS yes@UseDNSno@g;s@^GSSAPIAuthentication yes@GSSAPIAuthentication no@g'/etc/ssh/sshd_config/etc/init.d/sshd reload
一、服务端配置
01、查看服务器上有无rsync软件
rpm -qa rsync
02、开始配置
vim /etc/rsyncd.confuid = rsyncgid = rsyncuse chroot = nomax connections = 200timeout = 300pid file = /var/run/rsyncd.pidlock file = /var/run/rsync.locklog file = /var/log/rsyncd.logignore errorsread only = nolist = nohosts allow =10.0.0.0/24 ##外网 -- 测试 用于没有准备第二块网卡auth users = rsync_backupsecrets file =/etc/rsync.password[backup]path = /backup
03、搭建rsync服务器需要的配置
①useadd -s /sbin/nologin -M rsync②echo "rsync_backup:123456" >>/etc/rsync.password③chmod 600 /etc/rsync.password④mkdir -p /backup⑤chown -R rsync.rsync /backup
04、启动rsync-------####xinetd
ps -ef |grep rsyncrsync --daemonps -ef |grep rsync
05、开机自启动rsync服务
echo "rsync --daemon" >>/etc/rc.local
二、客户端配置
01、创建密码文件
vim /etc/rync.password123456说明:客户端存放密码的文件路径最后与服务端一致,密码必须一致
02、更改密码文件权限
chmod 600 /etc/rync.passwordll /etc/rync.password
03、测试
rsync -avzP /etc/services rsync_backup@10.0.0.1::backup --password-file=/etc/rsync.password
三、客户端备份脚本的编写
温馨注释:在远程连接中,另外克隆一个窗口,进行操作,把测试好的命令复制到要写的脚本文件当中;
01、创建/backup备份目录
mkdir -p /backup/$(hostname -I |awk '{print $1}')
02、压缩备份数据到/backup目录中
cd / && tar zcfh /backup/$(hostname -I |awk '{print $1}')/\ifconfig_backup_$(date +%F_week0%w).tar.gz var/spool/cron etc/rc.local \server/scripts etc/sysconfig/iptables
03、推送备份目录数据到rsync服务器--推送的必须能让rsync服务端知道是谁进行推送的
rsync -az /backup/$(hostname -I |awk '{print $1}') rsync_backup@10.0.0.1::backup \--password-file=/etc/rsync.password
04、删除7天以前的备份数据
find /backup/$(hostname -I) -type f -mtime +7 |xargs rm -f
05、对备份的数据进行验证,加上相应的指纹信息
find /backup/$(hostname -I |awk '{print $1}')/ \-type f -name "*$(date +%F_week0%name "*$(date +%F_week0%w).tar.gz" \|xargs md5sum >/backup/$(hostname -I |awk '{print $1}')/falg_$(date +%F_week0%w).txt
06、脚本编写
#! /bin/bash
IP=$(hostname -I |awk '{print $1}')
mkdir -p /backup/$IP &&\
#compress
cd / && tar zcfh /backup/$IP/ifconfig_backup_$(date +%F_week0%w).tar.gz var/spool/cron etc/rc.local server/scripts etc/sysconfig/iptables &&\
#check falg
find /backup/$IP/ -type f -name "*$(date +%F_week0%w).tar.gz" |xargs md5sum >/backup/$IP/falg_$(date +%F_week0%w).txt
#push info
rsync -az /backup/$IP rsync_backup@10.0.0.1::backup --password-file=/etc/rsync.password
#clear info
find /backup/$IP/ -type f -mtime +7 |xargs rm -f
三、客户端编写定时任务
crontab -e#crontab-id:02-backup date00 00 * * * /bin/bash /server/scripts/backup.sh &>/dev/null
四、服务器端脚本编写
01、验证传输数据完整性
cat falg_2017-05-06_week06.txtmd5sum -c falg_2017-05-06_week06.txt
02、检验当天数据的完整性
[root@backup 10.0.0.2]# md5sum -c falg_$(date +%F_week0%w).txt
03、检验优化
[root@backup 10.0.0.2]# find /backup/ -type f -name "*$(date +%F_week0%w).txt"
04、把脚本推送到web服务器上
[root@nfs01 ~]# rsync -avzP /server/scripts/backup.sh root@10.0.0.3:/server/scripts/
05、web服务器推送到rsync服务器上
[root@web01 ~]# mkdir -p /app/logs /var/html/www[root@web01 ~]# sh /server/scripts/backup.sh
06、打包
cd / && tar zcfh /backup/$IP/www_backup_$(date +%F_week0%w).tar.gz var/html/www &&\cd / && tar zcfh /backup/$IP/app_log_backup_$(date +%F_week0%w).tar.gz app/logs
07、邮箱配置
set from=
set smtp=smtp.qq.com
set smtp-auth-user=
set smtp-auth-password=
set smtp-auth=login
set smtp-use-starttls
set ssl-verify=ignore
set nss-config-dir=/etc/pki/nssdb/ &>/dev/null
set from=17600201416@163.com smtp=smtp.163.com
set smtp-auth-user=17600201416 smtp-auth-password=sangfor123 smtp-auth=login
08、rsync服务器上的脚本编写
vim /server/scripts/server_backup.sh
find /backup -type f -name "*$(date +%F_week0%w).txt" |xargs md5sum -c >/tmp/mails.txt
mail -s "check data" xxxxxx@qq.com
###clear info
find /backup -type f -mtime +180 ! -name "*week01.tar.gz" |xargs rm -f
09、编写定时任务
crontab -e
00 06 * * * /bin/bash /server/scripts/server_backup.sh &>/dev/null