大家都知道數據非常重要的，需要經常備份，如果備份了，但無法恢復還原，那就證明你備份的很失敗，所有當我們備份了數據需要檢查是否備份完整，是否可用可恢復。以下為一個企業案例： 某公司里有一臺Web伺服器，裡面的數據很重要，但是如果硬碟壞了，數據就會丟失，現在領導要求你把數據在其他機器上做一個周期性定時備 ...
大家都知道數據非常重要的，需要經常備份，如果備份了，但無法恢復還原，那就證明你備份的很失敗，所有當我們備份了數據需要檢查是否備份完整，是否可用可恢復。以下為一個企業案例：
某公司里有一臺Web伺服器，裡面的數據很重要，但是如果硬碟壞了，數據就會丟失，現在領導要求你把數據在其他機器上做一個周期性定時備份。要求如下：
每天晚上00點整在web伺服器上打包備份系統配置文件、網站主程式及訪問日誌，並通過rsync命令推送到伺服器上備份保留（備份思路可以是在本地按日期打包，然後再推送到備份伺服器上）
具體要求如下：
1、web伺服器和備份伺服器的備份目錄必須為/backup。
2、系統配置文件包括：
a) 定時任務服務的配置文件（/var/spool/cron/root）
b) 開機自啟動的配置文件（/etc/rc.local）
c) 日常腳本的目錄（/server/scripts）
d) 防火牆iptables的配置文件（/etc/sysconfig/iptables）
3、web伺服器站點目錄假定位（var/www/html）。
4、web伺服器本地僅保留7天內的備份數據。
5、備份伺服器上/backup/下僅保留180天的數據，180天前的清除。
6、備份伺服器上檢查每天從web伺服器上備份的數據結果是否正常，並將每天的備份結果23點整發給管理員郵箱。
具體規劃配置如下：
web伺服器IP：192.168.43.119 備份(backup)伺服器IP：192.168.43.200
第一步：備份伺服器上部署rsync服務，並且在web伺服器上測試是否可以推送成功。
服務端配置：（backup）
[root@backup /]# vi /etc/rsyncd.conf
[root@backup /]# cat /etc/rsyncd.conf
#sync server
#created by bqh
##rsyncd.conf start##
uid = rsync
gid = rsync
use chroot = no
max connections = 2000
timeout = 600
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsync.lock
log file = /var/log/rsyncd.log
ignore errors
read only = false
list = false
hosts allow = 192.168.43.0/24
hosts deny = 0.0.0.0/32
auth users = rsync_backup
secrets file = /etc/rsync.password
##############################################
[backup]
comment = www.bqh.com
path = /backup
[root@backup /]# useradd rsync -s /sbin/nologin -M
[root@backup /]# id rsync
uid=501(rsync) gid=501(rsync) 組=501(rsync)
[root@backup /]# mkdir -p /backup
[root@backup /]# chown -R rsync /backup
[root@backup /]# echo "rsync_backup:123" >/etc/rsync.password
[root@backup /]# chmod 600 /etc/rsync.password
[root@backup /]# rsync --daemon
[root@backup /]# ps -ef|grep rsync|grep -v grep
root 1766 1 0 21:10 ? 00:00:00 rsync --daemon
[root@backup /]# lsof -i :873
COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME
rsync 1766 root 3u IPv4 17093 0t0 TCP *:rsync (LISTEN)
rsync 1766 root 5u IPv6 17094 0t0 TCP *:rsync (LISTEN)
[root@backup /]#
客戶端配置： （ web伺服器端）
[root@lamp02 /]# mkdir /backup
[root@lamp02 /]# touch /backup/1.txt
[root@lamp02 /]# echo "123" >/etc/rsync.password
[root@lamp02 /]# chmod 600 /etc/rsync.password
[root@lamp02 /]# rsync -avz /backup/1.txt [email protected]::backup --password-fi
le=/etc/rsync.password
sending incremental file list
1.txt
sent 62 bytes received 27 bytes 178.00 bytes/sec
total size is 0 speedup is 0.00
[root@lamp02 /]#
在備份伺服器上查看是否推送成功：
第二步：web伺服器本地實現打包：（配置文件，程式，日誌分開打包）
tar zcvf /backup/conf_$(date +%F).tar.gz /var/spool/cron/root /etc/rc.local /etc/sysconfig/iptables /server/scripts
tar zcvf /backup/www_$(date +%F).tar.gz /var/html/www/
tar zcvf /backup/log_$(date +%F).tar.gz /app/logs/
我們可以寫一個備份推送腳本backup.sh
#!/bin/sh
#defined variable
IP=$(ifconfig eth0|awk -F '[ :]+' 'NR==2 {print $4}')
Path="/backup/$IP"
[ ! -d $Path ] && mkdir $Path -p
#backup
tar zcf $Path/conf_$(date +%F).tar.gz /var/spool/cron/root /etc/rc.local /etc/sysconfig/ipt
ables /server/scriptstar zcf $Path/www_$(date +%F).tar.gz /var/html/www/
tar zcf $Path/log_$(date +%F).tar.gz /app/logs/
#to backup server
rsync -avz /backup/ [email protected]::backup --password-file=/etc/rsync.password
#local del
find /backup -type f -name "*.tar.gz" -mtime +7|xargs rm -f
我們在備份（backup）伺服器上查看執行腳本是否成功推送：
第三步：web伺服器和backup伺服器分別配置定時任務
web:
crontab –e
##web to backup##
00 00 * * * /bin/sh /server/scripts/backup.sh &>/dev/null
crontab -l
backup:
vi del.sh
find /backup -type f -name "*.tar.gz" -mtime +180|xargs rm -f
/bin/sh /server/scripts/del.sh
crontab –e
00 00 * * * /bin/sh /server/scripts/del.sh >/dev/null 2&1
crontab -l
第四步：檢查備份伺服器備份結果是否正常（採用flag+數據包md5sum指紋）
web伺服器腳本修改如下：
#!/bin/sh
#defined variable
IP=$(ifconfig eth0|awk -F '[ :]+' 'NR==2 {print $4}')
Path="/backup/$IP"
[ ! -d $Path ] && mkdir $Path -p
#backup
tar zcf $Path/conf_$(date +%F).tar.gz /var/spool/cron/root /etc/rc.local /etc/sysconfig/ipt
ables /server/scripts &&\tar zcf $Path/www_$(date +%F).tar.gz /var/html/www/ &&\
tar zcf $Path/log_$(date +%F).tar.gz /app/logs/ &&\
##flag+md5sum
find /backup/ -type f -name "*$(date +%F).tar.gz"|xargs md5sum >>$Path/flag_$(date +%F)
#to backup server
rsync -avz /backup/ [email protected]::backup --password-file=/etc/rsync.password
#local del
find /backup -type f -name "*.tar.gz" -mtime +7|xargs rm -f
在backup伺服器上查看是否推送過來：
md5sum –c 需要檢查的文件，ok為成功，failed為失敗。
註意：如果備份伺服器接收的包里沒有flagmd5文件也會報錯。
所以我們在工作中，只需要過濾flag文件是否有FAILED或者失敗字元就可以了。
md5sum –c 檢查文件 |grep “失敗”
可以把檢查文件是否備份成功（完整備份）命令寫入腳本控制。
#!/bin/sh
find /backup -type f -name "flag_$(date +%F)"|xargs md5sum -c|grep "失敗" >/opt/mail_bqh_$(
dae +%F).txt
mail -s "$(date +%U%T) back" [email protected] </opt/mail_bqh_$(date +%F).txt
cat /opt/mail_bqh_.txt
接下來我們寫定時任務檢查備份結果併發送至qq郵箱：
00 23 * * * /bin/sh /server/scripts/chback.sh >/dev/null 2&1
第五步：整體備份測試
詳細略….
用date –s 修改時間測試
