rsync備份服務器數(shù)據(jù)最新實戰(zhàn)指南
項目描述
某公司里有一臺Web服務器,里面的數(shù)據(jù)很重要,但是如果硬盤壞了數(shù)據(jù)就會丟失,現(xiàn)在領導要求把數(shù)據(jù)做備份,這樣Web服務器數(shù)據(jù)丟失在可以進行恢復,要求如下:
每天晚上00點整在Web服務器A上打包備份系統(tǒng)配置文件、網站程序目錄及訪問日志并通過rsync命令推送到服務器B上備份保留
(備份思路可以是先在本地按日期打包,然后再推到備份服務器B上)。
已知2臺服務器主機名分別為master,slave,主機信息建下表。
| 服務器說明 | IP | OS | 主機名稱 |
|---|---|---|---|
| Nginx web服務器 | 192.168.3.1 | CentOS 7.6 | master |
| Rsync備份服務器 | 192.168.3.2 | CentOS 7.6 | slave |
1、備份要求
每天晚上00點整在Web服務器上打包備份系統(tǒng)配置文件、網站程序目錄及訪問日志并通過rsync命令推送到備份服務器上備份保留。
2、備份思路
可以是先在本地按日期打包,然后再推送到備份服務器上;
項目備份需求
1)所有服務器的備份目錄必須都為/backup。
2)要備份的系統(tǒng)配置文件包括但不限于:
- 定時任務服務的配置文件(/var/spool/cron/root)
- 開機自啟動的配置文件(/etc/rc.local)
- 日常腳本的目錄 (/server/scripts)
3)Web服務器站點目錄假定為/var/www/html/,如果沒有,可以先模擬創(chuàng)建。
4)Web服務器訪問日志路徑假定為/app/logs,如果沒有,可以先模擬創(chuàng)建。
5)Web服務器本地保留打包后的7天備份數(shù)據(jù)即可(本地留存不能多于7天,因為數(shù)據(jù)太多硬盤會滿)。
6)備份服務器上,保留最近7天所有備份數(shù)據(jù),保留6個月內每周一的所有數(shù)據(jù)副本。
7)備份服務器上,要按照備份數(shù)據(jù)服務器內網IP為目錄保存?zhèn)浞?,備份的文件按照時間、名稱保存。
8)需要確保備份的數(shù)據(jù)盡量完整準確,在備份服務器上對備份的數(shù)據(jù)是否完整進行檢查。
9)備份服務器上,每天早晨8:00把備份成功或失敗結果信息發(fā)送到系統(tǒng)管理員郵箱里。
| 服務器說明 | 備份目錄 | 目錄說明 | 備注 |
|---|---|---|---|
| all server | /backup | 備份目錄 | 統(tǒng)一服務器本地備份目錄,便于管理 |
| all server | /var/spool/cron/root | 定時任務服務配置文件 | |
| all server | /etc/rc.local | 開機自啟動配置文件 | |
| all server | /server/scripts | 日常腳本目錄 | 統(tǒng)一服務器本地腳本目錄,便于管理 |
| Web server | /var/www/html | web服務器站點目錄 | mkdir -p /var/www/html |
| Web server | /app/logs | web服務器訪問日志路徑 | mkdir -p /app/logs |
項目實施
任務一:服務器創(chuàng)建
初始化2臺服務器并將其作為備份方案測試服務器
按照規(guī)劃,最小化部署系統(tǒng),關閉防火墻,禁用SELinux,確保能夠聯(lián)網。
任務二:服務器部署
(1)搭建備份服務器
- rsync服務器搭建部署。
- 開發(fā)腳本實現(xiàn)校驗、刪除、報警。
- 配置實時任務每天6點實時執(zhí)行。
(2)Web服務器搭建部署
- 驗證Rsync服務能否推送成功。
- 開發(fā)腳本實現(xiàn)打包備份、推送、校驗、刪除。
- 配置定時任務每天0點定時推送(0時是時間的一個分割點)。
1、在備份服務器上部署Rsync服務
# 1、安裝rsync
[root@slave ~]# yum install -y rsync
# 2、配置文件
[root@slave ~]# vim /etc/rsyncd.conf
uid = rsync # 用戶
gid = rsync # 組
use chroot = no # 程序安全設置
max connections = 200 # 客戶端連接數(shù)
timeout = 300 # 超時時間
pid file = /var/run/rsyncd.pid # 進程號文件位置
lock file = /var/run/rsync.lock # 進程鎖
log file = /var/log/rsyncd.log # 日志文件
fake super = yes # 無需rsync以root身份運行,允許接受數(shù)據(jù)
[backup]
path = /backup # 目錄
ignore errors # 有錯誤時忽略
read only = false # 可讀可寫
list = false # 阻止遠程列表(不讓通過遠程方式看服務端有啥)
hosts allow = 192.168,3.0/24 # 允許IP
hosts deny = 0.0.0.0/32 # 禁止IP
auth users = rsync_backup # 虛擬用戶
secrets file = /etc/rsync.password # 存放用戶和密碼的文件
# 3、創(chuàng)建rsync賬戶及共享目錄并修改目錄屬主為rsync
[root@slave ~]# useradd -M -s /sbin/nologin rsync
[root@slave ~]# mkdir /backup
[root@slave ~]# chown -R rsync /backup
# 4、啟動服務
[root@slave ~]# systemctl enable --now rsyncd
[root@slave ~]# ps -ef | grep rsync
# 5、創(chuàng)建rsync虛擬賬戶名和密碼,并賦予密碼文件600權限
[root@slave ~]# echo "rsync_backup:123456" > /etc/rsync.password
[root@slave ~]# chmod 600 /etc/rsync.password2、客戶端本地開發(fā)打腳本
Nginx webserver本地打包備份腳本實現(xiàn)。
1)Web01服務器待備份信息。
- /var/spool/cron/root、/etc/rc.local、/server/scripts
- /var/html/www、/app/logs
[root@master ~]# mkdir /var/html/www -p
[root@master ~]# touch /var/html/www/{1..3}.txt
[root@master ~]# mkdir /app/logs -p
[root@master ~]# touch /app/logs/{a..c}.log
[root@master ~]# echo "123456" > /etc/rsync.password
[root@master ~]# chmod 600 /etc/rsync.password
[root@master ~]# tree /var/html/www
/var/html/www
├── 1.txt
├── 2.txt
└── 3.txt
0 directories, 3 files
[root@master ~]# tree /app/logs/
/app/logs/
├── a.log
├── b.log
└── c.log
0 directories, 3 files
# 2、編寫備份腳本
[root@master scripts]# vim backup.sh
#!/bin/bash
Date=$(date +%F) # 定義時間方式
Host_IP=192.168.3.1 # 可以有多種方法,能獲取IP即可
Backup_Dir="/backup/" # 本地備份路徑
Backup_Server_IP=192.168.3.2 # 備份服務器的IP
[ ! -d $Backup_Dir/$Host_IP ] && mkdir -p $Backup_Dir/$Host_IP # 創(chuàng)建指定目錄和IP的目錄
echo ${Backup_Dir}${Host_IP}/sys_file_bak_${Date}_tar.gz
# 按要求打包備份所有本地重要文件
cd / &&\
tar cf ${Backup_Dir}${Host_IP}/sys_file_bak_${Date}_tar.gz var/spool/cron/root &&\
tar rf ${Backup_Dir}${Host_IP}/sys_file_bak_${Date}_tar.gz etc/rc.d/rc.local &&\
tar rf ${Backup_Dir}${Host_IP}/sys_file_bak_${Date}_tar.gz server/scripts/ &&\
tar zcf $Backup_Dir$Host_IP/www_${Date}_tar.gz var/html/www/ &&\
tar zcf $Backup_Dir$Host_IP/app_logs_${Date}_tar.gz app/logs/ &&\
# 提示:在NFS服務器客戶端上不用編寫壓縮Web服務器的程序與日志目錄
# 給所有備份的壓縮文件建立指紋,放入指紋庫flag,后面會驗證完整性
find ${Backup_Dir:-/tmp} -type f -name "*${Date}_tar.gz" |xargs md5sum >$Backup_Dir/$Host_IP/${Date}.flag
# 把備份推送到備份服務器
rsync -az $Backup_Dir rsync_backup@${Backup_Server_IP}::backup --password-file=/etc/rsync.password
# 刪除7天以前的所有本地備份數(shù)據(jù)
find ${Backup_Dir:-/tmp} -type f -name "*.tar.gz" -a -name "*flag*" -mtime +7|xargs rm -f3、配置定時任務
1)編輯定時任務,實現(xiàn)每天00:00定時備份本地數(shù)據(jù),并推送到備份數(shù)據(jù)Rsync服務器上。
[root@master scripts]# crontab -e ---編輯定時任務,添加如下內容
#crond-od-002:data backup
00 00 * * * /bin/sh /server/scripts/backup.sh >/dev/null 2>&1
2)編輯服務端刪除文件腳本文件,刪除180天前的所有備份數(shù)據(jù),但保存每周一的。
[root@slave ~]# mkdir -p /server/scripts
[root@slave ~]# cd /server/scripts/
[root@slave scripts]# vim /server/scripts/del_bak_data.sh
#!/bin/bash
Backup_Dir="/backup/"
#刪除7天前的壓縮包和flag文件,但是每周一的不刪
find ${Backup_Dir:-/tmp} -type f -name "*tar.gz*" ! -name "*Week01*" -o -name "*flag*" -mtime +7|xargs rm -f
#刪除180天前的所有壓縮包和flag文件
find ${Backup_Dir:-/tmp} -type f -name "*tar.gz*" -name "*flag*" -mtime +180|xargs rm -f
3)配置定時任務,實現(xiàn)服務端180天前數(shù)據(jù)自動刪除。
[root@slave scripts]# crontab -e
#crond-id-002:data backup
00 00 * * * /bin/sh /server/scripts/del_bak_data.sh >/dev/null 2>&14、數(shù)據(jù)傳輸完整性驗證與監(jiān)控告警
服務端針對客戶端備份時的md5指紋數(shù)據(jù),利用MD5命令進行驗證,完成數(shù)據(jù)傳輸過程完整性驗證。
[root@slave scripts]# vim send_mail.sh
#!/bin/bash
Date=$(date +%F)
Backup_Dir="/backup/"
Check_Log="/tmp/bak.log_$(date +%F)" # 定時檢查備份結果的文件
Admin_Mail=esen_monitor@163.com # 管理員郵箱,建議使用163
find $Backup_Dir -type f -name "${Date}.flag"|xargs md5sum -c >>$Check_Log
if [ -n "cat $Check_Log" ]
then
mail -s "$Date backup data info" $Admin_Mail <$Check_Log
else
echo "$Date backup data error,pls check it." >$Check_Log # 如果結果文件不存在,日志信息變化,報錯
mail -s "$Date backup data info" $Admin_Mail <$Check_Log
fi
cp $Check_Log{,.ori} && >$Check_Log5、配置mail使用外部SMTP發(fā)郵件
安裝mailx [root@slave ~]# yum install -y mailx 編輯/etc/mail.rc配置文件 [root@slave ~]# vim /etc/mail.rc # 在最后一行加入如下內容 set from=xxxxx@163.com set smtp=smtps://smtp.163.com:465 set smtp-auth-user=xxxxx@163.com set smtp-auth-password=***** ###該密碼是在網易郵箱中申請的第三方客戶端密碼,不是賬戶的登陸密碼。 set smtp-auth=login set ssl-verify=ignore set nss-config-dir=/root/.certs
6、最后進行郵件測試

到此這篇關于rsync備份服務器數(shù)據(jù)最新實戰(zhàn)指南的文章就介紹到這了,更多相關rsync備份服務器數(shù)據(jù)內容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關文章希望大家以后多多支持腳本之家!
相關文章
WINPE3.0集成RAID陣列卡驅動的實現(xiàn)方法
這篇文章主要介紹了WINPE3.0集成RAID陣列卡驅動的實現(xiàn)方法,需要的朋友可以參考下2016-07-07
IBM X346 板載 Raid1 功能啟用及Win2003系統(tǒng)安裝小記
有兩臺IBM X346 m/t-8840-cdr 服務器,板載raid控制器版本號為v.4.30.9,硬盤位0,1各裝一塊146G IBM 原裝SCSI硬盤。2011-04-04
如何通過Apache Bench實現(xiàn)web壓力測試
這篇文章主要介紹了如何通過Apache Bench實現(xiàn)web壓力測試,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下2020-05-05
基于epoll實現(xiàn) Reactor服務器的詳細過程
在我們調用epoll_create的時候會創(chuàng)建出epoll模型,這個模型也是利用文件描述類似文件系統(tǒng)的方式控制該結構,這篇文章主要介紹了基于epoll實現(xiàn) Reactor服務器的詳細過程,需要的朋友可以參考下2023-12-12
ISAPI-REWRITE偽靜態(tài)規(guī)則寫法以及說明
ISAPI-REWRITE偽靜態(tài)規(guī)則寫法以及說明,很多朋友對rewrite的規(guī)則不太熟悉,這里介紹下,方便需要的朋友2012-06-06
Python和c++代碼實現(xiàn)高性能異構分布式并行互聯(lián)系統(tǒng)
這篇文章主要介紹了Python和c++代碼實現(xiàn)高性能異構分布式并行互聯(lián)系統(tǒng),包含通信模塊、任務調度模塊、數(shù)據(jù)管理模塊、負載均衡模塊、故障容錯模塊、性能優(yōu)化模塊、日志與監(jiān)控模塊,需要的朋友可以參考下2024-08-08

