故事背景:我們公司是做新零售的,需要對發佈的每台機器進行文件的同步更新,所以我這裡做了一個小小的調研 技術調研:linux之間同步文件有兩種方式rsync與scp。 sync和scp在文件夾均不存在時,執行時間相差不大,但是文件夾存在的情況下差異很大。原因是scp是複製:若mas2文件不存在則新建, ...
故事背景:我們公司是做新零售的,需要對發佈的每台機器進行文件的同步更新,所以我這裡做了一個小小的調研
技術調研:linux之間同步文件有兩種方式rsync與scp。
sync和scp在文件夾均不存在時,執行時間相差不大,但是文件夾存在的情況下差異很大。原因是scp是複製:若mas2文件不存在則新建,若存在則覆蓋,若mas2上有而Dashboard主機沒有,則不改變。可以理解為scp為“複製”。而rsync則在文件在存在於兩主機時,比較兩文件是夠相同,相同的話,就什麼都不做,若存在差異就直接更新。
簡單的說rsync只對差異文件做更新。
#### Rsync介紹
rsync是一款開源的備份工具,可以再不同主機之間進行同步,實現全量和增量備份,適用於集中備份或異地備份等應用場景。
rsync監聽埠:873
rsync運行模式:C/S
#### Rsync傳輸模式
- 本地模式
本地傳輸,主機內部進行數據傳輸(類似於cp命令)
- 遠程模式
遠程通道傳輸,通過ssh通道傳輸數據(類似scp命令)
- 守護進程模式
守護進程傳輸,不使用系統用戶進行傳輸(安全性高)
#### Rsync命令參數
-a 複製各種類型的文件(相當於-tropgDl)
-v 顯示傳輸過程
-z 傳輸時進行壓縮
-r 遞歸傳輸目錄和子目錄
-t 保持文件時間不變
-o 保持文件屬主信息
-g 保持文件屬組信息
-p 保持文件許可權
-l 保持軟連接
-P 顯示同步進度及過程
-D 保持設備文件信息
--bwlimit=100 限速傳輸
--delete 源和目標數據保持一致
--partial 斷點續傳
#### 安裝rsync
`sudo apt-get install`一般機器好像都有
#### 服務端
1. 創建rsyncd.conf配置文件,sudo vim /etc/rsyncd.conf
`uid = ai #運行進程用戶
gid = ai #運行用戶組
port = 873 #監聽埠
fake super = yes #無需rsync以root身份運行,允許接受數據
use chroot = no #禁錮推送數據至某個目錄
max connections = 0 #最大連接數
timeout = 600 #超時時間
log file = /var/log/rsyncd.log #定義日誌文件路徑
#####################################
[backup] #模塊名稱
path = /backup #定義接收備份數據目錄
ignore errors #忽略錯誤信息
read only = false #對備份數據可讀寫
list = false #不允許查看模塊信息
auth users = test #定義虛擬用戶,認證使用
secrets file = /etc/rsync.passwd #認證密碼路徑`
2. 創建rsync.passwd
`echo "test:123456" > /etc/rsync.passwd
chmod 600 /etc/rsync.passwd 不然傳輸會報錯`
3. 啟動rsync
`rsync --daemon`
#### 客戶端
1. 創建rsync.passwd
`echo "123456" > /etc/rsync.password
chmod 600 /etc/rsync.password 不然傳輸會報錯`
#### 實例(拉取)
`rsync -avz [email protected]::backup --password-file=/etc/rsyncd.password /tmp/backup/`
#### 定時拉取
把拉取指令配置在客戶端crontab即可