網站備份到百度雲

来源:http://www.cnblogs.com/chriscabin/archive/2016/07/07/5649010.html
-Advertisement-
Play Games

藉助於開源百度雲客戶端`bypy`實現將網站備份的數據上傳至網盤存儲。 ...


原文鏈接: 克裡斯的小屋——網站備份到百度雲

引言

網站備份真的很重要,前段時間已經被坑過一次了,幸好數據沒有完全丟,勉強恢復了,雖然丟失了幾篇文章。之前一直是每隔幾天手動備份一下重要的數據,然後下載到本地。但是有時候會忘記備份這件事,所以,自動進行備份就很有必要了。當然,要解決自動備份問題比較簡單,些許腳本就能解決問題。問題是,總是把備份數據下載到本地,實在是比較麻煩(主要是浪費校園網流量!)。所以,本文就結合開源的bypy百度雲客戶端,實現每天凌晨自動備份數據後同步到百度網盤的功能!

準備工作

  • 安裝requests模塊:bypy依賴這個模塊:sudo pip install requests
  • 安裝bypy百度雲客戶端:sudo pip install bypy
  • 配置客戶端:
  • 在終端中輸入bypy info,根據提示打開鏈接,並將授權碼paste回終端,然後回車;
  • 使用bypy list測試查看網盤文件:實際的查看的是我的應用數據/bypy目錄

root@localhost:~# bypy list Encoding for StdOut: ANSI_X3.4-1968 /apps/bypy ($t $f $s $m $d): D site-backup 0 2016-07-02, 02:51:14

腳本之旅

  • 在編寫自動備份腳本前,需要知道究竟哪些目錄比較重要,值得上傳。此外,還應當瞭解mysql資料庫備份的方法。好在這些都比較簡單!
  • 我自己伺服器上主要需要備份的目錄有以下幾個:
  • wordpress:這個是博客網站的文件夾,內容當然很重要,尤其是很多的媒體資源!
  • apache2:這個是apache2伺服器配置目錄,這個也很重要。
  • custom_scripts:這個目錄是平時會更新的腳本合集,自然也應當定期備份咯。
  • shadowsocks:這個目錄存放的是shadowsocks相關的配置文件以及監控腳本,其實不用每次都備份,不過不太大,所以順帶每天備份下好啦!
  • 除了要備份的目錄外,還有wordpress資料庫需要備份,備份的命令非常簡單:mysqldump -uroot -ppassword database_name > data.sql
  • 在備份完了後,只需要使用bypy將備份好的數據上傳到百度雲即可。
  • 以下是為此編寫的腳本,可以自動完成指定的備份和上傳數據的任務:
#!/bin/bash

# Directories you want to backup
back_dirs="/root/custom_scripts /root/shadowsocks /var/www/wordpress /etc/apache2"

echo "========================================================================"
echo "Backup begin:" `date "+%Y-%m-%d %H:%M:%S"`

# Where to put the backup data.
dest_dir="/root/site-backup"

date_postfix=`date "+%Y%m%d"`

# Step A: create directory for backups
echo -n "Prepare to bakcup..."
if [ ! -d $dest_dir ]; then
    /bin/mkdir -p $dest_dir
else
    /bin/rm -r $dest_dir
    /bin/mkdir -p $dest_dir
fi
echo "done!"

# Step B: stop website
echo -n "Stop web server apache..."
/etc/init.d/apache2 stop >/dev/null
echo "done!"

# Step C: backup each directories we've got
for dir in $back_dirs
do
    name=${dir##*/}
    echo -n "Backup directory: $dir, please wait..."
    archive_name="$name-$date_postfix".tar.gz
    /bin/tar -czpf $dest_dir/$archive_name $dir  2> /dev/null
    echo "done!"
done

# Step D: backup database
echo -n "Backup database...."
/usr/bin/mysqldump -uuser -ppassword wordpress > $dest_dir/"wordpress_"$date_postfix.sql
echo "done!"

# Step E: restart website
echo -n "Start web server apache..."
/etc/init.d/apache2 start >/dev/null
echo "done!"

# Step F: upload backup data to Baidu Cloud
echo "Upload backup data to Baidu Cloud..."
remote_dir="site-backup/$date_postfix"
/usr/local/bin/bypy mkdir $remote_dir
/usr/local/bin/bypy upload $dest_dir $remote_dir

# Step G: clean backups.
echo -n "Clean backups..."
/bin/rm -r $dest_dir
echo "done!"

echo "Backup complete:" `date "+%Y-%m-%d %H:%M:%S"`
echo ""

exit 0

測試腳本

  • 為了方便起見,首先給腳本賦予可執行許可權,然後鏈接到/usr/local/bin/site-backup上,這樣就可以在任何目錄下啟動備份命令了!
  • 以下是測試執行的效果截圖:
  • 以下是上傳到百度雲中的備份文件截圖:

定時備份

  • 將任務添加到crontab即可(需要註意的是伺服器與國內有12個小時的時差存在):
# at 4 a.m every day
0 16 * * * /usr/local/bin/site-backup >> /var/log/site-backup.log

尚待改進

  • 由於當前網站備份出來的數據並非很大,所以採用了比較傳統的完全備份再上傳的方法;後期可以改進成每隔幾天做一次完整備份,然後每天做增量備份的方式;
  • 並不需要在百度網盤中保存太多的備份數據,後期需要增加新的功能,用於刪除太舊的備份數據,只保留最近一周或者若幹天的備份即可。

參考


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • Mongodb 簡單入門(個人學習小記) 1、安裝並註冊成服務:(示例) E:\DevTools\mongodb3.2.6\bin>mongod.exe --bind_ip 127.0.0.1 --logpath "E:\mongodbDataBase\accountValueBase\log\lo ...
  • 1,執行完全備份 這是直接備份到g盤的情況 backup database 資料庫名 to disk='g:\database.bak' 這是備份到備份設備的情況,with init是初始化,也就是直接覆蓋 bakup database 資料庫名 to mybackup with init 2,執行 ...
  • 我會用幾篇博客總結一下在Linux中進程之間通信的幾種方法,我會把這個開頭的摘要部分在這個系列的每篇博客中都打出來 進程之間通信的方式 管道 消息隊列 信號 信號量 共用存儲區 套接字(socket) 進程間通信(三)—信號量傳送門:http://www.cnblogs.com/lenomirei/ ...
  • 參考博客“Linux啟動文件、設置環境變數的位置”(http://www.2cto.com/os/201305/208251.html) 在不可取的root許可權的時候可以選擇編輯~/.bashrc文件,加入相應的配置代碼,這樣當登錄時以及每次打開新的shell時,該文件都被讀取。 而在可取的root ...
  • 一、下載軟體包 1、下載地址 二、安裝 1、java 2、Android sdk 查看源 根據需要進行安裝 如果google很慢,可以改hosts 3、gradle 加入環境變數 三、編譯測試 參考網址 http://askubuntu.com/questions/464755/how-to-ins ...
  • system函數對返回值的處理,涉及3個階段: 階段1:創建子進程等準備工作。如果失敗,返回-1。 階段2:調用/bin/sh拉起shell腳本,如果拉起失敗或者shell未正常執行結束(參見備註1),原因值被寫入到status的低8~15比特位中。system的man中只說明瞭會寫了127這個值, ...
  • 一. 準備工作 1. 下載ubuntu鏡像文件:ubuntu-12.04.3-desktop-amd64.iso(4G及以上記憶體建議64位),註意這個amd並不是指amd晶元。 2. 下載硬碟分區工具:Acronis Disk Director 11 3. 下載系統引導軟體:EasyBCD2.2 二 ...
  • 我會用幾篇博客總結一下在Linux中進程之間通信的幾種方法,我會把這個開頭的摘要部分在這個系列的每篇博客中都打出來 進程之間通信的方式 管道 消息隊列 信號 信號量 共用存儲區 套接字(socket) 進程間通信(四)—共用存儲區傳送門:http://www.cnblogs.com/lenomire ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...