Redis兩種持久化方式(RDB&AOF)

来源:http://www.cnblogs.com/tdws/archive/2016/08/09/5754706.html
-Advertisement-
Play Games

爬蟲和轉載請註明原文地址;博客園蝸牛:http://www.cnblogs.com/tdws/p/5754706.html Redis的持久化過程中並不需要我們開發人員過多的參與,我們要做的是什麼呢?除了深入瞭解RDB和AOF的作用原理,剩下的就是根據實際情況來制定合適的策略了,再複雜一點,也就是定 ...


爬蟲和轉載請註明原文地址;博客園蝸牛:http://www.cnblogs.com/tdws/p/5754706.html

Redis所需記憶體 超過可用記憶體怎麼辦
Redis修改數據多線程併發—Redis併發鎖
windows下redis基礎操作與主從複製 從而 數據備份和讀寫分離
Redis兩種持久化方式(RDB&AOF)

Redis的持久化過程中並不需要我們開發人員過多的參與,我們要做的是什麼呢?除了深入瞭解RDBAOF作用原理,剩下的就是根據實際情況來制定合適的策略了,再複雜一點,也就是定製一個高可用的,數據安全的策略了。

先來看RDB持久化方式:

在RDB方式下,你有兩種選擇,一種是手動執行持久化數據命令來讓redis進行一次數據快照,另一種則是根據你所配置的配置文件 的 策略,達到策略的某些條件時來自動持久化數據。而手動執行持久化命令,你依然有兩種選擇,那就是save命令和bgsave命令。

save操作在Redis主線程中工作,因此會阻塞其他請求操作,應該避免使用。

(預設下,持久化到dump.rdb文件,並且在redis重啟後,自動讀取其中文件,據悉,通常情況下一千萬的字元串類型鍵,1GB的快照文件,同步到記憶體中的 時間是20-30秒

bgSave則是調用Fork,產生子進程,父進程繼續處理請求。子進程將數據寫入臨時文件,併在寫完後,替換原有的.rdb文件。Fork發生時,父子進程記憶體共用,所以為了不影響子進程做數據快照,在這期間修改的數據,將會被覆制一份,而不進共用記憶體。所以說,RDB所持久化的數據,是Fork發生時的數據。在這樣的條件下進行持久化數據,如果因為某些情況宕機,則會丟失一段時間的數據。如果你的實際情況對數據丟失沒那麼敏感,丟失的也可以從傳統資料庫中獲取或者說丟失部分也無所謂,那麼你可以選擇RDB持久化方式。

再談一下配置文件的策略,實際上它和bgsave命令持久化原理是相同的。

這是配置文件預設的策略,他們之間的關係是或,每隔900秒,在這期間變化了至少一個鍵值,做快照。或者每三百秒,變化了十個鍵值做快照。或者每六十秒,變化了至少一萬個鍵值,做快照。

下麵再來說一說AOF快照方式:

AOF,append only file。

配置文件中的appendonly修改為yes。開啟AOF持久化後,你所執行的每一條指令,都會被記錄到appendonly.aof文件中。但事實上,並不會立即將命令寫入到硬碟文件中,而是寫入到硬碟緩存,在接下來的策略中,配置多久來從硬碟緩存寫入到硬碟文件。所以在一定程度一定條件下,還是會有數據丟失,不過你可以大大減少數據損失。

這裡是配置AOF持久化的策略。redis預設使用everysec,就是說每秒持久化一次,而always則是每次操作都會立即寫入aof文件中。而no則是不主動進行同步操作,是預設30s一次。當然always一定是效率最低的,個人認為everysec就夠用了,數據安全性能又高。

Redis也允許我們同時使用兩種方式,再重啟redis後會從aof中恢複數據,因為aofrdb數據損失小嘛。 

區別和深入理解:

RDB每次進行快照方式會重新記錄整個數據集的所有信息。RDB在恢複數據時更快,可以最大化redis性能,子進程對父進程無任何性能影響。

AOF有序的記錄了redis的命令操作。意外情況下數據丟失甚少。他不斷地對aof文件添加操作日誌記錄,你可能會說,這樣的文件得多麼龐大呀。是的,的確會變得龐大,但redis會有優化的策略,比如你對一個key1鍵的操作,set key1 001 ,  set key1 002, set key1 003。那優化的結果就是將前兩條去掉咯,那具體優化的配置在配置文件中對應的是 

前者是指超過上一次aof重寫aof文件大小的百分之多少,會再次優化,如果沒有重寫過,則以啟動時為主。後者是限制了允許重寫的最小aof文件大小。bgrewriteaof命令是手動重寫命令,會fork子進程,在臨時文件中重建資料庫狀態,對原aof無任何影響,當重建舊的狀態後,也會把fork發生後的一段時間內的數據一併追加到臨時文件,最後替換原有aof文件,新的命令繼續向新的aof文件中追加。

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 在mvc-bootstrap中使用時@Scripts.Render("~/bundles/jqueryval")加上驗證的js ...
  • 面向對象的編程區別於面向過程的編程,其操作的單元是類,而面向過程操作的單元是方法。即面向過程的編程是由一個又一個的方法組成的。而面向對象的編程是由一個又一個類組成的。相對於面向過程,面向對象的代碼復用性更好,代碼的隱蔽性更高,並且更加符合人類思維的方式。 ...
  • 最前面的話:Smobiler是一個在VS環境中使用.Net語言來開發APP的開發平臺,也許比Xamarin更方便 ...
  • 1.面向對象的3大屬性,封裝、繼承、多態,以一個加單的電腦為例: 創建一個父類Operation 有兩個屬性 和一個計算方法(虛方法),便於子類重寫: 1 public class Operation 2 { 3 private double _numberA = 0; 4 private dou ...
  • 第一種方式:submit 按鈕 提交 第二種方式: $("#dataform").ajaxSubmit() 提交 第三種方式:post 提交 ...
  • 通常,應用程式可以將那些頻繁訪問的數據,以及那些需要大量處理時間來創建的數據存儲在記憶體中,從而提高性能。基於微軟的企業庫,我們的快速創建一個緩存的實現。 新建PrismSample.Infrastructure.Cache 新建一個類庫項目,將其命名為PrismSample.Infrastructu ...
  • 迭代器也是C# 2.0的產物。 1.1 迭代器的簡介 迭代器記錄了集合中的某個位置,它使程式只能向前移動。C# 1.0中使用foreach語句來實現訪問迭代器的內置支持,foreach使遍歷集合變得簡單,它比for語句更方便,也更容易理解。foreach被編譯器編譯後,會調用GetEnumerato ...
  • 上一章博客我為大家介紹了Process類的所有基本使用方法,這一章博客我來為大家做一個小擴展,來熟悉一下Process類的實際使用,廢話不多說我們開始演示。 先看看我們的軟體要設計成的佈局吧。 首先我們需要給定會使用到的dll,記得vs中的引用那一項嗎?我們雖然不需要將這裡面的引用全部導入進來,但是 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...