redis持久化快速回憶手冊

来源:http://www.cnblogs.com/intsmaze/archive/2017/05/07/6818210.html
-Advertisement-
Play Games

Redis提供的持久化機制: 1). RDB持久化:該機制是指在指定的時間間隔內將記憶體中的數據集快照寫入磁碟。 2). AOF持久化:該機制將以日誌的形式記錄伺服器所處理的每一個寫操作,在Redis伺服器啟動之初會讀取該文件來重新構建資料庫,以保證啟動後資料庫中的數據是完整的。 3). 無持久化:我 ...


Redis提供的持久化機制:

  1). RDB持久化:該機制是指在指定的時間間隔內將記憶體中的數據集快照寫入磁碟。 

  2). AOF持久化:該機制將以日誌的形式記錄伺服器所處理的每一個寫操作,在Redis伺服器啟動之初會讀取該文件來重新構建資料庫,以保證啟動後資料庫中的數據是完整的。

  3). 無持久化:我們可以通過配置的方式禁用Redis伺服器的持久化功能。

  4). 同時應用AOF和RDB。

快照(RDB)預設持久化方式   將記憶體中數據以快照的方式寫入二進位文件中,預設文件名為dump.rdb。可以通過配置設置redis伺服器自動做快照持久化的方式。我們可以配置redis在n秒內如果超過了m個修改就自動做快照。
snapshotting預設設置:
save 900 1 #900秒內如果超過1個key被修改,則發起快照保存
save 300 10 #300秒內如果超過10個key被修改,則發起快照保存
save 60 10000
  對於Redis的服務進程而言,在開始持久化時,它唯一需要做的只是fork出子進程,子進程將快照數據寫入到臨時RDB文件中,當子進程完成數據寫入操作後,再用臨時文件替換老的文件,這樣就可以極大的避免服務進程執行IO操作了。每次快照持久化都是將記憶體數據完整寫入到磁碟一次,並不是增量的只同步增量數據。所以如果數據量大的話,寫操作會比較多,必然會引起大量的磁碟IO操作,可能會嚴重影響性能。   註意:快照方式是在一定間隔時間做一次,如果redis意外宕機,就會丟失最後一次快照後的所有數據的修改。
  對於災難恢復而言,我們可以非常輕鬆的將一個單獨的文件壓縮後再轉移到其它存儲介質上。   由於RDB是通過fork子進程來協助完成數據持久化工作的,如果當數據集較大時,可能會導致整個伺服器停止服務幾百毫秒,甚至是1秒鐘。 日誌追加方式(append-only file:aof)方式   redis會將每一個收到的命令都通過write函數追加到命令中,當redis重新啟動時會重新執行文件中保存的寫命令來在記憶體中重建這個資料庫的內容,這個文件在bin目錄下:appendonly.aof。當然由於操作系統會在內核中緩存write做的修改,所以可能不是立即寫到磁碟上,這樣的持久化還是有可能丟失部分修改。但是可以通過配置文件告訴redis通過fsync函數強制操作系統寫入到磁碟的時機
aof設置:
appendonly yes //啟動aof持久化方式有三種修改方式
#appendfsync always //收到寫命令就立即寫入到硬碟,效率最慢,但是保證完全持久化
#appendfsync everysec //每秒種就寫入一次硬碟,在性能和持久化方面做了折中
#appendfsync no //完全依賴操作系統,性能最好,但是持久化沒保證,不知道何時持久化
  事實上,每秒同步也是非同步完成的,其效率也是非常高的,所差的是一旦系統出現宕機現象,那麼這一秒鐘之內修改的數據將會丟失。而每修改同步,我們可以將其視為同步持久化,即每次發生的數據變化都會被立即記錄到磁碟中。可以預見,這種方式在效率上是最低的。   由於該機制對日誌文件的寫入操作採用的是append模式,因此在寫入過程中即使出現宕機現象,也不會破壞日誌文件中已經存在的內容。然而如果我們本次操作只是寫入了一半數據就出現了系統崩潰問題,不用擔心,在Redis下一次啟動之前,我們可以通過redis-check-      如果日誌過大,Redis可以自動啟用rewrite機制。即Redis以append模式不斷的將修改數據寫入到老的磁碟文件中,同時Redis還會創建一個新的文件用於記錄此期間有哪些修改命令被執行。因此在進行rewrite切換時可以更好的保證數據安全性。   對於相同數量的數據集而言,AOF文件通常要大於RDB文件。日誌追加的方式導致持久化文件會變得越來越大。例如調用incr intsmaze命令100次,文件中就保存了100條命令,其實有99條都是多餘的。因為要恢複數據庫狀態其實文件中保存一條set intsmaze 100就可以了。為了壓縮這種持久化方式的日誌文件,redis提供了bgrewriteaof命令。收到此命令redis將使用與快照類似的方式將記憶體中的數據以命令的方式保存到臨時文件中,最後替換原來的持久化日誌文件。
  實際中使用always方式,開啟了always方式,redis的併發量就會下去。實際生產中都不會用快照的方式。 Redis的數據備份:     在Redis中我們可以通過copy的方式線上備份正在運行的Redis數據文件。這是因為RDB文件一旦被生成之後就不會再被修改。Redis每次都是將最新的數據dump到一個臨時文件中,之後在利用rename函數原子性的將臨時文件改名為原有的數據文件名。因此我們可以說,在任意時刻copy數據文件都是安全的和一致的。鑒於此,我們就可以通過創建cron job的方式定時備份Redis的數據文件,並將備份文件copy到安全的磁碟介質中。

原文和作者一起討論: http://www.cnblogs.com/intsmaze/p/6818210.html

微信:intsmaze

 

                老鐵,關註,推薦啊


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 1.登錄功能 用戶登陸使用手機號+簡訊驗證碼的方式登陸,伺服器端並不保存用戶手機號。 登陸成功後客戶端可以獲取到登陸標識,客戶端可以通過登陸標識保持相對長時間的訪問伺服器的許可權。 2.介面 獲得驗證碼: 匿名Login: 3.代碼 MainActivity LoginActivity ...
  • 一、佈局文件 設置界面,添加一個ImageView,和兩個Button按鈕,設置其屬性及id 二、聲明網路許可權 因為使用網路功能需要添加許可權,修改AndroidManifest.xml文件添加許可權聲明語句。 三、編輯ManActivity.java文件。 四、運行結果 點擊下載按鈕下載圖片。讀取圖片 ...
  • 問題描述:當我把已經做好的ArcGIS Android工程想在其他電腦運行時,總是會提示報錯。而報錯的地方,正是出現在下麵這條語句上。 解決方法:把這行註釋掉,重新Sync(同步)一下;再把註釋去掉,再Sync一下。你會發現工程可以運行了。 如果代碼編輯器右上角沒有找到 SyncNow 這個字眼,請 ...
  • 修改提示符,設置後挺方便的 例如: 幾個好用的參數 \d 當前資料庫 \u 當前用戶 \h 當前主機 更多參數可以參考mysol官方文檔 參考文檔:https://dev.mysql.com/doc/refman/5.7/en/mysql commands.html ...
  • 在使用Spark時經常需要把數據落入HBase中,如果使用普通的Java API,寫入會速度很慢。還好Spark提供了Bulk寫入方式的介面。那麼Bulk寫入與普通寫入相比有什麼優勢呢? BulkLoad不會寫WAL,也不會產生flush以及split。 如果我們大量調用PUT介面插入數據,可能會導 ...
  • 1.LIKE操作符 1.1百分號(%)通配符 SELECT prod_id, prod_name FROM Products WHERE prod_name LIKE 'Fish%' 此例子使用了搜索模式'Fish%'。在執行這條子句時,將檢索任意以Fish起頭的詞。%告訴DBMS接受Fish之後的 ...
  • 1.已設置兩種登錄模式. 2.SQL Server配置管理器已配置好. 按Windows徽標鍵+R組合鍵,然後輸入cmd. 再然後輸入netsh winsock reset.接下來重啟電腦,應該就可以連接了. 如果以上兩種未設置好,請先設置好. ...
  • 在全文搜索(Fulltext Search)中,詞(Term)是一個搜索單元,表示文本中的一個詞,標記(Token)表示在文本欄位中出現的詞,由詞的文本、在原始文本中的開始和結束偏移量、以及數據類型等組成。ElasticSearch 把文檔數據寫到倒排索引(Inverted Index)的結構中,倒... ...
一周排行
    -Advertisement-
    Play Games
  • 前言 本文介紹一款使用 C# 與 WPF 開發的音頻播放器,其界面簡潔大方,操作體驗流暢。該播放器支持多種音頻格式(如 MP4、WMA、OGG、FLAC 等),並具備標記、實時歌詞顯示等功能。 另外,還支持換膚及多語言(中英文)切換。核心音頻處理採用 FFmpeg 組件,獲得了廣泛認可,目前 Git ...
  • OAuth2.0授權驗證-gitee授權碼模式 本文主要介紹如何筆者自己是如何使用gitee提供的OAuth2.0協議完成授權驗證並登錄到自己的系統,完整模式如圖 1、創建應用 打開gitee個人中心->第三方應用->創建應用 創建應用後在我的應用界面,查看已創建應用的Client ID和Clien ...
  • 解決了這個問題:《winForm下,fastReport.net 從.net framework 升級到.net5遇到的錯誤“Operation is not supported on this platform.”》 本文內容轉載自:https://www.fcnsoft.com/Home/Sho ...
  • 國內文章 WPF 從裸 Win 32 的 WM_Pointer 消息獲取觸摸點繪製筆跡 https://www.cnblogs.com/lindexi/p/18390983 本文將告訴大家如何在 WPF 裡面,接收裸 Win 32 的 WM_Pointer 消息,從消息裡面獲取觸摸點信息,使用觸摸點 ...
  • 前言 給大家推薦一個專為新零售快消行業打造了一套高效的進銷存管理系統。 系統不僅具備強大的庫存管理功能,還集成了高性能的輕量級 POS 解決方案,確保頁面載入速度極快,提供良好的用戶體驗。 項目介紹 Dorisoy.POS 是一款基於 .NET 7 和 Angular 4 開發的新零售快消進銷存管理 ...
  • ABP CLI常用的代碼分享 一、確保環境配置正確 安裝.NET CLI: ABP CLI是基於.NET Core或.NET 5/6/7等更高版本構建的,因此首先需要在你的開發環境中安裝.NET CLI。這可以通過訪問Microsoft官網下載並安裝相應版本的.NET SDK來實現。 安裝ABP ...
  • 問題 問題是這樣的:第三方的webapi,需要先調用登陸介面獲取Cookie,訪問其它介面時攜帶Cookie信息。 但使用HttpClient類調用登陸介面,返回的Headers中沒有找到Cookie信息。 分析 首先,使用Postman測試該登陸介面,正常返回Cookie信息,說明是HttpCli ...
  • 國內文章 關於.NET在中國為什麼工資低的分析 https://www.cnblogs.com/thinkingmore/p/18406244 .NET在中國開發者的薪資偏低,主要因市場需求、技術棧選擇和企業文化等因素所致。歷史上,.NET曾因微軟的閉源策略發展受限,儘管後來推出了跨平臺的.NET ...
  • 在WPF開發應用中,動畫不僅可以引起用戶的註意與興趣,而且還使軟體更加便於使用。前面幾篇文章講解了畫筆(Brush),形狀(Shape),幾何圖形(Geometry),變換(Transform)等相關內容,今天繼續講解動畫相關內容和知識點,僅供學習分享使用,如有不足之處,還請指正。 ...
  • 什麼是委托? 委托可以說是把一個方法代入另一個方法執行,相當於指向函數的指針;事件就相當於保存委托的數組; 1.實例化委托的方式: 方式1:通過new創建實例: public delegate void ShowDelegate(); 或者 public delegate string ShowDe ...