Redis緩存資料庫的安裝與配置(3)

来源:https://www.cnblogs.com/mushou/archive/2018/08/07/9436448.html
-Advertisement-
Play Games

3 Redis主動同步設置方法 Redis主從同步 1.Redis主從同步特點 一個master可以擁有多個slave 多個slave可以連接同一個master,還可以連接到其他slave 主從複製不會阻塞master,在同步數據時,master可以繼續處理client請求。 提高系統的伸縮性 2. ...


3 Redis主動同步設置方法 Redis主從同步

1.Redis主從同步特點

一個master可以擁有多個slave

多個slave可以連接同一個master,還可以連接到其他slave

主從複製不會阻塞master,在同步數據時,master可以繼續處理client請求。

提高系統的伸縮性

2.Redis主從同步的過程

配置好slave伺服器連接master後,slave會建立和master的連接,然後發送sync命令。

無論是第一次同步建立的連接還是連接斷開後的重新連接,master都會啟動一個後臺進程,將資料庫快照保存到磁碟文件中,同時master主進程會開始收集新的寫命令並緩存起來。

當後臺進程完成寫磁碟文件後,master就將快照文件發送給slave,slave將文件保存到磁碟上,然後載入到記憶體將資料庫快照恢復到slave上。

slave完成快照文件的恢復後,master就會把緩存的命令都轉發給slave,slave更新記憶體資料庫。

後續master收到的寫命令都會通過開始建立的連接發送給slave。從master到slave的同步數據的命令和從client到master發送的命令使用相同的協議格式。當master和slave的連接斷開時,slave可以自動重新建立連接。如果master同時收到多個slave發來的同步連接命令,只會使用啟動一個進程來寫資料庫鏡像,然後發送給所有slave。

3 Redis主動同步設置方法

1 )在redis.conf配置文件中設置

通過簡單的配置slave(master端無需配置),用戶就能使用redis的主從複製
我們讓埠6379的redis做master;另一臺埠6379的redis做slave

我們修改slave主機的redis.conf的配置文件
vim   redis.conf | sed -n '189,215p'
   189  ################################# REPLICATION #################################
   190 
   191  # Master-Slave replication. Use slaveof to make a Redis instance a copy of
   192  # another Redis server. Note that the configuration is local to the slave
   193  # so for example it is possible to configure the slave to save the DB with a
   194  # different interval, or to listen to another port, and so on.
   195  #
   196  # slaveof <masterip> <masterport>
   197  slaveof 172.16.1.2 6379              在此處添加本行內容,指定主master的IP和埠
   198  # If the master is password protected (using the "requirepass" configuration
   199  # directive below) it is possible to tell the slave to authenticate before
   200  # starting the replication synchronization process, otherwise the master will
   201  # refuse the slave request.
   202  #
   203  # masterauth <master-password>
   204  masterauth 123456                    在此處添加本行內容,指定驗證的密碼
   205  # When a slave loses its connection with the master, or when the replication
   206  # is still in progress, the slave can act in two different ways:
   207  #
   208  # 1) if slave-serve-stale-data is set to 'yes' (the default) the slave will
   209  #    still reply to client requests, possibly with out of date data, or the
   210  #    data set may just be empty if this is the first synchronization.
   211  #
   212  # 2) if slave-serve-stale-data is set to 'no' the slave will reply with
   213  #    an error "SYNC with master in progress" to all the kind of commands
   214  #    but to INFO and SLAVEOF.
   215  #

2)進行redis主從同步測試

redis-cli   -a  123456  get name      #獲取master    redis6379的鍵name的值
"benet"
[root@redis-master ~]# redis-cli -a 123456  set name xxxxx    #向redis6379里存一個key=name,value=xxxxx的數據
OK
[root@redis-master ~]# redis-cli -a 123456  get name  #獲取redis6379的鍵name的值
"xxxxx"

3.Append-Only File(追加式的操作日誌)

  • 另外由於快照方式是在一定間隔時間做一次的,所以如果redis意外down掉的話,就會丟失最後一次快照後的所有修改。如果應用要求不能丟失任何修改的話,可以採用aof持久化方式。下麵介紹Append-only file。
  • aof比快照方式有更好的持久化性,是由於在使用aof持久化方式時,redis會將每一個收到的寫命令都通過write函數追加到文件中(預設是appendonly.aof)。當redis重啟時會通過重新執行文件中保存的寫命令來在記憶體中重建整個資料庫的內容.當然由於os會在內核中緩存write做的修改,所以可能不是立即寫到磁碟上。這樣aof方式的持久化也還是有可能會丟失部分修改。不過我們可以通過配置文件告訴redis我們想要通過fsync函數強制os寫入到磁碟的時機。有三種方式如下(預設是:每秒fsync一次)
  • appendonly yes #啟用aof持久化方式
  • appendfsync always #收到寫命令就立即寫入磁碟,最慢,但是保證完全的持久化
  • appendfsync everysec #美秒鐘寫入磁碟一次,在性能和持久化方面做了很好的折中
  • appendfsync no #完全依賴os,性能最好,持久化沒保證
  • redis還支持一種追加式的操作日誌記錄,叫append only file,其日誌文件以aof結尾,我們一般各為aof文件。要開啟aof日誌的記錄,你需要在配置文件中進行如下設置:

aof引發的問題:

aof的方式也同時帶來了另一個問題。持久化文件會變得越來越大.例如我們調用incr test命令100次,文件中必須保存全部的100條命令,其實有99條都是多餘的。因為要恢複數據庫的狀態其實文件中保存一條set test 100 就夠了。為了壓縮aof的持久化文件。redis提供了bgrewriteaof命令。收到此命令redis將使用與快照類似的方式將記憶體中的數據以命令的方式保存到臨時文件中,最後替換原來的文件。具體過程如下:

  • redis調用fork,現在有父子兩個進程
  • 子進程根據記憶體中的資料庫快照,往臨時文件中寫入重建資料庫狀態的命令。
  • 父進程繼續處理client請求,除了把寫命令寫入到原來的aof文件中。同時把收到的寫命令緩存起來.這樣就能保證如果子進程重寫失敗的話並不會出問題。
  • 當子進程把快照內容寫入已命令方式寫到臨時文件中後,子進程發信號通知父進程。然後父進程把緩存的寫命令也寫入到臨時文件。
  • 現在父進程可以使用臨時文件替換老的aof文件,並重命令名,後面收到的寫命令也開始往新的aof文件中追加。

需要註意到是重寫aof文件的操作,並沒有讀取舊的aof文件,而是將整個記憶體中的資料庫內容用命令的方式重寫了一個新的aof文件,這點和快照有點類似。接下來我們看一下實際的例子。

開啟bgrewriteaof重寫的方式

##開啟AOF
vim /usr/local/redis/conf/redis.conf
   449  appendonly yes                  #修改本行內容開啟AOF
  
#重啟redis服務
[root@redis-master redis]# redis-cli -a 123456 shutdown
[4022] 08 Oct 23:27:22.183 # User requested shutdown...
[4022] 08 Oct 23:27:22.183 * Saving the final RDB snapshot before exiting.
[4022] 08 Oct 23:27:22.195 * DB saved on disk
[4022] 08 Oct 23:27:22.195 # Redis is now ready to exit, bye bye...
[1]+  Done                    redis-server /usr/local/redis/conf/redis.conf
[root@redis-master redis]# redis-server /usr/local/redis/conf/redis.conf &

#關於bgrewriteaof重寫的配置文件代碼如下:
vim   /usr/local/redis/conf/redis.conf 
   503  # Automatic rewrite of the append only file.
   504  # Redis is able to automatically rewrite the log file implicitly calling
   505  # BGREWRITEAOF when the AOF log size grows by the specified percentage.
   506  #
   507  # This is how it works: Redis remembers the size of the AOF file after the #它是如何工作的呢?redis會記住AOF文件的大小
   508  # latest rewrite (if no rewrite has happened since the restart, the size of #當最後一次重寫的時候,如果在重啟時沒有重寫發生。
   509  # the AOF at startup is used).  #那麼AOF文件會在開始時被使用
   510  #
   511  # This base size is compared to the current size. If the current size is
   512  # bigger than the specified percentage, the rewrite is triggered. Also
   513  # you need to specify a minimal size for the AOF file to be rewritten, this
   514  # is useful to avoid rewriting the AOF file even if the percentage increase
   515  # is reached but it is still pretty small.
   516  #
   517  # Specify a percentage of zero in order to disable the automatic AOF
   518  # rewrite feature.
   519 
   520  auto-aof-rewrite-percentage 100 #當100%達到最小大小的時候才會執行重寫
   521  auto-aof-rewrite-min-size 64mb  #自動重寫aof文件的最小大小

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 第1章 文件訪問過程詳解 1.1 文件訪問過程 第2章 許可權 2.1 對於文件rwx含義 r讀取文件內容 w修改文件內容 需要r許可權配合 只有w許可權的時候,強制保存退出會導致源文件內容丟失 x許可權表示是否能執行腳本 需要r許可權配合 2.2 對於目錄rwx含義 r 顯示目錄內容 需要x許可權配合 w 是 ...
  • 目錄 1 磁碟知識體繫結構... 4 1.1 第一層... 4 1.1.1 磁碟結構... 4 1.1.1.1 硬碟的分類... 5 1.1.1.2 磁碟介面的特點... 6 1.1.1.2.1 磁碟介面的外部特點... 6 1.1.1.2.2 磁碟介面的特點:... 6 1.1.1.2.3 磁碟如 ...
  • FQDN:(Fully Qualified Domain Name)全限定功能變數名稱:同時帶有主機名和功能變數名稱的名稱 其實就是標註一個主機的完整功能變數名稱。比如我的功能變數名稱為 ifrom.top 那麼它的郵件伺服器的主機名為 mail, 所以它的FQDN 為: mail.ifrom.top Linux 獲取主機名 的命 ...
  • 1、錯誤信息如下: SMTP -> ERROR: Failed to connect to server: Permission denied (13) 2、解決方法: https://gistpages.com/posts/phpmailer_smtp_error_failed_to_connec ...
  • 對於初學者而言,最簡單的是對晶元上的IO進行操作,我們學習ARM時候,第一個工程就是點亮LED,STM32F103ZET6通用輸入輸出介面(General-Purpose Inputs/Outputs),每個GPIO都可以由軟體配置成輸出(推免或開漏)、輸入(帶或不帶上拉或下拉)或復用的外設功能埠 ...
  • Apache的虛擬主機是一種允許在同一臺機器上配置多個不同站點的web伺服器環境的,就是iis一樣可以創建多站點了,但是apache需要在編輯狀態操作,不能像windows iis直接點擊幾下就好了,下麵我來給各位介紹配置方法。 最平常的大概有3種方法。 第一種:單IP不同埠 第二種:多IP同埠 ...
  • mysql5.7忽略大小寫問題 1.1 前言 新安裝mysql5.7版本後,linux環境下預設是大小寫敏感的。網上解決方案是挺多的,如果你進來看了,說明你遇到的坑是跟我一樣的。(修改好配置文件後不要重啟mysql服務!!!先停止服務,再啟動。) 1.2 進入正題,忽略大小寫敏感步驟 輸入 i 進入 ...
  • 1. python 工具 使用方法: 啟動:在終端里運行“python mkptych.py&”,這樣就可以生成一個基於pty(偽終端)的虛擬埠對,兩個設備名會顯示在終端里。然後就可以利用這兩個設備名在本機上進行虛擬串口之類的調試。 關閉:使用完後用ps查看這個python進程的pid號,然後ki ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...