詳解Redis三大集群模式,輕鬆實現高可用!

来源:https://www.cnblogs.com/yidengjiagou/archive/2023/04/23/17345831.html
-Advertisement-
Play Games

Redis集群是一種通過將多個Redis節點連接在一起以實現高可用性、數據分片和負載均衡的技術。它允許Redis在不同節點上同時提供服務,提高整體性能和可靠性。根據搭建的方式和集群的特性,Redis集群主要有三種模式:主從複製模式(Master-Slave)、哨兵模式(Sentinel)和Clust... ...


image

1. Redis集群簡介

1.1 什麼是Redis集群

Redis集群是一種通過將多個Redis節點連接在一起以實現高可用性、數據分片和負載均衡的技術。它允許Redis在不同節點上同時提供服務,提高整體性能和可靠性。根據搭建的方式和集群的特性,Redis集群主要有三種模式:主從複製模式(Master-Slave)、哨兵模式(Sentinel)和Cluster模式。

1.2 Redis集群的作用和優勢

  1. 高可用性:Redis集群可以在某個節點發生故障時,自動進行故障轉移,保證服務的持續可用。
  2. 負載均衡:Redis集群可以將客戶端請求分發到不同的節點上,有效地分攤節點的壓力,提高系統的整體性能。
  3. 容災恢復:通過主從複製或哨兵模式,Redis集群可以在主節點出現故障時,快速切換到從節點,實現業務的無縫切換。
  4. 數據分片:在Cluster模式下,Redis集群可以將數據分散在不同的節點上,從而突破單節點記憶體限制,實現更大規模的數據存儲。
  5. 易於擴展:Redis集群可以根據業務需求和系統負載,動態地添加或移除節點,實現水平擴展。

通過瞭解Redis集群的概念和優勢,接下來將詳細介紹三大集群模式的原理、配置、優缺點以及應用場景。

2. 主從複製模式(Master-Slave)

2.1 主從複製原理

主從複製是Redis的一種基本集群模式,它通過將一個Redis節點(主節點)的數據複製到一個或多個其他Redis節點(從節點)來實現數據的冗餘和備份。

主節點負責處理客戶端的寫操作,同時從節點會實時同步主節點的數據。客戶端可以從從節點讀取數據,實現讀寫分離,提高系統性能。

image

2.2 主從複製配置和實現

  1. 配置主節點:在主節點的redis.conf配置文件中,無需進行特殊配置,主節點預設監聽所有客戶端請求。

    # 主節點預設埠號6379
    port 6379
    
  2. 配置從節點:在從節點的redis.conf配置文件中,添加如下配置,指定主節點的地址和埠:

    # 從節點設置埠號6380
    port 6380
    
    # replicaof 主節點IP 主節點埠
    replicaof 127.0.0.1 6379
    

    或者,通過Redis命令行在從節點上執行如下命令:

    redis> replicaof 127.0.0.1 6379
    
  3. 驗證主從複製:在主節點上執行寫操作,然後在從節點上進行讀操作,檢查數據是否一致。

2.3 主從複製的優缺點

優點

  1. 配置簡單,易於實現。
  2. 實現數據冗餘,提高數據可靠性。
  3. 讀寫分離,提高系統性能。

缺點

  1. 主節點故障時,需要手動切換到從節點,故障恢復時間較長。
  2. 主節點承擔所有寫操作,可能成為性能瓶頸。
  3. 無法實現數據分片,受單節點記憶體限制。

2.4 主從複製場景應用

主從複製模式適用於以下場景:

  1. 數據備份和容災恢復:通過從節點備份主節點的數據,實現數據冗餘。
  2. 讀寫分離:將讀操作分發到從節點,減輕主節點壓力,提高系統性能。
  3. 線上升級和擴展:在不影響主節點的情況下,通過增加從節點來擴展系統的讀取能力。

總結:主從複製模式適合數據備份、讀寫分離和線上升級等場景,但在主節點故障時需要手動切換,不能自動實現故障轉移。如果對高可用性要求較高,可以考慮使用哨兵模式或Cluster模式。

3. 哨兵模式Sentinel)

3.1 哨兵模式原理

哨兵模式是在主從複製基礎上加入了哨兵節點,實現了自動故障轉移。哨兵節點是一種特殊的Redis節點,它會監控主節點和從節點的運行狀態。當主節點發生故障時,哨兵節點會自動從從節點中選舉出一個新的主節點,並通知其他從節點和客戶端,實現故障轉移。

image

3.2 哨兵模式配置和實現

  1. 配置主從複製:首先按照主從複製模式的配置方法,搭建一個主從複製集群(上面已經講過)。

  2. 配置哨兵節點:在哨兵節點上創建一個新的哨兵配置文件(如:sentinel.conf),並添加如下配置:

    # sentinel節點埠號
    port 26379
    
    # sentinel monitor 被監控主節點名稱 主節點IP 主節點埠 quorum
    sentinel monitor mymaster 127.0.0.1 6379 2
    
    # sentinel down-after-milliseconds 被監控主節點名稱 毫秒數
    sentinel down-after-milliseconds mymaster 60000
    
    # sentinel failover-timeout 被監控主節點名稱 毫秒數
    sentinel failover-timeout mymaster 180000
    

    其中,quorum是指觸發故障轉移所需的最小哨兵節點數。down-after-milliseconds表示主節點被判斷為失效的時間。failover-timeout是故障轉移超時時間。

    為什麼只配置了sentinel監控主節點,沒有配置監控從節點?
    因為通過主節點,就可以找到從節點。

  3. 啟動哨兵節點:使用如下命令啟動哨兵節點:

    redis> redis-sentinel /path/to/sentinel.conf
    
  4. 驗證哨兵模式:手動停止主節點,觀察哨兵節點是否自動選舉出新的主節點,並通知其他從節點和客戶端。

3.3 哨兵模式的優缺點

優點

  1. 自動故障轉移,提高系統的高可用性。
  2. 具有主從複製模式的所有優點,如數據冗餘和讀寫分離。

缺點

  1. 配置和管理相對複雜。
  2. 依然無法實現數據分片,受單節點記憶體限制。

3.4 哨兵模式場景應用

哨兵模式適用於以下場景:

  1. 高可用性要求較高的場景:通過自動故障轉移,確保服務的持續可用。
  2. 數據備份和容災恢復:在主從複製的基礎上,提供自動故障轉移功能。

總結:哨兵模式在主從複製模式的基礎上實現了自動故障轉移,提高了系統的高可用性。然而,它仍然無法實現數據分片。如果需要實現數據分片和負載均衡,可以考慮使用Cluster模式。

4. Cluster模式

4.1 Cluster模式原理

Cluster模式是Redis的一種高級集群模式,它通過數據分片和分散式存儲實現了負載均衡和高可用性。在Cluster模式下,Redis將所有的鍵值對數據分散在多個節點上。每個節點負責一部分數據,稱為槽位。通過對數據的分片,Cluster模式可以突破單節點的記憶體限制,實現更大規模的數據存儲。

image

4.2 數據分片與槽位

Redis Cluster將數據分為16384個槽位,每個節點負責管理一部分槽位。當客戶端向Redis Cluster發送請求時,Cluster會根據鍵的哈希值將請求路由到相應的節點。具體來說,Redis Cluster使用CRC16演算法計算鍵的哈希值,然後對16384取模,得到槽位編號。

4.3 Cluster模式配置和實現

  1. 配置Redis節點:為每個節點創建一個redis.conf配置文件,並添加如下配置:

    # cluster節點埠號
    port 7001
    
    # 開啟集群模式
    cluster-enabled yes
    
    # 節點超時時間
    cluster-node-timeout 15000
    

像這樣的配置,一共需要創建6個,我們做一個三主三從的集群。

  1. 啟動Redis節點:使用如下命令啟動6個節點:

    redis> redis-server redis_7001.conf
    
  2. 創建Redis Cluster:使用Redis命令行工具執行如下命令創建Cluster:

    redis> redis-cli --cluster create 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005 127.0.0.1:7006 --cluster-replicas 1
    

    cluster-replicas 表示從節點的數量,1代表每個主節點都有一個從節點。

  3. 驗證Cluster模式:向Cluster發送請求,觀察請求是否正確路由到相應的節點。

4.4 Cluster模式的優缺點

優點

  1. 數據分片,實現大規模數據存儲。
  2. 負載均衡,提高系統性能。
  3. 自動故障轉移,提高高可用性。

缺點

  1. 配置和管理較複雜。
  2. 一些複雜的多鍵操作可能受到限制。

4.5 Cluster模式場景應用

Cluster模式適用於以下場景:

  1. 大規模數據存儲:通過數據分片,突破單節點記憶體限制。
  2. 高性能要求場景:通過負載均衡,提高系統性能。
  3. 高可用性要求場景:通過自動故障轉移,確保服務的持續可用。

總結:Cluster模式在提供高可用性的同時,實現了數據分片和負載均衡,適用於大規模數據存儲和高性能要求的場景。然而,它的配置和管理相對複雜,且某些複雜的多鍵操作可能受到限制。

5. 總結

本文詳細介紹了Redis的三大集群模式:主從複製、哨兵模式和Cluster模式。每種模式都有其特點和應用場景,具體如下:

  1. 主從複製模式:適用於數據備份和讀寫分離場景,配置簡單,但在主節點故障時需要手動切換。
  2. 哨兵模式:在主從複製的基礎上實現自動故障轉移,提高高可用性,適用於高可用性要求較高的場景。
  3. Cluster模式:通過數據分片和負載均衡實現大規模數據存儲和高性能,適用於大規模數據存儲和高性能要求場景。

在實際應用中,可以根據系統的需求和特點選擇合適的Redis集群模式,以實現高可用性、高性能和大規模數據存儲。

我是「一燈架構」,如果本文對你有幫助,歡迎各位小伙伴點贊、評論和關註,感謝各位老鐵,我們下期見

image


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 一.引言 kafka是廣泛使用的流處理組件,我們知道怎麼使用它,也知道它的實現原理。但是更重要的部分是它的設計理念,即kafka設計者當時是如何考量各種方案的,瞭解這些,對提升我們的設計能力非常有幫助。 二.動機 我們將 Kafka 設計為一個統一平臺,來處理大型公司可能擁有的所有實時數據流。 為此 ...
  • Oracle 的exp、imp、expdp、impdp命令用於資料庫邏輯備份與恢復; exp命令用於把數據從遠程資料庫server導出至本地,生成dmp文件。 筆者在實操中遇到: $exp user/pass file=exp.dmp tables = (TABLE1,TABLE3,TABLE3) ...
  • 最近讀了一本書《mysql是怎樣運行的》,讀完後在大體上對mysql的運行有一定的瞭解。在以前,我對mysql有以下的為什麼: InnoDB中的表空間、段、區和頁是什麼? redo log為什麼就能實現事務的持久性? 到底什麼是意向鎖?意向鎖有什麼用? mysql中的外連接、內連接到底是什麼? 事務 ...
  • 《Redis設計與實現》讀書筆記 簡單動態字元串 SDS的定義 結構: buf數組:用於保存字元串 len屬性:記錄SDS中保存字元串的長度 free屬性:記錄buf中未使用位元組數量 遵循C字元串以空字元串結尾的慣例,保存空字元串的位元組不計入長度 SDS與C字元串的區別 常數複雜度獲取字元串長度 因 ...
  • 4月20日,以“數實融合,韌性生長”為主題的袋鼠雲春季生長大會圓滿落幕。 在春季生長大會中,袋鼠雲帶來了數實融合趨勢下的最新行業沉澱、最佳實踐經驗和行業前瞻性的產品發佈。從大數據基礎軟體“數棧”、到低代碼數字孿生世界“易知微”,再到可觀測運維專家“雲掣”,為廣大用戶帶來了一場場精彩內容,共話數字未來 ...
  • 摘要:推送服務(Push Kit)是華為提供的消息推送平臺,建立了從雲端到終端的消息推送通道。通過集成推送服務,您可以向客戶端應用實時推送消息,讓應用更精準觸達用戶,是開發者提升用戶感知度和活躍度的一件利器。 本文分享自華為雲社區《無懼百萬級併發,GaussDB(for Cassandra)讓華為P ...
  • 環境: AlmaLinux release 9.1 MySQL Community Server Ver 8.0.33 Replication Manager v2.2.40 for MariaDB 10.x and MySQL 5.7 Series ProxySQL version 2.5.1-9 ...
  • 摘要:目前MetaERP已經覆蓋了華為公司100%的業務場景和80%的業務量。 本文分享自華為雲社區《強渡大渡河!華為雲GaussDB支撐華為MetaERP系統全面替換》,作者: 華為雲頭條。 近日,在“英雄強渡大渡河”MetaERP表彰會上,華為宣佈實現自主可控的MetaERP研發,並完成對舊ER ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...