Redis Cluster搭建高可用Redis伺服器集群

来源:https://www.cnblogs.com/haha12/archive/2019/03/05/10480534.html
-Advertisement-
Play Games

一、Redis Cluster集群簡介 Redis Cluster是Redis官方提供的分散式解決方案,在3.0版本後推出的,有效地解決了Redis分散式的需求,當一個節點掛了可以快速的切換到另一個節點,當遇到單機記憶體、併發等瓶頸時,可以採用分散式方案要解決問題。 二、集群原理 Redis Clus ...


一、Redis Cluster集群簡介 

Redis Cluster是Redis官方提供的分散式解決方案,在3.0版本後推出的,有效地解決了Redis分散式的需求,當一個節點掛了可以快速的切換到另一個節點,當遇到單機記憶體、併發等瓶頸時,可以採用分散式方案要解決問題。

二、集群原理


 

Redis Cluster架構圖

Redis Cluster集群採用了P2P的模式,完全去中心化,Redis把所有的Key分成了16384個slot,每個Redis實例負責其中一部分slot,集群中的所有信息(節點、埠、slot等),都通過節點之間定期的數據交換而更新,Redis客戶端可以在任意一個Redis實例發出請求,如果所需數據不在該實例中,通過重定向命令引導客戶端訪問所需的實例。

其結構特點:

所有的redis節點彼此互聯(PING-PONG機制),內部使用二進位協議優化傳輸速度和帶寬。

節點的fail是通過集群中超過半數的節點檢測失效時才生效。

客戶端與redis節點直連,不需要中間proxy層.客戶端不需要連接集群所有節點,連接集群中任何一個可用節點即可。

redis-cluster把所有的物理節點映射到[0-16383]slot上(不一定是平均分配),cluster負責維護node<->slot<->value。

Redis集群預分好16384個桶,當需要在Redis集群中放置一個key-value 時,根據CRC16(key) mod 16384的值,決定將一個key放到哪個桶中。

三、集群搭建

要讓集群正常工作至少需要3個主節點,一共就需要6個節點,其中3個為主節點,3個為從節點,為了簡單在下麵在一臺機器上演示,演示使用了linux伺服器上7000到7005的6個埠。

下載redis、解壓、安裝

wget http://download.redis.io/releases/redis-3.2.4.tar.gz

tar -zxvf redis-3.2.4.tar.gz

cd redis-3.2.4/

make&&makeinstall

將redis-trib.rb複製到/usr/local/bin目錄下

cdsrc

cp redis-trib.rb /usr/local/bin

創建Redis節點並修改配置文件

mkdirredis_cluster

cd redis_cluster/

mkdir700070017002700370047005

cp redis.conf redis_cluster/7000

cp redis.conf redis_cluster/7001

cp redis.conf redis_cluster/7002

cp redis.conf redis_cluster/7003

cp redis.conf redis_cluster/7004

cp redis.conf redis_cluster/7005

按下麵提示修改6個配置文件

port7000//埠7000,7001,7002...        

bind 本機ip//預設ip為127.0.0.1 需要改為其他節點機器可訪問的ip 否則創建集群時無法訪問對應的埠,無法創建集群

daemonize    yes//redis後臺運行

pidfile  /var/run/redis_7000.pid//pidfile文件對應7000,7001,7002

cluster-enabled  yes//開啟集群  把註釋#去掉

cluster-config-filenodes.conf//集群的配置  配置文件首次啟動自動生成

cluster-node-timeout15000//請求超時  預設15秒,可自行設置

appendonly  yes//aof日誌開啟  有需要就開啟,它會每次寫操作都記錄一條日誌 

dir /root/redis-3.2.4/redis_cluster/7000//目錄,埠7000,7001,7002... ,必須配置,否則無法啟動     

啟動6個Redis實例,並且要指定配置文件,這些配置文件分別在各自的子目錄下麵

./src/redis-serverredis_cluster/7000/redis.conf

./src/redis-serverredis_cluster/7001/redis.conf

./src/redis-serverredis_cluster/7002/redis.conf

./src/redis-serverredis_cluster/7003/redis.conf

./src/redis-serverredis_cluster/7004/redis.conf

./src/redis-serverredis_cluster/7005/redis.conf

安裝ruby

yuminstallruby

yuminstall-y rubygems

geminstallredis -v3.2.2

使用redis-trib.rb創建集群

cd/usr/local/bin

./redis-trib.rb create --replicas1192.168.0.204:7000192.168.0.204:7001192.168.0.204:7002192.168.0.204:7003192.168.0.204:7004192.168.0.204:7005

運行結果如下:


 

Redis Cluster啟動成功截圖

如果一切順利,你會看到類似截圖上的消息: [OK] All 16384 slots covered, 這說明Redis的Cluster集群環境搭建成功。

簡單解釋一下這個命令:調用 ruby 命令來進行創建集群,--replicas 1 表示主從節點比例為 1:1,即一個主節點對應一個從節點;然後,預設給我們分配好了每個主節點和對應從節點服務,以及solt的大小,因為在Redis集群中有且僅有16383個solt,預設情況會給我們平均分配,當然你可以指定,後續的增減節點也可以重新分配。

M: 5237fa04bd793832b605d92ceb1d2f493da22e43 為主節點Id

S: b6b696c11bbffa8f9d4e6397ef4d27b0b54fea32 192.168.0.204:7003 replicates 5237fa04bd793832b605d92ceb1d2f493da22e43 從節點下對應主節點Id

目前來看,7000-7002 為主節點,7003-7005 為從節點,並向你確認是否同意這麼配置,輸入yes後,會開始集群創建。

四、驗證集群

通過Cluster Nodes命令和Cluster Info命令來看看集群效果

./redis-cli -c  -h 192.168.0.204 -p 7001

cluster info

cluster nodes

運行結果如下:


 

運行成功截圖

在集群上通過增加數據來測試集群效果

運行結果如下:


 

 

限時領取免費Java相關資料,涵蓋了Java、Redis、MongoDB、MySQL、Zookeeper、Spring Cloud、Dubbo/Kafka、Hadoop、Hbase、Flink等高併發分散式、大數據、機器學習等技術。

資料傳送門:https://mp.weixin.qq.com/s/u2b_NVNuMuAPE0w4lc45fw

 

關註下方公眾號即可免費領取:

Java碎碎念公眾號

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 先解釋下什麼是序列化 我們的對象並不只是存在記憶體中,還需要傳輸網路,或者保存起來下次再載入出來用,所以需要Java序列化技術。 Java序列化技術正是將對象轉變成一串由二進位位元組組成的數組,可以通過將二進位數據保存到磁碟或者傳輸網路,磁碟或者網路接收者可以在對象的屬類的模板上來反序列化類的對象,達到 ...
  • 前文 "日語編程語言"撫子" 第三版特色初探" 僅對語言的語法進行了初步瞭解. 之前的語言原型實現嘗試(如 "編程語言試驗之Antlr4+JavaScript實現"圈4"" )之後, 感覺有必要學習"撫子"的實現, 因為它也內建支持線上編程, 應該很有借鑒價值. 開發環境配置 主要參考 "kujir ...
  • 早先就聽聞FriceEngine已有中文介面版本, 可惜沒有機會嘗試. 經原作者 "@大笨蛋千里冰封" (Github賬號 @ice1000 )建議, 在FriceEngine的 "DSL封裝" 的介面基礎上, 添加了對應的中文介面. 下麵的代碼利用了新添的中文介面, 實現了一個圓形向方塊加速撞擊後 ...
  • 前文 "JavaScript實現ZLOGO子集: 前進+轉向" 的示例代碼很累贅, 因此嘗試實現基本的迴圈功能, 使得前面的11行代碼縮減為7行: 源碼和線上演示地址同前文. 修改的語法描述(圈3.g4)不多, 應該已經支持多層迴圈: 但實現上, 暫時先做了單層. 就是將迴圈體內的指令存放起來, 在 ...
  • 對伯樂線上所有文章進行爬取 使用scrapy框架 jobbolen.py 解決方案: 由於將一個字元串傳遞給數組導致錯誤 將jobbolen.py中的front_image改成[front_image] ...
  • 1:下載 ElasticSearch 鏡像 2:創建 ElasticSearch 容器: 啟動成功後在瀏覽器地址欄輸入:http://宿主機ip:9200 出現如下,表示啟動成功 3:但是如果 Java 使用 9300 埠連接ES 會出現如下錯誤 4:修改docker容器中的配置文件: 進入 co ...
  • 1. 首先新建文件夾media 後 在項目setting中具體配置: 在 setting 中的 TEMPLATES 下的 OPTIONS 中的 context_processors 中追加: TEMPLATES = [ { 'DIRS': [os.path.join(BASE_DIR, 'templ ...
  • python中根據字元串導入模塊module 需要導入importlib,使用其中的import_module方法 import importlib modname = 'datetime' datetime_module = importlib.import_module(modname) pri ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...