Redis Cluster搭建高可用Redis伺服器集群

来源:https://www.cnblogs.com/haha12/archive/2019/03/05/10480534.html
-Advertisement-
Play Games

一、Redis Cluster集群簡介 Redis Cluster是Redis官方提供的分散式解決方案,在3.0版本後推出的,有效地解決了Redis分散式的需求,當一個節點掛了可以快速的切換到另一個節點,當遇到單機記憶體、併發等瓶頸時,可以採用分散式方案要解決問題。 二、集群原理 Redis Clus ...


一、Redis Cluster集群簡介 

Redis Cluster是Redis官方提供的分散式解決方案,在3.0版本後推出的,有效地解決了Redis分散式的需求,當一個節點掛了可以快速的切換到另一個節點,當遇到單機記憶體、併發等瓶頸時,可以採用分散式方案要解決問題。

二、集群原理


 

Redis Cluster架構圖

Redis Cluster集群採用了P2P的模式,完全去中心化,Redis把所有的Key分成了16384個slot,每個Redis實例負責其中一部分slot,集群中的所有信息(節點、埠、slot等),都通過節點之間定期的數據交換而更新,Redis客戶端可以在任意一個Redis實例發出請求,如果所需數據不在該實例中,通過重定向命令引導客戶端訪問所需的實例。

其結構特點:

所有的redis節點彼此互聯(PING-PONG機制),內部使用二進位協議優化傳輸速度和帶寬。

節點的fail是通過集群中超過半數的節點檢測失效時才生效。

客戶端與redis節點直連,不需要中間proxy層.客戶端不需要連接集群所有節點,連接集群中任何一個可用節點即可。

redis-cluster把所有的物理節點映射到[0-16383]slot上(不一定是平均分配),cluster負責維護node<->slot<->value。

Redis集群預分好16384個桶,當需要在Redis集群中放置一個key-value 時,根據CRC16(key) mod 16384的值,決定將一個key放到哪個桶中。

三、集群搭建

要讓集群正常工作至少需要3個主節點,一共就需要6個節點,其中3個為主節點,3個為從節點,為了簡單在下麵在一臺機器上演示,演示使用了linux伺服器上7000到7005的6個埠。

下載redis、解壓、安裝

wget http://download.redis.io/releases/redis-3.2.4.tar.gz

tar -zxvf redis-3.2.4.tar.gz

cd redis-3.2.4/

make&&makeinstall

將redis-trib.rb複製到/usr/local/bin目錄下

cdsrc

cp redis-trib.rb /usr/local/bin

創建Redis節點並修改配置文件

mkdirredis_cluster

cd redis_cluster/

mkdir700070017002700370047005

cp redis.conf redis_cluster/7000

cp redis.conf redis_cluster/7001

cp redis.conf redis_cluster/7002

cp redis.conf redis_cluster/7003

cp redis.conf redis_cluster/7004

cp redis.conf redis_cluster/7005

按下麵提示修改6個配置文件

port7000//埠7000,7001,7002...        

bind 本機ip//預設ip為127.0.0.1 需要改為其他節點機器可訪問的ip 否則創建集群時無法訪問對應的埠,無法創建集群

daemonize    yes//redis後臺運行

pidfile  /var/run/redis_7000.pid//pidfile文件對應7000,7001,7002

cluster-enabled  yes//開啟集群  把註釋#去掉

cluster-config-filenodes.conf//集群的配置  配置文件首次啟動自動生成

cluster-node-timeout15000//請求超時  預設15秒,可自行設置

appendonly  yes//aof日誌開啟  有需要就開啟,它會每次寫操作都記錄一條日誌 

dir /root/redis-3.2.4/redis_cluster/7000//目錄,埠7000,7001,7002... ,必須配置,否則無法啟動     

啟動6個Redis實例,並且要指定配置文件,這些配置文件分別在各自的子目錄下麵

./src/redis-serverredis_cluster/7000/redis.conf

./src/redis-serverredis_cluster/7001/redis.conf

./src/redis-serverredis_cluster/7002/redis.conf

./src/redis-serverredis_cluster/7003/redis.conf

./src/redis-serverredis_cluster/7004/redis.conf

./src/redis-serverredis_cluster/7005/redis.conf

安裝ruby

yuminstallruby

yuminstall-y rubygems

geminstallredis -v3.2.2

使用redis-trib.rb創建集群

cd/usr/local/bin

./redis-trib.rb create --replicas1192.168.0.204:7000192.168.0.204:7001192.168.0.204:7002192.168.0.204:7003192.168.0.204:7004192.168.0.204:7005

運行結果如下:


 

Redis Cluster啟動成功截圖

如果一切順利,你會看到類似截圖上的消息: [OK] All 16384 slots covered, 這說明Redis的Cluster集群環境搭建成功。

簡單解釋一下這個命令:調用 ruby 命令來進行創建集群,--replicas 1 表示主從節點比例為 1:1,即一個主節點對應一個從節點;然後,預設給我們分配好了每個主節點和對應從節點服務,以及solt的大小,因為在Redis集群中有且僅有16383個solt,預設情況會給我們平均分配,當然你可以指定,後續的增減節點也可以重新分配。

M: 5237fa04bd793832b605d92ceb1d2f493da22e43 為主節點Id

S: b6b696c11bbffa8f9d4e6397ef4d27b0b54fea32 192.168.0.204:7003 replicates 5237fa04bd793832b605d92ceb1d2f493da22e43 從節點下對應主節點Id

目前來看,7000-7002 為主節點,7003-7005 為從節點,並向你確認是否同意這麼配置,輸入yes後,會開始集群創建。

四、驗證集群

通過Cluster Nodes命令和Cluster Info命令來看看集群效果

./redis-cli -c  -h 192.168.0.204 -p 7001

cluster info

cluster nodes

運行結果如下:


 

運行成功截圖

在集群上通過增加數據來測試集群效果

運行結果如下:


 

 

限時領取免費Java相關資料,涵蓋了Java、Redis、MongoDB、MySQL、Zookeeper、Spring Cloud、Dubbo/Kafka、Hadoop、Hbase、Flink等高併發分散式、大數據、機器學習等技術。

資料傳送門:https://mp.weixin.qq.com/s/u2b_NVNuMuAPE0w4lc45fw

 

關註下方公眾號即可免費領取:

Java碎碎念公眾號

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 先解釋下什麼是序列化 我們的對象並不只是存在記憶體中,還需要傳輸網路,或者保存起來下次再載入出來用,所以需要Java序列化技術。 Java序列化技術正是將對象轉變成一串由二進位位元組組成的數組,可以通過將二進位數據保存到磁碟或者傳輸網路,磁碟或者網路接收者可以在對象的屬類的模板上來反序列化類的對象,達到 ...
  • 前文 "日語編程語言"撫子" 第三版特色初探" 僅對語言的語法進行了初步瞭解. 之前的語言原型實現嘗試(如 "編程語言試驗之Antlr4+JavaScript實現"圈4"" )之後, 感覺有必要學習"撫子"的實現, 因為它也內建支持線上編程, 應該很有借鑒價值. 開發環境配置 主要參考 "kujir ...
  • 早先就聽聞FriceEngine已有中文介面版本, 可惜沒有機會嘗試. 經原作者 "@大笨蛋千里冰封" (Github賬號 @ice1000 )建議, 在FriceEngine的 "DSL封裝" 的介面基礎上, 添加了對應的中文介面. 下麵的代碼利用了新添的中文介面, 實現了一個圓形向方塊加速撞擊後 ...
  • 前文 "JavaScript實現ZLOGO子集: 前進+轉向" 的示例代碼很累贅, 因此嘗試實現基本的迴圈功能, 使得前面的11行代碼縮減為7行: 源碼和線上演示地址同前文. 修改的語法描述(圈3.g4)不多, 應該已經支持多層迴圈: 但實現上, 暫時先做了單層. 就是將迴圈體內的指令存放起來, 在 ...
  • 對伯樂線上所有文章進行爬取 使用scrapy框架 jobbolen.py 解決方案: 由於將一個字元串傳遞給數組導致錯誤 將jobbolen.py中的front_image改成[front_image] ...
  • 1:下載 ElasticSearch 鏡像 2:創建 ElasticSearch 容器: 啟動成功後在瀏覽器地址欄輸入:http://宿主機ip:9200 出現如下,表示啟動成功 3:但是如果 Java 使用 9300 埠連接ES 會出現如下錯誤 4:修改docker容器中的配置文件: 進入 co ...
  • 1. 首先新建文件夾media 後 在項目setting中具體配置: 在 setting 中的 TEMPLATES 下的 OPTIONS 中的 context_processors 中追加: TEMPLATES = [ { 'DIRS': [os.path.join(BASE_DIR, 'templ ...
  • python中根據字元串導入模塊module 需要導入importlib,使用其中的import_module方法 import importlib modname = 'datetime' datetime_module = importlib.import_module(modname) pri ...
一周排行
    -Advertisement-
    Play Games
  • 示例項目結構 在 Visual Studio 中創建一個 WinForms 應用程式後,項目結構如下所示: MyWinFormsApp/ │ ├───Properties/ │ └───Settings.settings │ ├───bin/ │ ├───Debug/ │ └───Release/ ...
  • [STAThread] 特性用於需要與 COM 組件交互的應用程式,尤其是依賴單線程模型(如 Windows Forms 應用程式)的組件。在 STA 模式下,線程擁有自己的消息迴圈,這對於處理用戶界面和某些 COM 組件是必要的。 [STAThread] static void Main(stri ...
  • 在WinForm中使用全局異常捕獲處理 在WinForm應用程式中,全局異常捕獲是確保程式穩定性的關鍵。通過在Program類的Main方法中設置全局異常處理,可以有效地捕獲並處理未預見的異常,從而避免程式崩潰。 註冊全局異常事件 [STAThread] static void Main() { / ...
  • 前言 給大家推薦一款開源的 Winform 控制項庫,可以幫助我們開發更加美觀、漂亮的 WinForm 界面。 項目介紹 SunnyUI.NET 是一個基於 .NET Framework 4.0+、.NET 6、.NET 7 和 .NET 8 的 WinForm 開源控制項庫,同時也提供了工具類庫、擴展 ...
  • 說明 該文章是屬於OverallAuth2.0系列文章,每周更新一篇該系列文章(從0到1完成系統開發)。 該系統文章,我會儘量說的非常詳細,做到不管新手、老手都能看懂。 說明:OverallAuth2.0 是一個簡單、易懂、功能強大的許可權+可視化流程管理系統。 有興趣的朋友,請關註我吧(*^▽^*) ...
  • 一、下載安裝 1.下載git 必須先下載並安裝git,再TortoiseGit下載安裝 git安裝參考教程:https://blog.csdn.net/mukes/article/details/115693833 2.TortoiseGit下載與安裝 TortoiseGit,Git客戶端,32/6 ...
  • 前言 在項目開發過程中,理解數據結構和演算法如同掌握蓋房子的秘訣。演算法不僅能幫助我們編寫高效、優質的代碼,還能解決項目中遇到的各種難題。 給大家推薦一個支持C#的開源免費、新手友好的數據結構與演算法入門教程:Hello演算法。 項目介紹 《Hello Algo》是一本開源免費、新手友好的數據結構與演算法入門 ...
  • 1.生成單個Proto.bat內容 @rem Copyright 2016, Google Inc. @rem All rights reserved. @rem @rem Redistribution and use in source and binary forms, with or with ...
  • 一:背景 1. 講故事 前段時間有位朋友找到我,說他的窗體程式在客戶這邊出現了卡死,讓我幫忙看下怎麼回事?dump也生成了,既然有dump了那就上 windbg 分析吧。 二:WinDbg 分析 1. 為什麼會卡死 窗體程式的卡死,入口門檻很低,後續往下分析就不一定了,不管怎麼說先用 !clrsta ...
  • 前言 人工智慧時代,人臉識別技術已成為安全驗證、身份識別和用戶交互的關鍵工具。 給大家推薦一款.NET 開源提供了強大的人臉識別 API,工具不僅易於集成,還具備高效處理能力。 本文將介紹一款如何利用這些API,為我們的項目添加智能識別的亮點。 項目介紹 GitHub 上擁有 1.2k 星標的 C# ...