一、Redis Cluster集群簡介 Redis Cluster是Redis官方提供的分散式解決方案,在3.0版本後推出的,有效地解決了Redis分散式的需求,當一個節點掛了可以快速的切換到另一個節點,當遇到單機記憶體、併發等瓶頸時,可以採用分散式方案要解決問題。 二、集群原理 Redis Clus ...
一、Redis Cluster集群簡介
Redis Cluster是Redis官方提供的分散式解決方案,在3.0版本後推出的,有效地解決了Redis分散式的需求,當一個節點掛了可以快速的切換到另一個節點,當遇到單機記憶體、併發等瓶頸時,可以採用分散式方案要解決問題。
二、集群原理
Redis Cluster架構圖
Redis Cluster集群採用了P2P的模式,完全去中心化,Redis把所有的Key分成了16384個slot,每個Redis實例負責其中一部分slot,集群中的所有信息(節點、埠、slot等),都通過節點之間定期的數據交換而更新,Redis客戶端可以在任意一個Redis實例發出請求,如果所需數據不在該實例中,通過重定向命令引導客戶端訪問所需的實例。
其結構特點:
所有的redis節點彼此互聯(PING-PONG機制),內部使用二進位協議優化傳輸速度和帶寬。
節點的fail是通過集群中超過半數的節點檢測失效時才生效。
客戶端與redis節點直連,不需要中間proxy層.客戶端不需要連接集群所有節點,連接集群中任何一個可用節點即可。
redis-cluster把所有的物理節點映射到[0-16383]slot上(不一定是平均分配),cluster負責維護node<->slot<->value。
Redis集群預分好16384個桶,當需要在Redis集群中放置一個key-value 時,根據CRC16(key) mod 16384的值,決定將一個key放到哪個桶中。
三、集群搭建
要讓集群正常工作至少需要3個主節點,一共就需要6個節點,其中3個為主節點,3個為從節點,為了簡單在下麵在一臺機器上演示,演示使用了linux伺服器上7000到7005的6個埠。
下載redis、解壓、安裝
wget http://download.redis.io/releases/redis-3.2.4.tar.gz
tar -zxvf redis-3.2.4.tar.gz
cd redis-3.2.4/
make&&makeinstall
將redis-trib.rb複製到/usr/local/bin目錄下
cdsrc
cp redis-trib.rb /usr/local/bin
創建Redis節點並修改配置文件
mkdirredis_cluster
cd redis_cluster/
mkdir700070017002700370047005
cp redis.conf redis_cluster/7000
cp redis.conf redis_cluster/7001
cp redis.conf redis_cluster/7002
cp redis.conf redis_cluster/7003
cp redis.conf redis_cluster/7004
cp redis.conf redis_cluster/7005
按下麵提示修改6個配置文件
port7000//埠7000,7001,7002...
bind 本機ip//預設ip為127.0.0.1 需要改為其他節點機器可訪問的ip 否則創建集群時無法訪問對應的埠,無法創建集群
daemonize yes//redis後臺運行
pidfile /var/run/redis_7000.pid//pidfile文件對應7000,7001,7002
cluster-enabled yes//開啟集群 把註釋#去掉
cluster-config-filenodes.conf//集群的配置 配置文件首次啟動自動生成
cluster-node-timeout15000//請求超時 預設15秒,可自行設置
appendonly yes//aof日誌開啟 有需要就開啟,它會每次寫操作都記錄一條日誌
dir /root/redis-3.2.4/redis_cluster/7000//目錄,埠7000,7001,7002... ,必須配置,否則無法啟動
啟動6個Redis實例,並且要指定配置文件,這些配置文件分別在各自的子目錄下麵
./src/redis-serverredis_cluster/7000/redis.conf
./src/redis-serverredis_cluster/7001/redis.conf
./src/redis-serverredis_cluster/7002/redis.conf
./src/redis-serverredis_cluster/7003/redis.conf
./src/redis-serverredis_cluster/7004/redis.conf
./src/redis-serverredis_cluster/7005/redis.conf
安裝ruby
yuminstallruby
yuminstall-y rubygems
geminstallredis -v3.2.2
使用redis-trib.rb創建集群
cd/usr/local/bin
./redis-trib.rb create --replicas1192.168.0.204:7000192.168.0.204:7001192.168.0.204:7002192.168.0.204:7003192.168.0.204:7004192.168.0.204:7005
運行結果如下:
Redis Cluster啟動成功截圖
如果一切順利,你會看到類似截圖上的消息: [OK] All 16384 slots covered, 這說明Redis的Cluster集群環境搭建成功。
簡單解釋一下這個命令:調用 ruby 命令來進行創建集群,--replicas 1 表示主從節點比例為 1:1,即一個主節點對應一個從節點;然後,預設給我們分配好了每個主節點和對應從節點服務,以及solt的大小,因為在Redis集群中有且僅有16383個solt,預設情況會給我們平均分配,當然你可以指定,後續的增減節點也可以重新分配。
M: 5237fa04bd793832b605d92ceb1d2f493da22e43 為主節點Id
S: b6b696c11bbffa8f9d4e6397ef4d27b0b54fea32 192.168.0.204:7003 replicates 5237fa04bd793832b605d92ceb1d2f493da22e43 從節點下對應主節點Id
目前來看,7000-7002 為主節點,7003-7005 為從節點,並向你確認是否同意這麼配置,輸入yes後,會開始集群創建。
四、驗證集群
通過Cluster Nodes命令和Cluster Info命令來看看集群效果
./redis-cli -c -h 192.168.0.204 -p 7001
cluster info
cluster nodes
運行結果如下:
運行成功截圖
在集群上通過增加數據來測試集群效果
運行結果如下:
限時領取免費Java相關資料,涵蓋了Java、Redis、MongoDB、MySQL、Zookeeper、Spring Cloud、Dubbo/Kafka、Hadoop、Hbase、Flink等高併發分散式、大數據、機器學習等技術。
資料傳送門:https://mp.weixin.qq.com/s/u2b_NVNuMuAPE0w4lc45fw
關註下方公眾號即可免費領取: