Redis配置集群教程,介紹Redis集群數據分片,節點通訊,然後準備環境,搭建集群,測試集群使用 ...
概述
Redis Cluster provides a way to run a Redis installation where data is automatically sharded across multiple Redis nodes
Redis集群提供一個在多個Redis節點數據自動共用的方式,簡單來說就是添加伺服器的數量,達到
- 高可用,讓Redis服務長時間有效運行,不會因為硬體/軟體問題導致不可用
- 可擴展性,動態添加節點/刪除節點,達到增加性能/減少伺服器資源
- 分散式,節點可以不是
- 容錯,若其中一臺伺服器故障掛了Redis也能繼續使用(前提是有從節點並且可用)
Redis集群數據分片
Redis 集群沒有使用一致性hash, 而是引入了 哈希槽的概念.
Redis 集群有16384個哈希槽,每個key通過CRC16校驗後對16384取模來決定放置哪個槽.集群的每個節點負責一部分hash槽,舉個例子,比如當前集群有3個節點,那麼:
- 節點 A 包含 0 到 5500號哈希槽.
- 節點 B 包含5501 到 11000 號哈希槽.
- 節點 C 包含11001 到 16384號哈希槽
這種結構的好處就是非常容易增加/刪除節點,並且不會影響集群的使用
- 增加節點,將原來節點的分配部分哈希槽給新節點
- 刪除節點,將刪除的節點哈希槽分配給現有的節點上即可
Redis集群節點通訊
因為Redis集群是把數據分佈存放在不同客戶端,這樣做的好處就是減少每台機器的壓力,提高併發處理能力,因為我們只要進入任一節點,即可使用整個集群,這就需要節點之間互相通訊,這個是Redis內部處理。
Every Redis Cluster node requires two TCP connections open. The normal Redis TCP port used to serve clients, for example 6379, plus the port obtained by adding 10000 to the data port, so 16379 in the example
每一個Redis集群節點都是需要兩個埠,一個用於客戶端連接,一個用於節點數據傳輸(Ping-Pong機制),數據埠是在客戶埠的基礎上加10000,例如,埠6379,數據埠16379,所以在多台機器部署集群需要註意防火牆是否把數據屏蔽 。
環境準備
1.安裝Redis 下載地址
2. 安裝Ruby,因為Redis集群管理是用ruby開發 下載地址
3. 下載edis-trib.rb文件,放在Redis安裝文件夾內 下載地址
4. 安裝Ruby的Redis驅動,直接在cmd執行(安裝的時候把Ruby放在環境變數,否則進到Bin執行)
gem install redis
出現Successfully installed 代表安裝成功
搭建Redis集群
Redis集群至少需要3個節點,就按最少的3個節點搭建一個集群
1. 準備3個配置文件,修改各自的埠和appendfilename,當然如果在3台機器上運行,什麼都不需要修改
port 6379 cluster-enabled yes cluster-config-file nodes.6379.conf cluster-node-timeout 5000 appendonly yes appendfilename "appendonly.6379.aof"
2. 準備bat文件啟動3個redis節點(非必須,可以手動cmd啟動,配置相應配置文件),bat文件需要在redis安裝目錄執行
title redis-cluster start redis-server.exe redis.6379.conf start redis-server.exe redis.6380.conf start redis-server.exe redis.6381.conf
3. 用redis-trib創建集群,在cmd執行
redis-trib.rb create 127.0.0.1:6379 127.0.0.1:6380 127.0.0.1:6381
執行完成,輸入yes更新配置文件,最終輸出各個節點信息,哈希槽分配情況。
至此,Redis集群已經搭建好,這裡只有3個主節點,若想從節點,只需多加3個Redis節點,命令加上--replicas參數就可以。
測試Redis集群
進入redis-cli集群模式
redis-cli -c
可以看出,寫入讀取,Redis根據Key計算的hash值在各個節點自動重定向
打開剛剛開啟的幾個Redis實例,可以看出他們之前一直在不斷通訊
轉發請標明出處:https://www.cnblogs.com/WilsonPan/p/12643221.html
參考文章
Redis cluster tutorial – Redis