一. Sentinel 高可用環境準備 1.1 Sentinel 集群環境 1.2 Redis主庫庫環境,主從庫搭建在(redis 系列22 複製Replication 下) 二. Sentinel 配置說明 2.1 啟動Sentinel服務方法 對於啟動Sentinel服務有二種方法: (1)是使 ...
一. Sentinel 高可用環境準備
1.1 Sentinel 集群環境
環境 | 說明 |
操作系統版本 | CentOS 7.4.1708 |
IP地址 | 172.168.18.200 |
網關Gateway | 172.168.18.1 |
DNS | 172.168.16.11 |
三個sentinel服務埠 | 26379,26380,26381 |
Sentinel密碼 | 無 不設置 |
是否RDB持久化 | 不支持 |
是否 AOF持久化 | 不支持 |
1.2 Redis主庫庫環境,主從庫搭建在(redis 系列22 複製Replication 下)
主庫ip | 172.168.18.201 6379 |
從庫ip | 172.168.18.203 6379, 172.168.18.200 6379 |
二. Sentinel 配置說明
2.1 啟動Sentinel服務方法
對於啟動Sentinel服務有二種方法:
(1)是使用redis-sentinel程式來啟動 redis-sentinel sentinel.conf。
(2)是使用redis-server 程式來啟動一個運行在Sentinel模式下的Redis伺服器 redis-server sentinel.conf --sentinel。
啟動 Sentinel 實例必須指定相應的配置文件, 系統會使用配置文件來保存 Sentinel 的當前狀態, 併在 Sentinel 重啟時通過載入配置文件來進行狀態還原。查看redis-sentinel程式,只是一個軟鏈接,如下所示:
lrwxrwxrwx. 1 root root 12 12月 18 16:30 redis-sentinel -> redis-server
2.2 sentinel.conf 參數說明
下麵解說sentinel.conf文件中,所需的至少配置參數描述:
-- 監控主庫, 名稱:mymaster可以自定義, IP埠: 127.0.0.1 6379,判斷主庫客觀下線需要2個Sentinel 同意 sentinel monitor mymaster 127.0.0.1 6379 2 -- 認為主庫已經下線所需的毫秒數,例如下線狀態超過60000則判定已經下線。 sentinel down-after-milliseconds mymaster 60000 -- 指定故障轉移超時時間,以毫秒為單位,配置所有slaves指向新的master所需的最大時間 sentinel failover-timeout mymaster 180000 -- 在執行故障轉移時, 最多可以有多少個從伺服器同時對新的主伺服器進行同步,這個值設為 1 來保證每次只有一個slave 處於不能處理命令請求的狀態。如果這個數字越大,就意味著越 多的slave因為replication而不可用。 parallel-syncs mymaster 1 --設置連接master的密碼。 sentinel auth-pass mymaster 123456
三. Sentinel高可用搭建
只使用單個Sentinel進程來監控redis集群是不可靠的,當單個Sentinel進程down後,整個集群系統將無法按照預期的方式運行。所以有必要將sentinel集群,在IP 200的電腦上將啟動三個Sentinel進程,實現集群。
3.1 添加3個Sentinel.conf文件
在ip 為200的sentinel集群伺服器上,在redis運行目錄下,增加3個配置文件,名稱分別為:Sentinel_26379.conf, Sentinel_26380.conf, Sentinel_26381.conf。相關腳本如下:
-- Sentinel_26379.conf文件配置參數 protected-mode no port 26379 sentinel monitor mymaster 172.168.18.201 6379 2 sentinel auth-pass mymaster 123456 daemonize yes logfile "/usr/local/redis/bin/sentinel_26379.log" sentinel down-after-milliseconds mymaster 30000 sentinel parallel-syncs mymaster 1 sentinel failover-timeout mymaster 180000 -- Sentinel_26380.conf文件配置參數如下,其它參數與Sentinel_26379文件一樣 port 26380 logfile "/usr/local/redis/bin/sentinel_26380.log" -- Sentinel_26381.conf文件配置參數如下,其它參數與Sentinel_26379文件一樣 port 26381 logfile "/usr/local/redis/bin/sentinel_26381.log"
--增加後文件目錄如下:
[root@localhost bin]# pwd /usr/local/redis/bin [root@localhost bin]# ls -l 總用量 22012 -rw-r--r--. 1 root root 92 12月 18 16:38 dump.rdb -rw-r--r--. 1 root root 57765 12月 18 16:36 redis_bak.conf -rwxr-xr-x. 1 root root 2452648 12月 18 16:30 redis-benchmark -rwxr-xr-x. 1 root root 5754888 12月 18 16:30 redis-check-aof -rwxr-xr-x. 1 root root 5754888 12月 18 16:30 redis-check-rdb -rwxr-xr-x. 1 root root 2617840 12月 18 16:30 redis-cli -rw-r--r--. 1 root root 57762 12月 20 14:22 redis.conf lrwxrwxrwx. 1 root root 12 12月 18 16:30 redis-sentinel -> redis-server -rwxr-xr-x. 1 root root 5754888 12月 18 16:30 redis-server -rw-r--r--. 1 root root 7992 12月 20 14:22 sentinel_26379.conf -rw-r--r--. 1 root root 6887 12月 20 14:23 sentinel_26379.log -rw-r--r--. 1 root root 7992 12月 20 14:22 sentinel_26380.conf -rw-r--r--. 1 root root 7081 12月 20 14:23 sentinel_26380.log -rw-r--r--. 1 root root 7992 12月 20 14:22 sentinel_26381.conf -rw-r--r--. 1 root root 8465 12月 20 14:23 sentinel_26381.log -rw-r--r--. 1 root root 7710 12月 19 14:21 sentinel.confView Code
3.2 啟動三個sentinel服務
[root@localhost bin]# pwd /usr/local/redis/bin [root@localhost bin]# ./redis-sentinel ./sentinel_26379.conf [root@localhost bin]# ./redis-sentinel ./sentinel_26380.conf [root@localhost bin]# ./redis-sentinel ./sentinel_26381.conf
(1)查看進程信息
[root@localhost bin]# ps -ef | grep redis-sentinel root 7567 1 0 14:28 ? 00:00:00 ./redis-sentinel *:26379 [sentinel] root 7572 1 0 14:28 ? 00:00:00 ./redis-sentinel *:26380 [sentinel] root 7577 1 0 14:28 ? 00:00:00 ./redis-sentinel *:26381 [sentinel]View Code
(2)查看主庫與sentinel關聯信息(連接一個sentinel客戶端)
[root@localhost bin]# ./redis-cli -h 172.168.18.200 -p 26381 172.168.18.200:26381> sentinel master mymaster 1) "name" 2) "mymaster" 3) "ip" 4) "172.168.18.201" 5) "port" 6) "6379" 7) "runid" 8) "26cd40ba173490e2ceac61433211af7dc7716dda" 9) "flags" 10) "master" 11) "link-pending-commands" 12) "0" 13) "link-refcount" 14) "1" 15) "last-ping-sent" 16) "0" 17) "last-ok-ping-reply" 18) "169" 19) "last-ping-reply" 20) "169" 21) "down-after-milliseconds" 22) "30000" 23) "info-refresh" 24) "3982" 25) "role-reported" 26) "master" 27) "role-reported-time" 28) "24109" 29) "config-epoch" 30) "0" 31) "num-slaves" 32) "2" 33) "num-other-sentinels" 34) "2" 35) "quorum" 36) "2" 37) "failover-timeout" 38) "180000" 39) "parallel-syncs" 40) "1"View Code
(3)sentinel客戶端查看群集信息,可以看到此時主庫ip為201。
172.168.18.200:26380> info sentinel # Sentinel sentinel_masters:1 sentinel_tilt:0 sentinel_running_scripts:0 sentinel_scripts_queue_length:0 sentinel_simulate_failure_flags:0 master0:name=mymaster,status=ok,address=172.168.18.201:6379,slaves=2,sentinels=3
四.Sentinel高可用測試
4.1 測試主從同步
-- 主庫寫入一個鍵值對 [root@hsr bin]# ./redis-cli -h 172.168.18.201 -p 6379 -a 123456 172.168.18.201:6379> set mysentinel "hello" OK -- 從庫203 讀取了該鍵 [root@xuegod64 redis-4.0.6]# redis-cli -h 172.168.18.203 -p 6379 -a 123456 172.168.18.203:6379> get mysentinel "hello" -- 從庫200 讀取了該鍵 [root@localhost bin]# ./redis-cli -h 172.168.18.200 -p 6379 -a 123456 172.168.18.200:6379> get mysentinel "hello"
4.2 測試故障轉移
(1) 首先把主庫201的down掉
172.168.18.201:6379> shutdown not connected>
(2) 在sentinel客戶端查看群集信息,發現此時已經實現了故障轉移,已經將從庫 200 升級成為了新主庫。
172.168.18.200:26381> info sentinel # Sentinel sentinel_masters:1 sentinel_tilt:0 sentinel_running_scripts:0 sentinel_scripts_queue_length:0 sentinel_simulate_failure_flags:0 master0:name=mymaster,status=ok,address=172.168.18.200:6379,slaves=2,sentinels=3
(3) 在redis客戶端,查看ip 200的複製信息,角色已成了為master
172.168.18.200:6379> info replication
# Replication
role:master
connected_slaves:1
slave0:ip=172.168.18.203,port=6379,state=online,offset=204170,lag=0
master_replid:7464817ee3337cc8f2b508577287b0f0c385a859
master_replid2:0000000000000000000000000000000000000000
master_repl_offset:204170
second_repl_offset:-1
repl_backlog_active:1
repl_backlog_size:1048576
repl_backlog_first_byte_offset:190908
repl_backlog_histlen:13263
(4)此時ip200 的redis服務,由之前的只讀,變成了可讀寫。
172.168.18.200:6379> set mastername "ip200" OK --此時只有203一個從庫,成功讀取了該鍵 172.168.18.203:6379> get mastername "ip200"
(5)查看其中的一個sentinel日誌,下麵是關於故障轉移的相關信息:
[root@localhost bin]# cat sentinel_26379.log 8516:X 20 Dec 14:22:31.394 # +sdown master mymaster 172.168.18.201 6379 8516:X 20 Dec 14:22:31.496 # +new-epoch 1 8516:X 20 Dec 14:22:31.499 # +vote-for-leader 300fd3d5b5673885c17942c465ec7a09f8f8e2ad 1 8516:X 20 Dec 14:22:32.271 # +config-update-from sentinel 300fd3d5b5673885c17942c465ec7a09f8f8e2ad 172.168.18.200 26381 @ mymaster 172.168.18.201 6379 8516:X 20 Dec 14:22:32.272 # +switch-master mymaster 172.168.18.201 6379 172.168.18.200 6379 8516:X 20 Dec 14:22:32.272 * +slave slave 172.168.18.203:6379 172.168.18.203 6379 @ mymaster 172.168.18.200 6379 8516:X 20 Dec 14:22:32.272 * +slave slave 172.168.18.201:6379 172.168.18.201 6379 @ mymaster 172.168.18.200 6379 8516:X 20 Dec 14:23:02.323 # +sdown slave 172.168.18.201:6379 172.168.18.201 6379 @ mymaster 172.168.18.200 6379
總結:sentinel高可用是基於複製來實現的。在sentinel實現過程中:首先要先搭建好複製架構,並確保數據同步正常運行;最後在複製基礎上,再搭建sentinel群集服務架構,並測試好故障轉移切換。