如何判斷redis慢了

来源:https://www.cnblogs.com/a393060727/archive/2023/04/28/17361075.html
-Advertisement-
Play Games

來自 https://mp.weixin.qq.com/s?__biz=MzIzOTU0NTQ0MA==&mid=2247532967&idx=1&sn=19790c981aa33502aa1e3a8abe9cd064&chksm=e92a7ca8de5df5befc6cc534cbabdb847e ...


來自

https://mp.weixin.qq.com/s?__biz=MzIzOTU0NTQ0MA==&mid=2247532967&idx=1&sn=19790c981aa33502aa1e3a8abe9cd064&chksm=e92a7ca8de5df5befc6cc534cbabdb847eff41d0b7cef373191e49df38211e74f8064bd5b62f&from=industrynews&version=4.1.3.6112&platform=win#rd

、Redis為什麼變慢了

 

1.Redis真的變慢了嗎?

對 Redis 進行基準性能測試例如,我的機器配置比較低,當延遲為 2ms 時,我就認為 Redis 變慢了,但是如果你的硬體配置比較高,那麼在你的運行環境下,可能延遲是 0.5ms 時就可以認為 Redis 變慢了。所以,你只有瞭解了你的 Redis 在生產環境伺服器上的基準性能,才能進一步評估,當其延遲達到什麼程度時,才認為 Redis 確實變慢了。為了避免業務伺服器到 Redis 伺服器之間的網路延遲,你需要直接在 Redis 伺服器上測試實例的響應延遲情況。執行以下命令,就可以測試出這個實例 60 秒內的最大響應延遲:


./redis-cli --intrinsic-latency 120Max latency so far: 17 microseconds.Max latency so far: 44 microseconds.Max latency so far: 94 microseconds.Max latency so far: 110 microseconds.Max latency so far: 119 microseconds.
36481658 total runs (avg latency: 3.2893 microseconds / 3289.32 nanoseconds per run).Worst run took 36x longer than the average latency.

從輸出結果可以看到,這 60 秒內的最大響應延遲為 119 微秒(0.119毫秒)。你還可以使用以下命令,查看一段時間內 Redis 的最小、最大、平均訪問延遲


$ redis-cli -h 127.0.0.1 -p 6379 --latency-history -i 1min: 0, max: 1, avg: 0.13 (100 samples) -- 1.01 seconds rangemin: 0, max: 1, avg: 0.12 (99 samples) -- 1.01 seconds rangemin: 0, max: 1, avg: 0.13 (99 samples) -- 1.01 seconds rangemin: 0, max: 1, avg: 0.10 (99 samples) -- 1.01 seconds rangemin: 0, max: 1, avg: 0.13 (98 samples) -- 1.00 seconds rangemin: 0, max: 1, avg: 0.08 (99 samples) -- 1.01 seconds range

如果你觀察到的 Redis 運行時延遲是其基線性能的 2 倍及以上,就可以認定 Redis 變慢了。

網路對 Redis 性能的影響,一個簡單的方法是用 iPerf 這樣的工具測試網路極限帶寬。


伺服器端
# iperf -s -p 12345 -i 1 -Miperf: option requires an argument -- M------------------------------------------------------------Server listening on TCP port 12345TCP window size: 4.00 MByte (default)------------------------------------------------------------[ 4] local 172.20.0.113 port 12345 connected with 172.20.0.114 port 56796[ ID] Interval Transfer Bandwidth[ 4] 0.0- 1.0 sec 614 MBytes 5.15 Gbits/sec[ 4] 1.0- 2.0 sec 622 MBytes 5.21 Gbits/sec[ 4] 2.0- 3.0 sec 647 MBytes 5.42 Gbits/sec[ 4] 3.0- 4.0 sec 644 MBytes 5.40 Gbits/sec[ 4] 4.0- 5.0 sec 651 MBytes 5.46 Gbits/sec[ 4] 5.0- 6.0 sec 652 MBytes 5.47 Gbits/sec[ 4] 6.0- 7.0 sec 669 MBytes 5.61 Gbits/sec[ 4] 7.0- 8.0 sec 670 MBytes 5.62 Gbits/sec[ 4] 8.0- 9.0 sec 667 MBytes 5.59 Gbits/sec[ 4] 9.0-10.0 sec 667 MBytes 5.60 Gbits/sec[ 4] 0.0-10.0 sec 6.35 GBytes 5.45 Gbits/sec客戶端
# iperf -c 伺服器端IP -p 12345 -i 1 -t 10 -w 20K------------------------------------------------------------Client connecting to 172.20.0.113, TCP port 12345TCP window size: 40.0 KByte (WARNING: requested 20.0 KByte)------------------------------------------------------------[ 3] local 172.20.0.114 port 56796 connected with 172.20.0.113 port 12345[ ID] Interval Transfer Bandwidth[ 3] 0.0- 1.0 sec 614 MBytes 5.15 Gbits/sec[ 3] 1.0- 2.0 sec 622 MBytes 5.21 Gbits/sec[ 3] 2.0- 3.0 sec 646 MBytes 5.42 Gbits/sec[ 3] 3.0- 4.0 sec 644 MBytes 5.40 Gbits/sec[ 3] 4.0- 5.0 sec 651 MBytes 5.46 Gbits/sec[ 3] 5.0- 6.0 sec 652 MBytes 5.47 Gbits/sec[ 3] 6.0- 7.0 sec 669 MBytes 5.61 Gbits/sec[ 3] 7.0- 8.0 sec 670 MBytes 5.62 Gbits/sec[ 3] 8.0- 9.0 sec 667 MBytes 5.59 Gbits/sec[ 3] 9.0-10.0 sec 668 MBytes 5.60 Gbits/sec[ 3] 0.0-10.0 sec 6.35 GBytes 5.45 Gbits/sec

 

2.使用複雜度過高的命令首先,第一步,你需要去查看一下 Redis 的慢日誌(slowlog)。Redis 提供了慢日誌命令的統計功能,它記錄了有哪些命令在執行時耗時比較久。查看 Redis 慢日誌之前,你需要設置慢日誌的閾值。例如,設置慢日誌的閾值為 5 毫秒,並且保留最近 500 條慢日誌記錄:


# 命令執行耗時超過 5 毫秒,記錄慢日誌CONFIG SET slowlog-log-slower-than 5000# 只保留最近 500 條慢日誌CONFIG SET slowlog-max-len 500

1.經常使用 O(N) 以上複雜度的命令,例如 SORT、SUNION、ZUNIONSTORE 聚合類命令2.使用 O(N) 複雜度的命令,但 N 的值非常大第一種情況導致變慢的原因在於,Redis 在操作記憶體數據時,時間複雜度過高,要花費更多的 CPU 資源。第二種情況導致變慢的原因在於,Redis 一次需要返回給客戶端的數據過多,更多時間花費在數據協議的組裝和網路傳輸過程中。另外,我們還可以從資源使用率層面來分析,如果你的應用程式操作 Redis 的 OPS 不是很大,但 Redis 實例的 CPU 使用率卻很高,那麼很有可能是使用了複雜度過高的命令導致的。

 

3.操作bigkey

如果你查詢慢日誌發現,並不是複雜度過高的命令導致的,而都是 SET / DEL 這種簡單命令出現在慢日誌中,那麼你就要懷疑你的實例否寫入了 bigkey。


redis-cli -h 127.0.0.1 -p 6379 --bigkeys -i 1-------- summary -------Sampled 829675 keys in the keyspace!Total key length in bytes is 10059825 (avg len 12.13)Biggest string found 'key:291880' has 10 bytesBiggest   list found 'mylist:004' has 40 itemsBiggest    set found 'myset:2386' has 38 membersBiggest   hash found 'myhash:3574' has 37 fieldsBiggest   zset found 'myzset:2704' has 42 members36313 strings with 363130 bytes (04.38% of keys, avg size 10.00)787393 lists with 896540 items (94.90% of keys, avg size 1.14)1994 sets with 40052 members (00.24% of keys, avg size 20.09)1990 hashs with 39632 fields (00.24% of keys, avg size 19.92)1985 zsets with 39750 members (00.24% of keys, avg size 20.03)

這裡我需要提醒你的是,當執行這個命令時,要註意 2 個問題:

1.對線上實例進行 bigkey 掃描時,Redis 的 OPS 會突增,為了降低掃描過程中對 Redis 的影響,最好控制一下掃描的頻率,指定 -i 參數即可,它表示掃描過程中每次掃描後休息的時間間隔,單位是秒2.掃描結果中,對於容器類型(List、Hash、Set、ZSet)的 key,只能掃描出元素最多的 key。但一個 key 的元素多,不一定表示占用記憶體也多,你還需要根據業務情況,進一步評估記憶體占用情況。

 

4.集中過期

如果你發現,平時在操作 Redis 時,並沒有延遲很大的情況發生,但在某個時間點突然出現一波延時,其現象表現為:變慢的時間點很有規律,例如某個整點,或者每間隔多久就會發生一波延遲。如果是出現這種情況,那麼你需要排查一下,業務代碼中是否存在設置大量 key 集中過期的情況。如果有大量的 key 在某個固定時間點集中過期,在這個時間點訪問 Redis 時,就有可能導致延時變大。Redis 的過期數據採用被動過期 + 主動過期兩種策略:1.被動過期:只有當訪問某個 key 時,才判斷這個 key 是否已過期,如果已過期,則從實例中刪除2.主動過期:Redis 內部維護了一個定時任務,預設每隔 100 毫秒(1秒10次)就會從全局的過期哈希表中隨機取出 20 個 key,然後刪除其中過期的 key,如果過期 key 的比例超過了 25%,則繼續重覆此過程,直到過期 key 的比例下降到 25% 以下,或者這次任務的執行耗時超過了 25 毫秒,才會退出迴圈註意,這個主動過期 key 的定時任務,是在 Redis 主線程中執行的。也就是說如果在執行主動過期的過程中,出現了需要大量刪除過期 key 的情況,那麼此時應用程式在訪問 Redis 時,必須要等待這個過期任務執行結束,Redis 才可以服務這個客戶端請求。如果此時需要過期刪除的是一個 bigkey,那麼這個耗時會更久。而且,這個操作延遲的命令並不會記錄在慢日誌中。因為慢日誌中只記錄一個命令真正操作記憶體數據的耗時,而 Redis 主動刪除過期 key 的邏輯,是在命令真正執行之前執行的。

 

5.實例記憶體達到上限

當我們把 Redis 當做純緩存使用時,通常會給這個實例設置一個記憶體上限 maxmemory,然後設置一個數據淘汰策略。當 Redis 記憶體達到 maxmemory 後,每次寫入新的數據之前,Redis 必須先從實例中踢出一部分數據,讓整個實例的記憶體維持在 maxmemory 之下,然後才能把新數據寫進來。這個踢出舊數據的邏輯也是需要消耗時間的,而具體耗時的長短,要取決於你配置的淘汰策略:

  • allkeys-lru:不管 key 是否設置了過期,淘汰最近最少訪問的 key
  • volatile-lru:只淘汰最近最少訪問、並設置了過期時間的 key
  • allkeys-random:不管 key 是否設置了過期,隨機淘汰 key
  • volatile-random:只隨機淘汰設置了過期時間的 key
  • allkeys-ttl:不管 key 是否設置了過期,淘汰即將過期的 key
  • noeviction:不淘汰任何 key,實例記憶體達到 maxmeory 後,再寫入新數據直接返回錯誤
  • allkeys-lfu:不管 key 是否設置了過期,淘汰訪問頻率最低的 key(4.0+版本支持)
  • volatile-lfu:只淘汰訪問頻率最低、並設置了過期時間 key(4.0+版本支持)

一般最常使用的是 allkeys-lru / volatile-lru 淘汰策略,它們的處理邏輯是,每次從實例中隨機取出一批 key(這個數量可配置),然後淘汰一個最少訪問的 key,之後把剩下的 key 暫存到一個池子中,繼續隨機取一批 key,並與之前池子中的 key 比較,再淘汰一個最少訪問的 key。以此往複,直到實例記憶體降到 maxmemory 之下。

需要註意的是,Redis 的淘汰數據的邏輯與刪除過期 key 的一樣,也是在命令真正執行之前執行的,也就是說它也會增加我們操作 Redis 的延遲,而且,寫 OPS 越高,延遲也會越明顯。

 

如果此時你的 Redis 實例中還存儲了 bigkey,那麼在淘汰刪除 bigkey 釋放記憶體時,也會耗時比較久。

 

6.fork耗時嚴重

當 Redis 開啟了後臺 RDB 和 AOF rewrite 後,在執行時,它們都需要主進程創建出一個子進程進行數據的持久化。

主進程創建子進程,會調用操作系統提供的 fork 函數。

而 fork 在執行過程中,主進程需要拷貝自己的記憶體頁表給子進程,如果這個實例很大,那麼這個拷貝的過程也會比較耗時。

而且這個 fork 過程會消耗大量的 CPU 資源,在完成 fork 之前,整個 Redis 實例會被阻塞住,無法處理任何客戶端請求。

如果此時你的 CPU 資源本來就很緊張,那麼 fork 的耗時會更長,甚至達到秒級,這會嚴重影響 Redis 的性能。

那如何確認確實是因為 fork 耗時導致的 Redis 延遲變大呢?

你可以在 Redis 上執行 INFO 命令,查看 latest_fork_usec 項,單位微秒。


# 上一次 fork 耗時,單位微秒latest_fork_usec:59477

這個時間就是主進程在 fork 子進程期間,整個實例阻塞無法處理客戶端請求的時間。

如果你發現這個耗時很久,就要警惕起來了,這意味在這期間,你的整個 Redis 實例都處於不可用的狀態。

除了數據持久化會生成 RDB 之外,當主從節點第一次建立數據同步時,主節點也創建子進程生成 RDB,然後發給從節點進行一次全量同步,所以,這個過程也會對 Redis 產生性能影響。

 

 

7.開啟記憶體大頁

除了上面講到的子進程 RDB 和 AOF rewrite 期間,fork 耗時導致的延時變大之外,這裡還有一個方面也會導致性能問題,這就是操作系統是否開啟了記憶體大頁機制

什麼是記憶體大頁?

我們都知道,應用程式向操作系統申請記憶體時,是按記憶體頁進行申請的,而常規的記憶體頁大小是 4KB。

Linux 內核從 2.6.38 開始,支持了記憶體大頁機制,該機制允許應用程式以 2MB 大小為單位,向操作系統申請記憶體。

應用程式每次向操作系統申請的記憶體單位變大了,但這也意味著申請記憶體的耗時變長。

這對 Redis 會有什麼影響呢?

當 Redis 在執行後臺 RDB,採用 fork 子進程的方式來處理。但主進程 fork 子進程後,此時的主進程依舊是可以接收寫請求的,而進來的寫請求,會採用 Copy On Write(寫時複製)的方式操作記憶體數據。

也就是說,主進程一旦有數據需要修改,Redis 並不會直接修改現有記憶體中的數據,而是先將這塊記憶體數據拷貝出來,再修改這塊新記憶體的數據,這就是所謂的「寫時複製」。

寫時複製你也可以理解成,誰需要發生寫操作,誰就需要先拷貝,再修改。

這樣做的好處是,父進程有任何寫操作,並不會影響子進程的數據持久化(子進程只持久化 fork 這一瞬間整個實例中的所有數據即可,不關心新的數據變更,因為子進程只需要一份記憶體快照,然後持久化到磁碟上)。

但是請註意,主進程在拷貝記憶體數據時,這個階段就涉及到新記憶體的申請,如果此時操作系統開啟了記憶體大頁,那麼在此期間,客戶端即便只修改 10B 的數據,Redis 在申請記憶體時也會以 2MB 為單位向操作系統申請,申請記憶體的耗時變長,進而導致每個寫請求的延遲增加,影響到 Redis 性能。

同樣地,如果這個寫請求操作的是一個 bigkey,那主進程在拷貝這個 bigkey 記憶體塊時,一次申請的記憶體會更大,時間也會更久。可見,bigkey 在這裡又一次影響到了性能。

 

8.開啟AOF

前面我們分析了 RDB 和 AOF rewrite 對 Redis 性能的影響,主要關註點在 fork 上。

其實,關於數據持久化方面,還有影響 Redis 性能的因素,這次我們重點來看 AOF 數據持久化。

如果你的 AOF 配置不合理,還是有可能會導致性能問題。

當 Redis 開啟 AOF 後,其工作原理如下:

1.Redis 執行寫命令後,把這個命令寫入到 AOF 文件記憶體中(write 系統調用)

2.Redis 根據配置的 AOF 刷盤策略,把 AOF 記憶體數據刷到磁碟上(fsync 系統調用)

為了保證 AOF 文件數據的安全性,Redis 提供了 3 種刷盤機制:

1.appendfsync always:主線程每次執行寫操作後立即刷盤,此方案會占用比較大的磁碟 IO 資源,但數據安全性最高

2.appendfsync no:主線程每次寫操作只寫記憶體就返回,記憶體數據什麼時候刷到磁碟,交由操作系統決定,此方案對性能影響最小,但數據安全性也最低,Redis 宕機時丟失的數據取決於操作系統刷盤時機

3.appendfsync everysec:主線程每次寫操作只寫記憶體就返回,然後由後臺線程每隔 1 秒執行一次刷盤操作(觸發fsync系統調用),此方案對性能影響相對較小,但當 Redis 宕機時會丟失 1 秒的數據

看到這裡,我猜你肯定和大多數人的想法一樣,選比較折中的方案 appendfsync everysec 就沒問題了吧?

這個方案優勢在於,Redis 主線程寫完記憶體後就返回,具體的刷盤操作是放到後臺線程中執行的,後臺線程每隔 1 秒把記憶體中的數據刷到磁碟中。

這種方案既兼顧了性能,又儘可能地保證了數據安全,是不是覺得很完美?

但是,這裡我要給你潑一盆冷水了,採用這種方案你也要警惕一下,因為這種方案還是存在導致 Redis 延遲變大的情況發生,甚至會阻塞整個 Redis。

你試想這樣一種情況:當 Redis 後臺線程在執行 AOF 文件刷盤時,如果此時磁碟的 IO 負載很高,那這個後臺線程在執行刷盤操作(fsync系統調用)時就會被阻塞住。

此時的主線程依舊會接收寫請求,緊接著,主線程又需要把數據寫到文件記憶體中(write 系統調用),當主線程使用後臺子線程執行了一次 fsync,需要再次把新接收的操作記錄寫回磁碟時,如果主線程發現上一次的 fsync 還沒有執行完,那麼它就會阻塞。所以,如果後臺子線程執行的 fsync 頻繁阻塞的話(比如 AOF 重寫占用了大量的磁碟 IO 帶寬),主線程也會阻塞,導致 Redis 性能變慢。

 

看到了麽?在這個過程中,主線程依舊有阻塞的風險。

所以,儘管你的 AOF 配置為 appendfsync everysec,也不能掉以輕心,要警惕磁碟壓力過大導致的 Redis 有性能問題。

那什麼情況下會導致磁碟 IO 負載過大?以及如何解決這個問題呢?

我總結了以下幾種情況,你可以參考進行問題排查:

1.子進程正在執行 AOF rewrite,這個過程會占用大量的磁碟 IO 資源

2.有其他應用程式在執行大量的寫文件操作,也會占用磁碟 IO 資源

對於情況1,說白了就是,Redis 的 AOF 後臺子線程刷盤操作,撞上了子進程 AOF rewrite!

 

9.綁定CPU

很多時候,我們在部署服務時,為了提高服務性能,降低應用程式在多個 CPU 核心之間的上下文切換帶來的性能損耗,通常採用的方案是進程綁定 CPU 的方式提高性能。

我們都知道,一般現代的伺服器會有多個 CPU,而每個 CPU 又包含多個物理核心,每個物理核心又分為多個邏輯核心,每個物理核下的邏輯核共用 L1/L2 Cache。

而 Redis Server 除了主線程服務客戶端請求之外,還會創建子進程、子線程。

其中子進程用於數據持久化,而子線程用於執行一些比較耗時操作,例如非同步釋放 fd、非同步 AOF 刷盤、非同步 lazy-free 等等。

如果你把 Redis 進程只綁定了一個 CPU 邏輯核心上,那麼當 Redis 在進行數據持久化時,fork 出的子進程會繼承父進程的 CPU 使用偏好。

而此時的子進程會消耗大量的 CPU 資源進行數據持久化(把實例數據全部掃描出來需要耗費CPU),這就會導致子進程會與主進程發生 CPU 爭搶,進而影響到主進程服務客戶端請求,訪問延遲變大。

這就是 Redis 綁定 CPU 帶來的性能問題。

 

10.使用Swap

如果你發現 Redis 突然變得非常慢,每次的操作耗時都達到了幾百毫秒甚至秒級,那此時你就需要檢查 Redis 是否使用到了 Swap,在這種情況下 Redis 基本上已經無法提供高性能的服務了。

什麼是 Swap?為什麼使用 Swap 會導致 Redis 的性能下降?

如果你對操作系統有些瞭解,就會知道操作系統為了緩解記憶體不足對應用程式的影響,允許把一部分記憶體中的數據換到磁碟上,以達到應用程式對記憶體使用的緩衝,這些記憶體數據被換到磁碟上的區域,就是 Swap。

問題就在於,當記憶體中的數據被換到磁碟上後,Redis 再訪問這些數據時,就需要從磁碟上讀取,訪問磁碟的速度要比訪問記憶體慢幾百倍!

尤其是針對 Redis 這種對性能要求極高、性能極其敏感的資料庫來說,這個操作延時是無法接受的。

此時,你需要檢查 Redis 機器的記憶體使用情況,確認是否存在使用了 Swap。

你可以通過以下方式來查看 Redis 進程是否使用到了 Swap:


# 先找到 Redis 的進程 ID$ ps -aux | grep redis-server# 查看 Redis Swap 使用情況$ cat /proc/$pid/smaps | egrep '^(Swap|Size)'

輸出結果如下:


Size:               1256 kBSwap:                  0 kBSize:                  4 kBSwap:                  0 kBSize:                132 kBSwap:                  0 kBSize:              63488 kBSwap:                  0 kBSize:                132 kBSwap:                  0 kBSize:              65404 kBSwap:                  0 kBSize:            1921024 kBSwap:                  0 kB

每一行 Size 表示 Redis 所用的一塊記憶體大小,Size 下麵的 Swap 就表示這塊 Size 大小的記憶體,有多少數據已經被換到磁碟上了,如果這兩個值相等,說明這塊記憶體的數據都已經完全被換到磁碟上了。

如果只是少量數據被換到磁碟上,例如每一塊 Swap 占對應 Size 的比例很小,那影響並不是很大。如果是幾百兆甚至上 GB 的記憶體被換到了磁碟上,那麼你就需要警惕了,這種情況 Redis 的性能肯定會急劇下降。

 

11.碎片整理

Redis 的數據都存儲在記憶體中,當我們的應用程式頻繁修改 Redis 中的數據時,就有可能會導致 Redis 產生記憶體碎片。

記憶體碎片會降低 Redis 的記憶體使用率,我們可以通過執行 INFO 命令,得到這個實例的記憶體碎片率:


# Memoryused_memory:5709194824used_memory_human:5.32Gused_memory_rss:8264855552used_memory_rss_human:7.70G...mem_fragmentation_ratio:1.45

這個記憶體碎片率是怎麼計算的?

很簡單,mem_fragmentation_ratio = used_memory_rss / used_memory。

其中 used_memory 表示 Redis 存儲數據的記憶體大小,而 used_memory_rss 表示操作系統實際分配給 Redis 進程的大小。

如果 mem_fragmentation_ratio > 1.5,說明記憶體碎片率已經超過了 50%,這時我們就需要採取一些措施來降低記憶體碎片了。

解決的方案一般如下:

1.如果你使用的是 Redis 4.0 以下版本,只能通過重啟實例來解決

2.如果你使用的是 Redis 4.0 版本,它正好提供了自動碎片整理的功能,可以通過配置開啟碎片自動整理。

但是,開啟記憶體碎片整理,它也有可能會導致 Redis 性能下降。

原因在於,Redis 的碎片整理工作是也在主線程中執行的,當其進行碎片整理時,必然會消耗 CPU 資源,產生更多的耗時,從而影響到客戶端的請求。

所以,當你需要開啟這個功能時,最好提前測試評估它對 Redis 的影響。

Redis 碎片整理的參數配置如下:

# 開啟自動記憶體碎片整理(總開關)activedefrag yes
# 記憶體使用 100MB 以下,不進行碎片整理active-defrag-ignore-bytes 100mb
# 記憶體碎片率超過 10%,開始碎片整理active-defrag-threshold-lower 10# 記憶體碎片率超過 100%,盡最大努力碎片整理active-defrag-threshold-upper 100
# 記憶體碎片整理占用 CPU 資源最小百分比active-defrag-cycle-min 1# 記憶體碎片整理占用 CPU 資源最大百分比active-defrag-cycle-max 25
# 碎片整理期間,對於 List/Set/Hash/ZSet 類型元素一次 Scan 的數量active-defrag-max-scan-fields 1000

二、Redis如何優化

 

1.慢查詢優化

1.儘量不使用 O(N) 以上複雜度過高的命令,對於數據的聚合操作,放在客戶端做

2.執行 O(N) 命令,保證 N 儘量的小(推薦 N <= 300),每次獲取儘量少的數據,讓 Redis 可以及時處理返回

 

2.集中過期優化

一般有兩種方案來規避這個問題:

1.集中過期 key 增加一個隨機過期時間,把集中過期的時間打散,降低 Redis 清理過期 key 的壓力

2.如果你使用的 Redis 是 4.0 以上版本,可以開啟 lazy-free 機制,當刪除過期 key 時,把釋放記憶體的操作放到後臺線程中執行,避免阻塞主線程。

第一種方案,在設置 key 的過期時間時,增加一個隨機時間,偽代碼可以這麼寫:


# 在過期時間點之後的 5 分鐘內隨機過期掉redis.expireat(key, expire_time + random(300))

第二種方案,Redis 4.0 以上版本,開啟 lazy-free 機制:


# 釋放過期 key 的記憶體,放到後臺線程執行lazyfree-lazy-expire yes

運維層面,你需要把 Redis 的各項運行狀態數據監控起來,在 Redis 上執行 INFO 命令就可以拿到這個實例所有的運行狀態數據。

在這裡我們需要重點關註 expired_keys 這一項,它代表整個實例到目前為止,累計刪除過期 key 的數量。

你需要把這個指標監控起來,當這個指標在很短時間內出現了突增,需要及時報警出來,然後與業務應用報慢的時間點進行對比分析,確認時間是否一致,如果一致,則可以確認確實是因為集中過期 key 導致的延遲變大。

 

3.實例記憶體達到上限優化

1.避免存儲 bigkey,降低釋放記憶體的耗時

2.淘汰策略改為隨機淘汰,隨機淘汰比 LRU 要快很多(視業務情況調整)

3.拆分實例,把淘汰 key 的壓力分攤到多個實例上

4.如果使用的是 Redis 4.0 以上版本,開啟 layz-free 機制,把淘汰 key 釋放記憶體的操作放到後臺線程中執行(配置 lazyfree-lazy-eviction = yes)

4.fork耗時嚴重優化

1.控制 Redis 實例的記憶體:儘量在 10G 以下,執行 fork 的耗時與實例大小有關,實例越大,耗時越久。

2.合理配置數據持久化策略:在 slave 節點執行 RDB 備份,推薦在低峰期執行,而對於丟失數據不敏感的業務(例如把 Redis 當做純緩存使用),可以關閉 AOF 和 AOF rewrite。

3.Redis 實例不要部署在虛擬機上:fork 的耗時也與系統也有關,虛擬機比物理機耗時更久。

4.降低主從庫全量同步的概率:適當調大 repl-backlog-size 參數,避免主從全量同步。

從建立同步時,優先檢測是否可以嘗試只同步部分數據,這種情況就是針對於之前已經建立好了複製鏈路,只是因為故障導致臨時斷開,故障恢復後重新建立同步時,為了避免全量同步的資源消耗,Redis會優先嘗試部分數據同步,如果條件不符合,才會觸發全量同步。這個判斷依據就是在master上維護的複製緩衝區大小,如果這個緩衝區配置的過小,很有可能在主從斷開複製的這段時間內,master產生的寫入導致複製緩衝區的數據被覆蓋,重新建立同步時的slave需要同步的offset位置在master的緩衝區中找不到,那麼此時就會觸發全量同步。如何避免這種情況?解決方案就是適當調大複製緩衝區repl-backlog-size的大小,這個緩衝區的大小預設為1MB,如果實例寫入量比較大,可以針對性調大此配置。

5.多核CPU優化

那如何解決這個問題呢?

如果你確實想要綁定 CPU,可以優化的方案是,不要讓 Redis 進程只綁定在一個 CPU 邏輯核上,而是綁定在多個邏輯核心上,而且,綁定的多個邏輯核心最好是同一個物理核心,這樣它們還可以共用 L1/L2 Cache。

當然,即便我們把 Redis 綁定在多個邏輯核心上,也只能在一定程度上緩解主線程、子進程、後臺線程在 CPU 資源上的競爭。

因為這些子進程、子線程還是會在這多個邏輯核心上進行切換,存在性能損耗。

如何再進一步優化?

可能你已經想到了,我們是否可以讓主線程、子進程、後臺線程,分別綁定在固定的 CPU 核心上,不讓它們來回切換,這樣一來,他們各自使用的 CPU 資源互不影響。

其實,這個方案 Redis 官方已經想到了。

Redis 在 6.0 版本已經推出了這個功能,我們可以通過以下配置,對主線程、後臺線程、後臺 RDB 進程、AOF rewrite 進程,綁定固定的 CPU 邏輯核心:

Redis6.0 前綁定CPU核

taskset -c 0 ./redis-server

Redis6.0 後綁定CPU核


# Redis Server 和 IO 線程綁定到 CPU核心 0,2,4,6server_cpulist 0-7:2# 後臺子線程綁定到 CPU核心 1,3bio_cpulist 1,3# 後臺 AOF rewrite 進程綁定到 CPU 核心 8,9,10,11aof_rewrite_cpulist 8-11# 後臺 RDB 進程綁定到 CPU 核心 1,10,11# bgsave_cpulist 1,10-1

如果你使用的正好是 Redis 6.0 版本,就可以通過以上配置,來進一步提高 Redis 性能。

這裡我需要提醒你的是,一般來說,Redis 的性能已經足夠優秀,除非你對 Redis 的性能有更加嚴苛的要求,否則不建議你綁定 CPU。

6.查看Redis記憶體是否發生Swap


$ redis-cli info | grep process_idprocess_id: 5332

然後,進入 Redis 所在機器的 /proc 目錄下的該進程目錄中:

$ cd /proc/5332

最後,運行下麵的命令,查看該 Redis 進程的使用情況。在這兒,我只截取了部分結果:


$cat smaps | egrep '^(Swap|Size)'Size: 584 kBSwap: 0 kBSize: 4 kBSwap: 4 kBSize: 4 kBSwap: 0 kBSize: 462044 kBSwap: 462008 kBSize: 21392 kBSwap: 0 kB

一旦發生記憶體 swap,最直接的解決方法就是增加機器記憶體。如果該實例在一個 Redis 切片集群中,可以增加 Redis 集群的實例個數,來分攤每個實例服務的數據量,進而減少每個實例所需的記憶體量。

7.記憶體大頁

如果採用了記憶體大頁,那麼,即使客戶端請求只修改 100B 的數據,Redis 也需要拷貝 2MB 的大頁。相反,如果是常規記憶體頁機制,只用拷貝 4KB。兩者相比,你可以看到,當客戶端請求修改或新寫入數據較多時,記憶體大頁機制將導致大量的拷貝,這就會影響 Redis 正常的訪存操作,最終導致性能變慢。

首先,我們要先排查下記憶體大頁。方法是:在 Redis 實例運行的機器上執行如下命令:


$ cat /sys/kernel/mm/transparent_hugepage/enabled[always] madvise never

如果執行結果是 always,就表明記憶體大頁機制被啟動了;如果是 never,就表示,記憶體大頁機制被禁止。

在實際生產環境中部署時,我建議你不要使用記憶體大頁機制,操作也很簡單,只需要執行下麵的命令就可以了:

echo never /sys/kernel/mm/transparent_hugepage/enabled

其實,操作系統提供的記憶體大頁機制,其優勢是,可以在一定程式上降低應用程式申請記憶體的次數。

但是對於 Redis 這種對性能和延遲極其敏感的資料庫來說,我們希望 Redis 在每次申請記憶體時,耗時儘量短,所以我不建議你在 Redis 機器上開啟這個機制。

8.刪除使用Lazy Free

支持版本:Redis 4.0+

8.1 主動刪除鍵使用lazy free

UNLINK命令

127.0.0.1:7000> LLEN mylist(integer) 2000000127.0.0.1:7000> UNLINK mylist(integer) 1127.0.0.1:7000> SLOWLOG get1) 1) (integer) 1   2) (integer) 1505465188   3) (integer) 30   4) 1) "UNLINK"      2) "mylist"   5) "127.0.0.1:17015"   6) ""

註意:DEL命令,還是併發阻塞的刪除操作

FLUSHALL/FLUSHDB ASYNC

127.0.0.1:7000> DBSIZE(integer) 1812295127.0.0.1:7000> flushall  //同步清理實例數據,180萬個key耗時1020毫秒OK(1.02s)127.0.0.1:7000> DBSIZE(integer) 1812637127.0.0.1:7000> flushall async  //非同步清理實例數據,180萬個key耗時約9毫秒OK127.0.0.1:7000> SLOWLOG get 1) 1) (integer) 2996109    2) (integer) 1505465989    3) (integer) 9274       //指令運行耗時9.2毫秒    4) 1) "flushall"       2) "async"    5) "127.0.0.1:20110"    6) ""

8.2 被動刪除鍵使用lazy free

lazy free應用於被動刪除中,目前有4種場景,每種場景對應一個配置參數;預設都是關閉。


lazyfree-lazy-eviction nolazyfree-lazy-expire nolazyfree-lazy-server-del noslave-lazy-flush no

lazyfree-lazy-eviction

針對redis記憶體使用達到maxmeory,並設置有淘汰策略時;在被動淘汰鍵時,是否採用lazy free機制;因為此場景開啟lazy free, 可能使用淘汰鍵的記憶體釋放不及時,導致redis記憶體超用,超過maxmemory的限制。此場景使用時,請結合業務測試。(生產環境不建議設置yes

lazyfree-lazy-expire

針對設置有TTL的鍵,達到過期後,被redis清理刪除時是否採用lazy free機制;此場景建議開啟,因TTL本身是自適應調整的速度。

lazyfree-lazy-server-del

針對有些指令在處理已存在的鍵時,會帶有一個隱式的DEL鍵的操作。如rename命令,當目標鍵已存在,redis會先刪除目標鍵,如果這些目標鍵是一個big key,那就會引入阻塞刪除的性能問題。此參數設置就是解決這類問題,建議可開啟。

slave-lazy-flush

針對slave進行全量數據同步,slave在載入master的RDB文件前,會運行flushall來清理自己的數據場景, 參數設置決定是否採用異常flush機制。如果記憶體變動不大,建議可開啟。可減少全量同步耗時,從而減少主庫因輸出緩衝區爆漲引起的記憶體使用增長。

8.3 lazy free的監控

lazy free能監控的數據指標,只有一個值:lazyfree_pending_objects,表示redis執行lazy free操作,在等待被實際回收內容的鍵個數。並不能體現單個大鍵的元素個數或等待lazy free回收的記憶體大小。所以此值有一定參考值,可監測redis lazy free的效率或堆積鍵數量;比如在flushall async場景下會有少量的堆積。


	   

您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 摘要:本文主要是對《鳳凰架構》的解讀,講述規劃系統流量的幾種方式。 本文分享自華為雲社區《大流量時代,如何規劃系統流量提升可靠性》,作者:breakDawn 。 透明多級分流系統 對系統流量進行規劃, 要註意以下2個原則 儘可能減少單點部件, 或者減少到達單點部件的流量或者作用 奧卡姆剃刀原則,確定 ...
  • 複雜系統的架構設計不是一蹴而就的,合適的才是正確的。希望本文能夠對您在進行複雜系統設計時有一定的參考意義。 ...
  • 簡介 策略模式(Strategy Pattern)屬於行為型設計模式。將每一個演算法封裝到具有共同介面的獨立類中,根據需要來綁定策略,使得具體實現和策略解耦。 當你想使用對象中各種不同的演算法變體,使用if...else 所帶來的複雜和難以維護,可使用策略模式。或者當有許多相同類,它們僅在執行某些行為時 ...
  • 快速開始 發送請求 >>> import requests >>> r = requests.get('https://api.github.com/events') # GET >>> r = requests.post('https://httpbin.org/post', data={'key ...
  • 原文地址: JavaFx 生成二維碼工具類封裝 - Stars-One的雜貨小窩 之前星之音樂下載器有需要生成二維碼功能,當時用的是一個開源庫來實現的,但是沒過多久,發現那個庫依賴太多,有個http-client的依賴,把軟體都搞大了一倍,而且有時候開發的時候下載依賴還報錯,就想換個方案 於是在網上 ...
  • Golang GMP原理(1) 概念梳理 線程 線程一般指內核級線程,核心如下: 操作系統的最小調度單元 創建 銷毀 調度由內核完成,cpu要完成內核態與用戶態的轉換 可充分利用多核,實現並行 協程 協程線程對應 協程,又稱為用戶級線程,核心點如下: 與線程存在映射關係,為M:1 創建、銷毀、調度在 ...
  • 因所負責的系統使用的spring框架版本5.1.5.RELEASE線上上出過一個偶發的小事故,最後定位為spring-context中的一個bug導致的。 ...
  • 教程簡介 JasperReports入門教程 - 使用包含從環境設置,報告設計,編譯報告設計,填充報告,查看和列印報告,導出,參數,數據源開始的基礎知識到高級知識的初學者教程,簡單易學地設計和創建JasperReports ,欄位,表達式,變數,部分,組,樣式,Scriplets,子報告,圖表,Co ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...