緩存穿透,緩存雪崩,緩存擊穿

来源:https://www.cnblogs.com/xuzhuo123/archive/2022/06/15/16378559.html
-Advertisement-
Play Games

緩存穿透,緩存雪崩,緩存擊穿 本文整理自黑馬程式員相關資料 緩存穿透 緩存穿透是指客戶端請求的數據在緩存中和資料庫中都部存在,這樣緩存永遠不會生效。因此這些請求都會穿過緩存,最終請求到資料庫上,對資料庫造成非常大的壓力。 常見的解決方案有兩種: 緩存空對象:當緩存和資料庫都沒有請求的數據時,將查詢的 ...


緩存穿透,緩存雪崩,緩存擊穿

本文整理自黑馬程式員相關資料

緩存穿透

緩存穿透是指客戶端請求的數據在緩存中和資料庫中都部存在,這樣緩存永遠不會生效。因此這些請求都會穿過緩存,最終請求到資料庫上,對資料庫造成非常大的壓力。

常見的解決方案有兩種:

  1. 緩存空對象:當緩存和資料庫都沒有請求的數據時,將查詢的key的value設置為NULL值緩存到Redis中,下次再查詢時會在Redis中查到NULL值,請求不會到達資料庫。

    • 優點:實現簡單,維護方便
    • 缺點:
      • 因為緩存了空對象,任意key的查詢都緩存了NULL值,相當於緩存了很多的無用數據。所以造成了額外了記憶體消耗。可以通過設置TTL過期時間來減少記憶體的消耗
      • 可能會存在短期的不一致,取決於NULL值的過期時間。例如對一個key設置了NULL值。但是資料庫剛好更新了該key對應的值。而Redis中該key對應的值為NULL,只有在這個key過期之後,才會更新為資料庫中的值。
  2. 布隆過濾:在客戶端與Redis中間加入布隆過濾器,如果布隆過濾器判斷查詢的數據不存在則直接拒絕。布隆過濾器如果判斷不存在則一定不存在,判斷存在則可能不存在。

    • 優點:記憶體占用少,沒有多餘的key
    • 缺點:
      • 實現複雜
      • 存在誤判可能。因為布隆過濾器如果判斷不存在則一定不存在,判斷存在則可能不存在。

​ 緩存穿透的其他解決方案:

  • 增強key的複雜性,避免被猜測key的規律
  • 做好數據的基礎格式校驗,如果不符合預先設置的格式,直接拒絕。
  • 加強用戶許可權校驗,避免接收不相干用戶發出的惡意請求
  • 做好熱點參數的限流

緩存雪崩

緩存雪崩是指在同一時段大量緩存key同時失效或者Redis服務宕機,導致大量請求到達資料庫,給資料庫帶來巨大壓力。

解決方案:

  • 給不同的key的TTL添加隨機值,避免大量的key同時到期
  • 利用Redis集群提高服務的可用性,避免Redis服務宕機後的數據丟失和請求直達資料庫
  • 給緩存業務添加降級限流策略
  • 給業務添加多級緩存

緩存擊穿

緩存擊穿問題也叫熱點key問題,就是一個高併發訪問並且緩存重建業務比較複雜的key突然失效了,無數的請求訪問會在瞬間給資料庫帶來巨大的衝擊。

解決方案:

互斥鎖:即只允許一個線程進行緩存重建,其他線程在緩存重建成功之前只能不斷的重試。

邏輯過期:在熱點key的value中設置邏輯過期時間,查詢緩存的時候判斷邏輯過期時間是否已經過期,如果已經過期,則獲取互斥鎖另開線程進行緩存重建。其他線程發現過期但獲取互斥鎖失敗,返回過期數據。

兩種解決方案的優缺點:

解決方案 優點 缺點
互斥鎖 因為沒有設置邏輯過期時間,所以沒有額外的記憶體消耗。保持一致性。實現簡單 線程需要等待,性能受影響。可能有死鎖風險
邏輯過期 線程無需等待,性能較好 不保證一致性。有額外的記憶體消耗。實現複雜

您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 在我們對數據進行重要修改調整的時候,往往需要跟蹤記錄好用戶操作日誌。一般來說,如對重要表記錄的插入、修改、刪除都需要記錄下來,由於用戶操作日誌會帶來一定的額外消耗,因此我們通過配置的方式來決定記錄那些業務數據的重要調整。本篇隨筆介紹如何在基於SqlSugar的開發框架中,實現對用戶操作日誌記錄的配置... ...
  • 目錄 一、前景回顧 二、物理地址、線性地址和虛擬地址 三、記憶體為什麼要分頁 四、一級頁表 五、二級頁表 一、前景回顧 前面我們說到,保護模式下有著三大特點:地址映射、特權級和分時機制。從我的學習角度來說,我認為地址映射這一塊的知識點尤為繁雜,所以會花費相對比較多的時間來講述,話不多說,開整。 二、物 ...
  • Delay accounting 延時統計 任務在執行時等待某個內核資源會意外遇到延遲,例如可運行的任務正在等待空閑CPU。 per-task的延時統計功能測量下列情況下任務經歷的延遲: 正在等待CPU,waiting for a CPU (while being runnable) 同步塊I/O的 ...
  • 為什麼要使用Svelte Svelte 是一種全新的構建用戶界面的方法。傳統框架(如 React 和 Vue)在瀏覽器中完成大部分工作,而 Svelte 將這些工作轉移到構建應用程式時發生的編譯步驟。 Svelte 沒有使用虛擬 DOM diffing 之類的技術,而是編寫了在應用程式狀態發生變化時 ...
  • 一 、通過雲開發平臺快速創建初始化應用 1.創建相關應用模版請參考鏈接:去中心化的前端構建工具 — Vite 2.完成創建後就可以在github中查看到新增的Vite倉庫 二 、 本地編寫 Vite後臺項目最佳起始點 1.將應用模版克隆到本地 首先假定你已經安裝了Git、node,沒有安裝請移步no ...
  • 目錄 一、前景回顧 二、A20地址線 三、全局描述符表 四、CR0寄存器的PE位 五、邁入保護模式 六、測試 一、前景回顧 上回我們說到,保護模式下有著三大特點:地址映射、特權級和分時機制。本來接下來是要向這三點一一發起進攻,不過我們首先需要先邁入保護模式中,不然在實模式下講解保護模式顯得不倫不類。 ...
  • 本文介紹什麼是 SQL 視窗函數,視窗函數可以進行排序、生成序列號等一般的 聚合函數 無法實現的高級操作。 本文重點 視窗函數可以進行排序、生成序列號等一般的聚合函數無法實現的高級操作。 理解 PARTITION BY 和 ORDER BY 這兩個關鍵字的含義十分重要。 一、什麼是視窗函數 視窗函數 ...
  • 1 MySQL安裝 安裝環境:Win10 64位 軟體版本:MySQL 5.7.24 解壓版 1.1 下載 https://downloads.mysql.com/archives/community/ 點開上面的鏈接就能看到如下界面: 選擇選擇和自己系統位數相對應的版本點擊右邊的Download, ...
一周排行
    -Advertisement-
    Play Games
  • 基於.NET Framework 4.8 開發的深度學習模型部署測試平臺,提供了YOLO框架的主流系列模型,包括YOLOv8~v9,以及其系列下的Det、Seg、Pose、Obb、Cls等應用場景,同時支持圖像與視頻檢測。模型部署引擎使用的是OpenVINO™、TensorRT、ONNX runti... ...
  • 十年沉澱,重啟開發之路 十年前,我沉浸在開發的海洋中,每日與代碼為伍,與演算法共舞。那時的我,滿懷激情,對技術的追求近乎狂熱。然而,隨著歲月的流逝,生活的忙碌逐漸占據了我的大部分時間,讓我無暇顧及技術的沉澱與積累。 十年間,我經歷了職業生涯的起伏和變遷。從初出茅廬的菜鳥到逐漸嶄露頭角的開發者,我見證了 ...
  • C# 是一種簡單、現代、面向對象和類型安全的編程語言。.NET 是由 Microsoft 創建的開發平臺,平臺包含了語言規範、工具、運行,支持開發各種應用,如Web、移動、桌面等。.NET框架有多個實現,如.NET Framework、.NET Core(及後續的.NET 5+版本),以及社區版本M... ...
  • 前言 本文介紹瞭如何使用三菱提供的MX Component插件實現對三菱PLC軟元件數據的讀寫,記錄了使用電腦模擬,模擬PLC,直至完成測試的詳細流程,並重點介紹了在這個過程中的易錯點,供參考。 用到的軟體: 1. PLC開發編程環境GX Works2,GX Works2下載鏈接 https:// ...
  • 前言 整理這個官方翻譯的系列,原因是網上大部分的 tomcat 版本比較舊,此版本為 v11 最新的版本。 開源項目 從零手寫實現 tomcat minicat 別稱【嗅虎】心有猛虎,輕嗅薔薇。 系列文章 web server apache tomcat11-01-官方文檔入門介紹 web serv ...
  • 1、jQuery介紹 jQuery是什麼 jQuery是一個快速、簡潔的JavaScript框架,是繼Prototype之後又一個優秀的JavaScript代碼庫(或JavaScript框架)。jQuery設計的宗旨是“write Less,Do More”,即倡導寫更少的代碼,做更多的事情。它封裝 ...
  • 前言 之前的文章把js引擎(aardio封裝庫) 微軟開源的js引擎(ChakraCore))寫好了,這篇文章整點js代碼來測一下bug。測試網站:https://fanyi.youdao.com/index.html#/ 逆向思路 逆向思路可以看有道翻譯js逆向(MD5加密,AES加密)附完整源碼 ...
  • 引言 現代的操作系統(Windows,Linux,Mac OS)等都可以同時打開多個軟體(任務),這些軟體在我們的感知上是同時運行的,例如我們可以一邊瀏覽網頁,一邊聽音樂。而CPU執行代碼同一時間只能執行一條,但即使我們的電腦是單核CPU也可以同時運行多個任務,如下圖所示,這是因為我們的 CPU 的 ...
  • 掌握使用Python進行文本英文統計的基本方法,並瞭解如何進一步優化和擴展這些方法,以應對更複雜的文本分析任務。 ...
  • 背景 Redis多數據源常見的場景: 分區數據處理:當數據量增長時,單個Redis實例可能無法處理所有的數據。通過使用多個Redis數據源,可以將數據分區存儲在不同的實例中,使得數據處理更加高效。 多租戶應用程式:對於多租戶應用程式,每個租戶可以擁有自己的Redis數據源,以確保數據隔離和安全性。 ...