緩存穿透,緩存雪崩,緩存擊穿

来源:https://www.cnblogs.com/xuzhuo123/archive/2022/06/15/16378559.html
-Advertisement-
Play Games

緩存穿透,緩存雪崩,緩存擊穿 本文整理自黑馬程式員相關資料 緩存穿透 緩存穿透是指客戶端請求的數據在緩存中和資料庫中都部存在,這樣緩存永遠不會生效。因此這些請求都會穿過緩存,最終請求到資料庫上,對資料庫造成非常大的壓力。 常見的解決方案有兩種: 緩存空對象:當緩存和資料庫都沒有請求的數據時,將查詢的 ...


緩存穿透,緩存雪崩,緩存擊穿

本文整理自黑馬程式員相關資料

緩存穿透

緩存穿透是指客戶端請求的數據在緩存中和資料庫中都部存在,這樣緩存永遠不會生效。因此這些請求都會穿過緩存,最終請求到資料庫上,對資料庫造成非常大的壓力。

常見的解決方案有兩種:

  1. 緩存空對象:當緩存和資料庫都沒有請求的數據時,將查詢的key的value設置為NULL值緩存到Redis中,下次再查詢時會在Redis中查到NULL值,請求不會到達資料庫。

    • 優點:實現簡單,維護方便
    • 缺點:
      • 因為緩存了空對象,任意key的查詢都緩存了NULL值,相當於緩存了很多的無用數據。所以造成了額外了記憶體消耗。可以通過設置TTL過期時間來減少記憶體的消耗
      • 可能會存在短期的不一致,取決於NULL值的過期時間。例如對一個key設置了NULL值。但是資料庫剛好更新了該key對應的值。而Redis中該key對應的值為NULL,只有在這個key過期之後,才會更新為資料庫中的值。
  2. 布隆過濾:在客戶端與Redis中間加入布隆過濾器,如果布隆過濾器判斷查詢的數據不存在則直接拒絕。布隆過濾器如果判斷不存在則一定不存在,判斷存在則可能不存在。

    • 優點:記憶體占用少,沒有多餘的key
    • 缺點:
      • 實現複雜
      • 存在誤判可能。因為布隆過濾器如果判斷不存在則一定不存在,判斷存在則可能不存在。

​ 緩存穿透的其他解決方案:

  • 增強key的複雜性,避免被猜測key的規律
  • 做好數據的基礎格式校驗,如果不符合預先設置的格式,直接拒絕。
  • 加強用戶許可權校驗,避免接收不相干用戶發出的惡意請求
  • 做好熱點參數的限流

緩存雪崩

緩存雪崩是指在同一時段大量緩存key同時失效或者Redis服務宕機,導致大量請求到達資料庫,給資料庫帶來巨大壓力。

解決方案:

  • 給不同的key的TTL添加隨機值,避免大量的key同時到期
  • 利用Redis集群提高服務的可用性,避免Redis服務宕機後的數據丟失和請求直達資料庫
  • 給緩存業務添加降級限流策略
  • 給業務添加多級緩存

緩存擊穿

緩存擊穿問題也叫熱點key問題,就是一個高併發訪問並且緩存重建業務比較複雜的key突然失效了,無數的請求訪問會在瞬間給資料庫帶來巨大的衝擊。

解決方案:

互斥鎖:即只允許一個線程進行緩存重建,其他線程在緩存重建成功之前只能不斷的重試。

邏輯過期:在熱點key的value中設置邏輯過期時間,查詢緩存的時候判斷邏輯過期時間是否已經過期,如果已經過期,則獲取互斥鎖另開線程進行緩存重建。其他線程發現過期但獲取互斥鎖失敗,返回過期數據。

兩種解決方案的優缺點:

解決方案 優點 缺點
互斥鎖 因為沒有設置邏輯過期時間,所以沒有額外的記憶體消耗。保持一致性。實現簡單 線程需要等待,性能受影響。可能有死鎖風險
邏輯過期 線程無需等待,性能較好 不保證一致性。有額外的記憶體消耗。實現複雜

您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 在我們對數據進行重要修改調整的時候,往往需要跟蹤記錄好用戶操作日誌。一般來說,如對重要表記錄的插入、修改、刪除都需要記錄下來,由於用戶操作日誌會帶來一定的額外消耗,因此我們通過配置的方式來決定記錄那些業務數據的重要調整。本篇隨筆介紹如何在基於SqlSugar的開發框架中,實現對用戶操作日誌記錄的配置... ...
  • 目錄 一、前景回顧 二、物理地址、線性地址和虛擬地址 三、記憶體為什麼要分頁 四、一級頁表 五、二級頁表 一、前景回顧 前面我們說到,保護模式下有著三大特點:地址映射、特權級和分時機制。從我的學習角度來說,我認為地址映射這一塊的知識點尤為繁雜,所以會花費相對比較多的時間來講述,話不多說,開整。 二、物 ...
  • Delay accounting 延時統計 任務在執行時等待某個內核資源會意外遇到延遲,例如可運行的任務正在等待空閑CPU。 per-task的延時統計功能測量下列情況下任務經歷的延遲: 正在等待CPU,waiting for a CPU (while being runnable) 同步塊I/O的 ...
  • 為什麼要使用Svelte Svelte 是一種全新的構建用戶界面的方法。傳統框架(如 React 和 Vue)在瀏覽器中完成大部分工作,而 Svelte 將這些工作轉移到構建應用程式時發生的編譯步驟。 Svelte 沒有使用虛擬 DOM diffing 之類的技術,而是編寫了在應用程式狀態發生變化時 ...
  • 一 、通過雲開發平臺快速創建初始化應用 1.創建相關應用模版請參考鏈接:去中心化的前端構建工具 — Vite 2.完成創建後就可以在github中查看到新增的Vite倉庫 二 、 本地編寫 Vite後臺項目最佳起始點 1.將應用模版克隆到本地 首先假定你已經安裝了Git、node,沒有安裝請移步no ...
  • 目錄 一、前景回顧 二、A20地址線 三、全局描述符表 四、CR0寄存器的PE位 五、邁入保護模式 六、測試 一、前景回顧 上回我們說到,保護模式下有著三大特點:地址映射、特權級和分時機制。本來接下來是要向這三點一一發起進攻,不過我們首先需要先邁入保護模式中,不然在實模式下講解保護模式顯得不倫不類。 ...
  • 本文介紹什麼是 SQL 視窗函數,視窗函數可以進行排序、生成序列號等一般的 聚合函數 無法實現的高級操作。 本文重點 視窗函數可以進行排序、生成序列號等一般的聚合函數無法實現的高級操作。 理解 PARTITION BY 和 ORDER BY 這兩個關鍵字的含義十分重要。 一、什麼是視窗函數 視窗函數 ...
  • 1 MySQL安裝 安裝環境:Win10 64位 軟體版本:MySQL 5.7.24 解壓版 1.1 下載 https://downloads.mysql.com/archives/community/ 點開上面的鏈接就能看到如下界面: 選擇選擇和自己系統位數相對應的版本點擊右邊的Download, ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...