Redis 過期時間與記憶體管理

来源:https://www.cnblogs.com/svenaugustus/archive/2020/05/11/12867705.html
-Advertisement-
Play Games

http://www.redis.cn/commands/expire.html http://www.redis.cn/topics/lru cache.html 記憶體管理 當 Redis 作為緩存使用時(此時緩存僅作為熱點數據提高服務的訪問性能),需要考慮記憶體的限制,以及如何隨著業務的增長,僅保 ...


記憶體管理

當 Redis 作為緩存使用時(此時緩存僅作為熱點數據提高服務的訪問性能),需要考慮記憶體的限制,以及如何隨著業務的增長,僅保留熱點數據。

file

過期時間

Redis 所有的數據結構都可以設置過期時間,時間到了,Redis 會自動刪除相應的對象。
需要註意的:

  • 過期expire是以對象為單位,比如一個 hash 結構的過期是整個 hash 對象的過期,而不是其中的某個子 key。
  • 如果一個字元串已經設置了過期時間,然後你調用了 set 方法修改了它,它的過期時間會消失。
127.0.0.1:6379> set  k1 aaa
OK
127.0.0.1:6379> expire k1 600
(integer) 1
127.0.0.1:6379> ttl k1
(integer) 597
127.0.0.1:6379> set k1  bbb
OK
127.0.0.1:6379> ttl k1
(integer) -1...

淘汰過期的 Keys

Redis keys過期有兩種方式:被動和主動方式。

  • 被動

當一些客戶端嘗試訪問它時,key會被髮現並主動的過期。

  • 主動

當然,這樣是不夠的,因為有些過期的keys,永遠不會訪問他們。

無論如何,這些keys應該過期,所以定時隨機測試設置keys的過期時間。所有這些過期的keys將會從密鑰空間刪除。

具體就是Redis每秒10次做的事情:

  • 1.測試隨機的20個keys進行相關過期檢測。
  • 2.刪除所有已經過期的keys。
  • 3.如果有多於25%的keys過期,重覆步奏1.
    這是一個平凡的概率演算法,基本上的假設是,我們的樣本是這個密鑰控制項,

並且我們不斷重覆過期檢測,直到過期的keys的百分百低於25%,這意味著,在任何給定的時刻,最多會清除1/4的過期keys。

記憶體淘汰

redis.conf 或 使用 CONFIG 命令配置 Redis的配置項:


maxmemory 100mb
maxmemory-policy [策略]

淘汰策略:

  • LRU - 最近很少沒碰

對最近很少使用(所有或有過期時間的)的key優先淘汰

  • allkeys-lru 嘗試回收最少使用的鍵(LRU),使得新添加的數據有空間存放。
  • volatile-lru 嘗試回收最少使用的鍵(LRU),但僅限於在過期集合的鍵,使得新添加的數據有空間存放。
  • LFU - 沒碰多少次

對使用頻率最少(所有或有過期時間的)的key優先淘汰

  • allkeys-lfu 嘗試回收回收使用頻率最少的鍵(LFU),使得新添加的數據有空間存放。

  • volatile-lfu 嘗試回收使用頻率最少的鍵(LFU),但僅限於在過期集合的鍵,使得新添加的數據有空間存放。

  • volatile-ttl 對有過期時間的key中ttl最小的部分優先淘汰

  • noeviction 返回錯誤

  • allkeys-random: 回收隨機的鍵使得新添加的數據有空間存放。

  • volatile-random: 回收隨機的鍵使得新添加的數據有空間存放,但僅限於在過期集合的鍵。

近似LRU演算法

Redis的LRU演算法並非完整的實現。這意味著Redis並沒辦法選擇最佳候選來進行回收,也就是最久未被訪問的鍵。

相反它會嘗試運行一個近似LRU的演算法,通過對少量keys進行取樣,然後回收其中一個最好的key(被訪問時間較早的)。

Redis LRU有個很重要的點,你通過調整每次回收時檢查的採樣數量,以實現調整演算法的精度。這個參數可以通過以下的配置指令調整:


maxmemory-samples 5

@SvenAugustus (https://my.oschina.net/langxSpirit)


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 索引原理及B樹索引 http://hongyitong.github.io/2017/01/05/%E7%B4%A2%E5%BC%95%E5%8E%9F%E7%90%86%E5%8F%8AB%E6%A0%91%E7%B4%A2%E5%BC%95/ 一、索引的原理 說白了,索引問題就是一個查找問題。數 ...
  • 原創聲明:本文轉載自公眾號【胖滾豬學編程】,轉載務必註明出處! 在 "併發編程BUG源頭" 文章中,我們初識了併發編程的三個bug源頭:可見性、原子性、有序性。在 "如何解決可見性和原子性" 文章中我們大致瞭解了可見性和有序性的解決思路,今天輪到最後一個大bug,那就是原子性。 知識回顧 鎖模型 J ...
  • 今天看資料庫,書中提到:由於索引是採用 B 樹結構存儲的,所以對應的索引項並不會被刪除,經過一段時間的增刪改操作後,資料庫中就會出現大量的存儲碎片,這和磁碟碎片、記憶體碎片產生原理是類似的,這些存儲碎片不僅占用了存儲空間,而且降低了資料庫運行的速度。如果發現索引中存在過多的存儲碎片的話就要進行“碎片整 ...
  • 鏈表提供了高效的節點重排能力,以及順序性的節點訪問方式,並且可以通過增刪節點來靈活地調整鏈表的長度。 redis中鏈表應用廣泛,如list中就使用了鏈表。 每一個鏈表節點使用listNode結構標識(雙向鏈表): typedef struct listNode{ //前置節點 struct list ...
  • 1.對查詢進行優化,應儘量避免全表掃描,首先應考慮在 where 及 order by 涉及的列上建立索引。2.應儘量避免在 where 子句中對欄位進行 null 值判斷,否則將導致引擎放棄使用索引而進行全表掃描,如:select id from t where num is null可以在num ...
  • 表結構 student(StuId,StuName,StuAge,StuSex) 學生表 teacher(TId,Tname) 教師表 course(CId,Cname,C_TId) 課程表 sc(SId,S_CId,Score) 成績表 問題九:查詢所有課程成績小於60分的同學的學號、姓名 SEL ...
  • 話不多直接上代碼,註釋很詳細,下麵代碼確認運行無誤,自己去感悟吧朋友 CREATE PROCEDURE SYC_FILE_DOC_INFO() BEGIN DECLARE A_PK_FILEDOC char(24); DECLARE A_PK_CORP char(6); DECLARE A_VCOD ...
  • http://www.redis.cn/topics/persistence.html 持久化 Redis 如同其他的存儲組件一樣,提供了兩類持久化方式:快照,和全量追加日誌。 RDB 快照 在預設情況下, Redis 將資料庫快照保存在名字為 的二進位文件中。 你可以對 Redis 進行設置, 讓 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...