Redis - 對象結構

来源:https://www.cnblogs.com/fatedeity/archive/2023/03/27/17260423.html
-Advertisement-
Play Games

其實,Redis 的每種對象都有對象結構與對應編碼的數據結構組合而成,進階 Redis 就需要從它的對象機制開始。 ...


簡介

Redis 使用對象存儲資料庫中的鍵和值,每當在 Redis 中創建一個新的鍵值對時,都會創建兩個對象:一個是鍵對象,另一個是值對象。

Redis 對象結構

其中,Redis 的每種對象都由對象結構和對應編碼的數據結構組合而成,而每種對象類型對應若幹編碼方式,不同編碼方式對應的底層數據結構也會有所不同。

資料庫結構

Redis 伺服器的資料庫都保存在 redisServerdb 數組中,數組中的每個項都是 redisDb 結構,每個 redisDb 結構代表一個資料庫。

下麵是部分 redisServer 結構:

struct redisServer {
    redisDb *db;    // 保存資料庫的數組
    int dbnum;      // 伺服器的資料庫數量
    // ...
};

其中,初始化伺服器時,會根據 dbnum 的值決定創建多少個資料庫。預設情況下,dbnum 的值是 16。

切換資料庫

預設情況下,Redis 客戶端的目標資料庫是 0 號資料庫,但是客戶端可以使用 SELECT 命令切換目標資料庫。

需要註意的是,Redis 現在沒有向客戶端返回目標資料庫的命令,對資料庫進行誤操作極易出現不符合預期的情況,尤其是像 FLUSHDB 這樣的命令。

比較好的做法是儘量少地在代碼中切換資料庫,即使是在命令行操作,也儘量顯式地切換到指定的資料庫,然後再執行命令。

資料庫鍵空間

每一個資料庫中都存儲了一個字典,這個字典存儲了資料庫中的所有鍵值對,這個字典又被稱為鍵空間。

所有對資料庫中鍵值對的增刪查改操作,實際上都是在操作鍵空間字典。

只是,由於資料庫可以存儲多種不同的數據結構類型,這些增刪查改操作,都會使用對應數據結構提供的函數執行。

讀寫鍵空間的維護操作

當使用 Redis 命令對鍵空間字典進行讀寫操作時,伺服器不僅會執行這些讀寫操作,還會做一些維護性的操作,提高 Redis 的可用性,其中包括:

  • 讀取一個鍵時,伺服器會根據鍵是否存在來更新鍵空間命中次數和不命中次數
  • 讀取到一個鍵之後,伺服器會更新這個鍵的 lru 屬性
  • 如果伺服器讀取到鍵之後,發現這個鍵已經過期,會先刪除這個鍵,再執行後續的操作
  • 如果有客戶端使用 WATCH 命令監視這個鍵,伺服器修改這個鍵之後,會將這個鍵標記為 dirty 狀態
  • 伺服器每次修改一個鍵之後,都會對臟計數器的值增 1,這個計數器會觸發伺服器的持久化或複製操作
  • 如果伺服器開啟了通知功能,那麼對這個鍵做修改操作之後,伺服器將按配置發送對應的資料庫通知

類型與編碼

Redis 中的每個對象都是由一個 redisObject 結構表示,其結構如下:

typedef struct redisObject {
    unsigned type:4;        // 類型
    unsigned encoding:4;    // 編碼
    unsigned lru:LRU_BITS;  // 記錄最後訪問的時間
    int refcount;           // 引用計數
    void *ptr;              // 指向底層實現數據結構的指針
} robj;

其中 typeencodingptr 是最重要的三個屬性。

數據類型

對象的 type 屬性記錄了數據結構的類型,它總是以下枚舉值之一:

  • REDIS_STRING
  • REDIS_LIST
  • REDIS_HASH
  • REDIS_SET
  • REDIS_ZSET

對象編碼

對象的 encoding 屬性記錄了 ptr 指針指向對象的編碼方式,它總是以下枚舉值之一:

  • OBJ_ENCODING_RAW
  • OBJ_ENCODING_INT
  • OBJ_ENCODING_HT
  • OBJ_ENCODING_ZIPMAP
  • OBJ_ENCODING_LINKEDLIST
  • OBJ_ENCODING_ZIPLIST
  • OBJ_ENCODING_INTSET
  • OBJ_ENCODING_SKIPLIST
  • OBJ_ENCODING_EMBSTR
  • OBJ_ENCODING_QUICKLIST
  • OBJ_ENCODING_STREAM

通過使用 encoding 屬性設定對象的編碼方式,而不是使用固定編碼,這樣極大地提高了 Redis 的靈活性和效率,也方便 Redis 針對不同的場景選擇不同的編碼,針對性地做優化。

對象指針

對象的 ptr 屬性是一個指針,指向實際保存值的數據結構。

空轉時間

對象的 lru 屬性記錄了對象最後一次被命令程式訪問的時間。空轉時間指的是當前時間減去 lru 屬性得到的時長,即未被訪問的時長。

鍵的空轉時間在記憶體回收演算法是 volatile-lruallkeys-lru 時使用到,當伺服器占用的記憶體超過了 maxmemory 之後,空轉時長較高的那部分鍵會優先被伺服器釋放,從而回收記憶體。

命令執行流程

Redis 中用於操作鍵的命令分為兩類:任何類型的鍵都可以執行的命令、針對特定類型的鍵可執行的命令。例如 DELEXPIRE 等命令屬於前者,SETHSET 等命令屬於後者。

針對特定類型的鍵的執行命令,執行前需要檢查鍵的類型,確定當前鍵是否可執行當前命令。

在 Redis 中,一個數據類型有可能對應多個編碼方式,在檢查完鍵的類型之後,還需要根據數據類型的不同編碼進行多態處理。

因此,當處理一個特定類型命令的時候,執行的步驟如下:

  • 根據給定的 key 名稱,在資料庫字典中查找相對應的 Redis 對象,如果沒有找到,返回 NULL
  • 檢查 Redis 對象中的 type 屬性和執行命令所需的類型是否相符,如果不相符,返回類型錯誤
  • 根據 Redis 對象中的 encoding 屬性選擇合適的操作函數來處理底層數據結構
  • 將操作函數的返回值作為命令請求的響應返回給客戶端

對象共用

目前,為瞭解決重覆分配的麻煩,Redis 會在初始化伺服器時創建一萬個字元串對象,這些對象包含了從 0 到 9999 的所有整數值,當伺服器需要用到值為 0 到 9999 的字元串對象時,伺服器就會使用這些共用對象,而不是創建新的對象。

儘管共用更複雜的對象可以節約更多的記憶體,但受到 CPU 時間的限制,Redis 只對包含整數值的字元串對象進行共用。

需要註意的是,共用對象只能被字典和雙向鏈表這類能帶有指針的數據結構使用。

記憶體回收

因為 C 語言並不具備自動記憶體回收功能,所以 Redis 在自己的對象系統中構建了一個引用計數技術實現記憶體回收機制。通過這個記憶體回收機制,Redis 可以通過對象的引用計數信息,在適當的時候自動釋放對象併進行記憶體回收。

對象的引用計數信息通過 refcount 屬性記錄,其使用如下:

  • 當創建新對象時,引用計數的值會初始化為 1
  • 當這個對象被共用時,引用計數的值會自增
  • 當使用完一個對象後,或者消除對這個對象的引用之後,引用計數的值會自減
  • 當對象的引用計數值變為 0 時,對象所占用的記憶體會被釋放

首發於「程式員翔仔」,點擊查看更多。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 基本操作 pwd命令 作用:顯示當前工作目錄 用法:pwd cd命令 作用:改變目錄位置 用法:cd [option] [dir] cd 目錄路徑 -進入指定目錄 cd .. -返回父目錄 cd / -進入根目錄 cd或cd ~ -進入用戶主目錄 ls命令 用法:ls [option] [file] ...
  • 一、總體設計思路 以AT89C52單片機為系統核心,充當分析和處理數據的功能。基於AT89C52設計智能濕度控制系統,該系統需對環境空氣中的濕度狀態具有實時監測的功能、當空氣中的相對濕度不理想時可以自動加濕或者自動除濕的功能、電子數位管可以隨時顯示空氣中的相對濕度、手動設置濕度範圍值、並且具有報警功 ...
  • 在伺服器資源有限的情況下,可利用該方案快速搭建各類 mysql 架構方案。各 MySQL 實例共用一個 mysqld 主程式,但各實例數據目錄是獨立的,存放在不同的文件夾中;好了、廢話不多說,直接上乾貨,具體搭建步驟如下 環境介紹 | 實例 | 主機 | mysql port | mysqlx po ...
  • 已測試可用的版本 MySQL 8.0; 環境: windows7/10MySQL 8.0.15免安裝版 項目需求 需要實現一個自動化MySQL配置安裝及初始化資料庫(初始化包括:設置用戶名和密碼)。 批處理 用來對某對象進行批量的處理,即可通過批處理讓相應的軟體執行自動化操作。 MySQL免安裝版使 ...
  • 摘要:本文主要講解如何在內核保證操作不能中斷採取的特殊處理,理論上用戶執行的sql使用的記憶體(dynamic_used_memory) 是不會大範圍的超過max_dynamic_memory的記憶體的 本文分享自華為雲社區《Gaussdb(DWS)記憶體報錯排查方法》,作者: fighttingman。 ...
  • XAMPP使用 shell 命令 每個資料庫對應 一個子文件夾 mysql 進入mySQL的命令 -uroot userroot 登錄用戶 -uroot -p password 登錄密碼 -p123 show databases 顯示資料庫 use databaseName 使用哪個資料庫 show ...
  • 保障資料庫的測試質量可以從以下幾個方面進行: (1)設計合理的測試用例:需要設計合理、全面、準確的測試用例,覆蓋資料庫的各種功能和場景,包括常規操作、異常操作、性能測試、安全測試等。 (2)自動化測試:可以採用自動化測試的方式,提高測試的效率和準確性,同時可以快速發現和解決問題。 (3)定期回歸測試 ...
  • 保障ETL過程的數據正確性可以從以下幾個方面考慮: 數據源的質量:ETL過程的數據質量取決於數據源的質量,因此需要對數據源進行充分的驗證和清洗,確保數據的準確性、完整性和一致性。 數據轉換的準確性:在ETL過程中,數據轉換是非常重要的一步,需要確保數據轉換的準確性和正確性。可以採用數據驗證、數據重覆 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...