Redis - 對象結構

来源:https://www.cnblogs.com/fatedeity/archive/2023/03/27/17260423.html
-Advertisement-
Play Games

其實,Redis 的每種對象都有對象結構與對應編碼的數據結構組合而成,進階 Redis 就需要從它的對象機制開始。 ...


簡介

Redis 使用對象存儲資料庫中的鍵和值,每當在 Redis 中創建一個新的鍵值對時,都會創建兩個對象:一個是鍵對象,另一個是值對象。

Redis 對象結構

其中,Redis 的每種對象都由對象結構和對應編碼的數據結構組合而成,而每種對象類型對應若幹編碼方式,不同編碼方式對應的底層數據結構也會有所不同。

資料庫結構

Redis 伺服器的資料庫都保存在 redisServerdb 數組中,數組中的每個項都是 redisDb 結構,每個 redisDb 結構代表一個資料庫。

下麵是部分 redisServer 結構:

struct redisServer {
    redisDb *db;    // 保存資料庫的數組
    int dbnum;      // 伺服器的資料庫數量
    // ...
};

其中,初始化伺服器時,會根據 dbnum 的值決定創建多少個資料庫。預設情況下,dbnum 的值是 16。

切換資料庫

預設情況下,Redis 客戶端的目標資料庫是 0 號資料庫,但是客戶端可以使用 SELECT 命令切換目標資料庫。

需要註意的是,Redis 現在沒有向客戶端返回目標資料庫的命令,對資料庫進行誤操作極易出現不符合預期的情況,尤其是像 FLUSHDB 這樣的命令。

比較好的做法是儘量少地在代碼中切換資料庫,即使是在命令行操作,也儘量顯式地切換到指定的資料庫,然後再執行命令。

資料庫鍵空間

每一個資料庫中都存儲了一個字典,這個字典存儲了資料庫中的所有鍵值對,這個字典又被稱為鍵空間。

所有對資料庫中鍵值對的增刪查改操作,實際上都是在操作鍵空間字典。

只是,由於資料庫可以存儲多種不同的數據結構類型,這些增刪查改操作,都會使用對應數據結構提供的函數執行。

讀寫鍵空間的維護操作

當使用 Redis 命令對鍵空間字典進行讀寫操作時,伺服器不僅會執行這些讀寫操作,還會做一些維護性的操作,提高 Redis 的可用性,其中包括:

  • 讀取一個鍵時,伺服器會根據鍵是否存在來更新鍵空間命中次數和不命中次數
  • 讀取到一個鍵之後,伺服器會更新這個鍵的 lru 屬性
  • 如果伺服器讀取到鍵之後,發現這個鍵已經過期,會先刪除這個鍵,再執行後續的操作
  • 如果有客戶端使用 WATCH 命令監視這個鍵,伺服器修改這個鍵之後,會將這個鍵標記為 dirty 狀態
  • 伺服器每次修改一個鍵之後,都會對臟計數器的值增 1,這個計數器會觸發伺服器的持久化或複製操作
  • 如果伺服器開啟了通知功能,那麼對這個鍵做修改操作之後,伺服器將按配置發送對應的資料庫通知

類型與編碼

Redis 中的每個對象都是由一個 redisObject 結構表示,其結構如下:

typedef struct redisObject {
    unsigned type:4;        // 類型
    unsigned encoding:4;    // 編碼
    unsigned lru:LRU_BITS;  // 記錄最後訪問的時間
    int refcount;           // 引用計數
    void *ptr;              // 指向底層實現數據結構的指針
} robj;

其中 typeencodingptr 是最重要的三個屬性。

數據類型

對象的 type 屬性記錄了數據結構的類型,它總是以下枚舉值之一:

  • REDIS_STRING
  • REDIS_LIST
  • REDIS_HASH
  • REDIS_SET
  • REDIS_ZSET

對象編碼

對象的 encoding 屬性記錄了 ptr 指針指向對象的編碼方式,它總是以下枚舉值之一:

  • OBJ_ENCODING_RAW
  • OBJ_ENCODING_INT
  • OBJ_ENCODING_HT
  • OBJ_ENCODING_ZIPMAP
  • OBJ_ENCODING_LINKEDLIST
  • OBJ_ENCODING_ZIPLIST
  • OBJ_ENCODING_INTSET
  • OBJ_ENCODING_SKIPLIST
  • OBJ_ENCODING_EMBSTR
  • OBJ_ENCODING_QUICKLIST
  • OBJ_ENCODING_STREAM

通過使用 encoding 屬性設定對象的編碼方式,而不是使用固定編碼,這樣極大地提高了 Redis 的靈活性和效率,也方便 Redis 針對不同的場景選擇不同的編碼,針對性地做優化。

對象指針

對象的 ptr 屬性是一個指針,指向實際保存值的數據結構。

空轉時間

對象的 lru 屬性記錄了對象最後一次被命令程式訪問的時間。空轉時間指的是當前時間減去 lru 屬性得到的時長,即未被訪問的時長。

鍵的空轉時間在記憶體回收演算法是 volatile-lruallkeys-lru 時使用到,當伺服器占用的記憶體超過了 maxmemory 之後,空轉時長較高的那部分鍵會優先被伺服器釋放,從而回收記憶體。

命令執行流程

Redis 中用於操作鍵的命令分為兩類:任何類型的鍵都可以執行的命令、針對特定類型的鍵可執行的命令。例如 DELEXPIRE 等命令屬於前者,SETHSET 等命令屬於後者。

針對特定類型的鍵的執行命令,執行前需要檢查鍵的類型,確定當前鍵是否可執行當前命令。

在 Redis 中,一個數據類型有可能對應多個編碼方式,在檢查完鍵的類型之後,還需要根據數據類型的不同編碼進行多態處理。

因此,當處理一個特定類型命令的時候,執行的步驟如下:

  • 根據給定的 key 名稱,在資料庫字典中查找相對應的 Redis 對象,如果沒有找到,返回 NULL
  • 檢查 Redis 對象中的 type 屬性和執行命令所需的類型是否相符,如果不相符,返回類型錯誤
  • 根據 Redis 對象中的 encoding 屬性選擇合適的操作函數來處理底層數據結構
  • 將操作函數的返回值作為命令請求的響應返回給客戶端

對象共用

目前,為瞭解決重覆分配的麻煩,Redis 會在初始化伺服器時創建一萬個字元串對象,這些對象包含了從 0 到 9999 的所有整數值,當伺服器需要用到值為 0 到 9999 的字元串對象時,伺服器就會使用這些共用對象,而不是創建新的對象。

儘管共用更複雜的對象可以節約更多的記憶體,但受到 CPU 時間的限制,Redis 只對包含整數值的字元串對象進行共用。

需要註意的是,共用對象只能被字典和雙向鏈表這類能帶有指針的數據結構使用。

記憶體回收

因為 C 語言並不具備自動記憶體回收功能,所以 Redis 在自己的對象系統中構建了一個引用計數技術實現記憶體回收機制。通過這個記憶體回收機制,Redis 可以通過對象的引用計數信息,在適當的時候自動釋放對象併進行記憶體回收。

對象的引用計數信息通過 refcount 屬性記錄,其使用如下:

  • 當創建新對象時,引用計數的值會初始化為 1
  • 當這個對象被共用時,引用計數的值會自增
  • 當使用完一個對象後,或者消除對這個對象的引用之後,引用計數的值會自減
  • 當對象的引用計數值變為 0 時,對象所占用的記憶體會被釋放

首發於「程式員翔仔」,點擊查看更多。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 基本操作 pwd命令 作用:顯示當前工作目錄 用法:pwd cd命令 作用:改變目錄位置 用法:cd [option] [dir] cd 目錄路徑 -進入指定目錄 cd .. -返回父目錄 cd / -進入根目錄 cd或cd ~ -進入用戶主目錄 ls命令 用法:ls [option] [file] ...
  • 一、總體設計思路 以AT89C52單片機為系統核心,充當分析和處理數據的功能。基於AT89C52設計智能濕度控制系統,該系統需對環境空氣中的濕度狀態具有實時監測的功能、當空氣中的相對濕度不理想時可以自動加濕或者自動除濕的功能、電子數位管可以隨時顯示空氣中的相對濕度、手動設置濕度範圍值、並且具有報警功 ...
  • 在伺服器資源有限的情況下,可利用該方案快速搭建各類 mysql 架構方案。各 MySQL 實例共用一個 mysqld 主程式,但各實例數據目錄是獨立的,存放在不同的文件夾中;好了、廢話不多說,直接上乾貨,具體搭建步驟如下 環境介紹 | 實例 | 主機 | mysql port | mysqlx po ...
  • 已測試可用的版本 MySQL 8.0; 環境: windows7/10MySQL 8.0.15免安裝版 項目需求 需要實現一個自動化MySQL配置安裝及初始化資料庫(初始化包括:設置用戶名和密碼)。 批處理 用來對某對象進行批量的處理,即可通過批處理讓相應的軟體執行自動化操作。 MySQL免安裝版使 ...
  • 摘要:本文主要講解如何在內核保證操作不能中斷採取的特殊處理,理論上用戶執行的sql使用的記憶體(dynamic_used_memory) 是不會大範圍的超過max_dynamic_memory的記憶體的 本文分享自華為雲社區《Gaussdb(DWS)記憶體報錯排查方法》,作者: fighttingman。 ...
  • XAMPP使用 shell 命令 每個資料庫對應 一個子文件夾 mysql 進入mySQL的命令 -uroot userroot 登錄用戶 -uroot -p password 登錄密碼 -p123 show databases 顯示資料庫 use databaseName 使用哪個資料庫 show ...
  • 保障資料庫的測試質量可以從以下幾個方面進行: (1)設計合理的測試用例:需要設計合理、全面、準確的測試用例,覆蓋資料庫的各種功能和場景,包括常規操作、異常操作、性能測試、安全測試等。 (2)自動化測試:可以採用自動化測試的方式,提高測試的效率和準確性,同時可以快速發現和解決問題。 (3)定期回歸測試 ...
  • 保障ETL過程的數據正確性可以從以下幾個方面考慮: 數據源的質量:ETL過程的數據質量取決於數據源的質量,因此需要對數據源進行充分的驗證和清洗,確保數據的準確性、完整性和一致性。 數據轉換的準確性:在ETL過程中,數據轉換是非常重要的一步,需要確保數據轉換的準確性和正確性。可以採用數據驗證、數據重覆 ...
一周排行
    -Advertisement-
    Play Games
  • 概述:在C#中,++i和i++都是自增運算符,其中++i先增加值再返回,而i++先返回值再增加。應用場景根據需求選擇,首碼適合先增後用,尾碼適合先用後增。詳細示例提供清晰的代碼演示這兩者的操作時機和實際應用。 在C#中,++i 和 i++ 都是自增運算符,但它們在操作上有細微的差異,主要體現在操作的 ...
  • 上次發佈了:Taurus.MVC 性能壓力測試(ap 壓測 和 linux 下wrk 壓測):.NET Core 版本,今天計劃準備壓測一下 .NET 版本,來測試並記錄一下 Taurus.MVC 框架在 .NET 版本的性能,以便後續持續優化改進。 為了方便對比,本文章的電腦環境和測試思路,儘量和... ...
  • .NET WebAPI作為一種構建RESTful服務的強大工具,為開發者提供了便捷的方式來定義、處理HTTP請求並返迴響應。在設計API介面時,正確地接收和解析客戶端發送的數據至關重要。.NET WebAPI提供了一系列特性,如[FromRoute]、[FromQuery]和[FromBody],用 ...
  • 原因:我之所以想做這個項目,是因為在之前查找關於C#/WPF相關資料時,我發現講解圖像濾鏡的資源非常稀缺。此外,我註意到許多現有的開源庫主要基於CPU進行圖像渲染。這種方式在處理大量圖像時,會導致CPU的渲染負擔過重。因此,我將在下文中介紹如何通過GPU渲染來有效實現圖像的各種濾鏡效果。 生成的效果 ...
  • 引言 上一章我們介紹了在xUnit單元測試中用xUnit.DependencyInject來使用依賴註入,上一章我們的Sample.Repository倉儲層有一個批量註入的介面沒有做單元測試,今天用這個示例來演示一下如何用Bogus創建模擬數據 ,和 EFCore 的種子數據生成 Bogus 的優 ...
  • 一、前言 在自己的項目中,涉及到實時心率曲線的繪製,項目上的曲線繪製,一般很難找到能直接用的第三方庫,而且有些還是定製化的功能,所以還是自己繪製比較方便。很多人一聽到自己畫就害怕,感覺很難,今天就分享一個完整的實時心率數據繪製心率曲線圖的例子;之前的博客也分享給DrawingVisual繪製曲線的方 ...
  • 如果你在自定義的 Main 方法中直接使用 App 類並啟動應用程式,但發現 App.xaml 中定義的資源沒有被正確載入,那麼問題可能在於如何正確配置 App.xaml 與你的 App 類的交互。 確保 App.xaml 文件中的 x:Class 屬性正確指向你的 App 類。這樣,當你創建 Ap ...
  • 一:背景 1. 講故事 上個月有個朋友在微信上找到我,說他們的軟體在客戶那邊隔幾天就要崩潰一次,一直都沒有找到原因,讓我幫忙看下怎麼回事,確實工控類的軟體環境複雜難搞,朋友手上有一個崩潰的dump,剛好丟給我來分析一下。 二:WinDbg分析 1. 程式為什麼會崩潰 windbg 有一個厲害之處在於 ...
  • 前言 .NET生態中有許多依賴註入容器。在大多數情況下,微軟提供的內置容器在易用性和性能方面都非常優秀。外加ASP.NET Core預設使用內置容器,使用很方便。 但是筆者在使用中一直有一個頭疼的問題:服務工廠無法提供請求的服務類型相關的信息。這在一般情況下並沒有影響,但是內置容器支持註冊開放泛型服 ...
  • 一、前言 在項目開發過程中,DataGrid是經常使用到的一個數據展示控制項,而通常表格的最後一列是作為操作列存在,比如會有編輯、刪除等功能按鈕。但WPF的原始DataGrid中,預設只支持固定左側列,這跟大家習慣性操作列放最後不符,今天就來介紹一種簡單的方式實現固定右側列。(這裡的實現方式參考的大佬 ...