Redis - 對象結構

来源:https://www.cnblogs.com/fatedeity/archive/2023/03/27/17260423.html
-Advertisement-
Play Games

其實,Redis 的每種對象都有對象結構與對應編碼的數據結構組合而成,進階 Redis 就需要從它的對象機制開始。 ...


簡介

Redis 使用對象存儲資料庫中的鍵和值,每當在 Redis 中創建一個新的鍵值對時,都會創建兩個對象:一個是鍵對象,另一個是值對象。

Redis 對象結構

其中,Redis 的每種對象都由對象結構和對應編碼的數據結構組合而成,而每種對象類型對應若幹編碼方式,不同編碼方式對應的底層數據結構也會有所不同。

資料庫結構

Redis 伺服器的資料庫都保存在 redisServerdb 數組中,數組中的每個項都是 redisDb 結構,每個 redisDb 結構代表一個資料庫。

下麵是部分 redisServer 結構:

struct redisServer {
    redisDb *db;    // 保存資料庫的數組
    int dbnum;      // 伺服器的資料庫數量
    // ...
};

其中,初始化伺服器時,會根據 dbnum 的值決定創建多少個資料庫。預設情況下,dbnum 的值是 16。

切換資料庫

預設情況下,Redis 客戶端的目標資料庫是 0 號資料庫,但是客戶端可以使用 SELECT 命令切換目標資料庫。

需要註意的是,Redis 現在沒有向客戶端返回目標資料庫的命令,對資料庫進行誤操作極易出現不符合預期的情況,尤其是像 FLUSHDB 這樣的命令。

比較好的做法是儘量少地在代碼中切換資料庫,即使是在命令行操作,也儘量顯式地切換到指定的資料庫,然後再執行命令。

資料庫鍵空間

每一個資料庫中都存儲了一個字典,這個字典存儲了資料庫中的所有鍵值對,這個字典又被稱為鍵空間。

所有對資料庫中鍵值對的增刪查改操作,實際上都是在操作鍵空間字典。

只是,由於資料庫可以存儲多種不同的數據結構類型,這些增刪查改操作,都會使用對應數據結構提供的函數執行。

讀寫鍵空間的維護操作

當使用 Redis 命令對鍵空間字典進行讀寫操作時,伺服器不僅會執行這些讀寫操作,還會做一些維護性的操作,提高 Redis 的可用性,其中包括:

  • 讀取一個鍵時,伺服器會根據鍵是否存在來更新鍵空間命中次數和不命中次數
  • 讀取到一個鍵之後,伺服器會更新這個鍵的 lru 屬性
  • 如果伺服器讀取到鍵之後,發現這個鍵已經過期,會先刪除這個鍵,再執行後續的操作
  • 如果有客戶端使用 WATCH 命令監視這個鍵,伺服器修改這個鍵之後,會將這個鍵標記為 dirty 狀態
  • 伺服器每次修改一個鍵之後,都會對臟計數器的值增 1,這個計數器會觸發伺服器的持久化或複製操作
  • 如果伺服器開啟了通知功能,那麼對這個鍵做修改操作之後,伺服器將按配置發送對應的資料庫通知

類型與編碼

Redis 中的每個對象都是由一個 redisObject 結構表示,其結構如下:

typedef struct redisObject {
    unsigned type:4;        // 類型
    unsigned encoding:4;    // 編碼
    unsigned lru:LRU_BITS;  // 記錄最後訪問的時間
    int refcount;           // 引用計數
    void *ptr;              // 指向底層實現數據結構的指針
} robj;

其中 typeencodingptr 是最重要的三個屬性。

數據類型

對象的 type 屬性記錄了數據結構的類型,它總是以下枚舉值之一:

  • REDIS_STRING
  • REDIS_LIST
  • REDIS_HASH
  • REDIS_SET
  • REDIS_ZSET

對象編碼

對象的 encoding 屬性記錄了 ptr 指針指向對象的編碼方式,它總是以下枚舉值之一:

  • OBJ_ENCODING_RAW
  • OBJ_ENCODING_INT
  • OBJ_ENCODING_HT
  • OBJ_ENCODING_ZIPMAP
  • OBJ_ENCODING_LINKEDLIST
  • OBJ_ENCODING_ZIPLIST
  • OBJ_ENCODING_INTSET
  • OBJ_ENCODING_SKIPLIST
  • OBJ_ENCODING_EMBSTR
  • OBJ_ENCODING_QUICKLIST
  • OBJ_ENCODING_STREAM

通過使用 encoding 屬性設定對象的編碼方式,而不是使用固定編碼,這樣極大地提高了 Redis 的靈活性和效率,也方便 Redis 針對不同的場景選擇不同的編碼,針對性地做優化。

對象指針

對象的 ptr 屬性是一個指針,指向實際保存值的數據結構。

空轉時間

對象的 lru 屬性記錄了對象最後一次被命令程式訪問的時間。空轉時間指的是當前時間減去 lru 屬性得到的時長,即未被訪問的時長。

鍵的空轉時間在記憶體回收演算法是 volatile-lruallkeys-lru 時使用到,當伺服器占用的記憶體超過了 maxmemory 之後,空轉時長較高的那部分鍵會優先被伺服器釋放,從而回收記憶體。

命令執行流程

Redis 中用於操作鍵的命令分為兩類:任何類型的鍵都可以執行的命令、針對特定類型的鍵可執行的命令。例如 DELEXPIRE 等命令屬於前者,SETHSET 等命令屬於後者。

針對特定類型的鍵的執行命令,執行前需要檢查鍵的類型,確定當前鍵是否可執行當前命令。

在 Redis 中,一個數據類型有可能對應多個編碼方式,在檢查完鍵的類型之後,還需要根據數據類型的不同編碼進行多態處理。

因此,當處理一個特定類型命令的時候,執行的步驟如下:

  • 根據給定的 key 名稱,在資料庫字典中查找相對應的 Redis 對象,如果沒有找到,返回 NULL
  • 檢查 Redis 對象中的 type 屬性和執行命令所需的類型是否相符,如果不相符,返回類型錯誤
  • 根據 Redis 對象中的 encoding 屬性選擇合適的操作函數來處理底層數據結構
  • 將操作函數的返回值作為命令請求的響應返回給客戶端

對象共用

目前,為瞭解決重覆分配的麻煩,Redis 會在初始化伺服器時創建一萬個字元串對象,這些對象包含了從 0 到 9999 的所有整數值,當伺服器需要用到值為 0 到 9999 的字元串對象時,伺服器就會使用這些共用對象,而不是創建新的對象。

儘管共用更複雜的對象可以節約更多的記憶體,但受到 CPU 時間的限制,Redis 只對包含整數值的字元串對象進行共用。

需要註意的是,共用對象只能被字典和雙向鏈表這類能帶有指針的數據結構使用。

記憶體回收

因為 C 語言並不具備自動記憶體回收功能,所以 Redis 在自己的對象系統中構建了一個引用計數技術實現記憶體回收機制。通過這個記憶體回收機制,Redis 可以通過對象的引用計數信息,在適當的時候自動釋放對象併進行記憶體回收。

對象的引用計數信息通過 refcount 屬性記錄,其使用如下:

  • 當創建新對象時,引用計數的值會初始化為 1
  • 當這個對象被共用時,引用計數的值會自增
  • 當使用完一個對象後,或者消除對這個對象的引用之後,引用計數的值會自減
  • 當對象的引用計數值變為 0 時,對象所占用的記憶體會被釋放

首發於「程式員翔仔」,點擊查看更多。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 基本操作 pwd命令 作用:顯示當前工作目錄 用法:pwd cd命令 作用:改變目錄位置 用法:cd [option] [dir] cd 目錄路徑 -進入指定目錄 cd .. -返回父目錄 cd / -進入根目錄 cd或cd ~ -進入用戶主目錄 ls命令 用法:ls [option] [file] ...
  • 一、總體設計思路 以AT89C52單片機為系統核心,充當分析和處理數據的功能。基於AT89C52設計智能濕度控制系統,該系統需對環境空氣中的濕度狀態具有實時監測的功能、當空氣中的相對濕度不理想時可以自動加濕或者自動除濕的功能、電子數位管可以隨時顯示空氣中的相對濕度、手動設置濕度範圍值、並且具有報警功 ...
  • 在伺服器資源有限的情況下,可利用該方案快速搭建各類 mysql 架構方案。各 MySQL 實例共用一個 mysqld 主程式,但各實例數據目錄是獨立的,存放在不同的文件夾中;好了、廢話不多說,直接上乾貨,具體搭建步驟如下 環境介紹 | 實例 | 主機 | mysql port | mysqlx po ...
  • 已測試可用的版本 MySQL 8.0; 環境: windows7/10MySQL 8.0.15免安裝版 項目需求 需要實現一個自動化MySQL配置安裝及初始化資料庫(初始化包括:設置用戶名和密碼)。 批處理 用來對某對象進行批量的處理,即可通過批處理讓相應的軟體執行自動化操作。 MySQL免安裝版使 ...
  • 摘要:本文主要講解如何在內核保證操作不能中斷採取的特殊處理,理論上用戶執行的sql使用的記憶體(dynamic_used_memory) 是不會大範圍的超過max_dynamic_memory的記憶體的 本文分享自華為雲社區《Gaussdb(DWS)記憶體報錯排查方法》,作者: fighttingman。 ...
  • XAMPP使用 shell 命令 每個資料庫對應 一個子文件夾 mysql 進入mySQL的命令 -uroot userroot 登錄用戶 -uroot -p password 登錄密碼 -p123 show databases 顯示資料庫 use databaseName 使用哪個資料庫 show ...
  • 保障資料庫的測試質量可以從以下幾個方面進行: (1)設計合理的測試用例:需要設計合理、全面、準確的測試用例,覆蓋資料庫的各種功能和場景,包括常規操作、異常操作、性能測試、安全測試等。 (2)自動化測試:可以採用自動化測試的方式,提高測試的效率和準確性,同時可以快速發現和解決問題。 (3)定期回歸測試 ...
  • 保障ETL過程的數據正確性可以從以下幾個方面考慮: 數據源的質量:ETL過程的數據質量取決於數據源的質量,因此需要對數據源進行充分的驗證和清洗,確保數據的準確性、完整性和一致性。 數據轉換的準確性:在ETL過程中,數據轉換是非常重要的一步,需要確保數據轉換的準確性和正確性。可以採用數據驗證、數據重覆 ...
一周排行
    -Advertisement-
    Play Games
  • 一、openKylin簡介 openKylin(開放麒麟) 社區是在開源、自願、平等和協作的基礎上,由基礎軟硬體企業、非營利性組織、社團組織、高等院校、科研機構和個人開發者共同創立的一個開源社區,致力於通過開源、開放的社區合作,構建桌面操作系統開源社區,推動Linux開源技術及其軟硬體生態繁榮發展。 ...
  • 簡介 Flurl是一個用於構建基於HTTP請求的C#代碼的庫。它的主要目的是簡化和優雅地處理網路請求(只用很少的代碼完成請求)。Flurl提供了一種簡單的方法來構建GET、POST、PUT等類型的請求,以及處理響應和異常。它還提供了一些高級功能,如鏈式調用、緩存請求結果、自動重定向等。本文將介紹Fl ...
  • 一:背景 1. 講故事 最近也挺奇怪,看到了兩起 CPU 爆高的案例,且誘因也是一致的,覺得有一些代表性,合併分享出來幫助大家來避坑吧,閑話不多說,直接上 windbg 分析。 二:WinDbg 分析 1. CPU 真的爆高嗎 這裡要提醒一下,別人說爆高不一定真的就是爆高,我們一定要拿數據說話,可以 ...
  • 剛開始寫文章,封裝Base基類的時候,添加了trycatch異常塊,不過當時沒有去記錄日誌,直接return了。有小伙伴勸我不要吃了Exception 其實沒有啦,項目剛開始,我覺得先做好整體結構比較好。像是蓋樓一樣。先把樓體建造出來,然後再一步一步的美化完善。 基礎的倉儲模式已經ok,Autofa ...
  • 框架目標 什麼是框架,框架能做到什麼? 把一個方向的技術研發做封裝,具備通用性,讓使用框架的開發者用起來很輕鬆。 屬性: 通用性 健壯性 穩定性 擴展性 高性能 組件化 跨平臺 從零開始-搭建框架 建立項目 主鍵查詢功能開發 綁定實體 一步一步的給大家推導: 一邊寫一邊測試 從零開始--搭建框架 1 ...
  • 大家好,我是沙漠盡頭的狼。 本方首發於Dotnet9,介紹使用dnSpy調試第三方.NET庫源碼,行文目錄: 安裝dnSpy 編寫示常式序 調試示常式序 調試.NET庫原生方法 總結 1. 安裝dnSpy dnSpy是一款功能強大的.NET程式反編譯工具,可以對.NET程式進行反編譯,代替庫文檔的功 ...
  • 在`Windows`操作系統中,每個進程的虛擬地址空間都被劃分為若幹記憶體塊,每個記憶體塊都具有一些屬性,如記憶體大小、保護模式、類型等。這些屬性可以通過`VirtualQueryEx`函數查詢得到。該函數可用於查詢進程虛擬地址空間中的記憶體信息的函數。它的作用類似於`Windows`操作系統中的`Task... ...
  • 背景介紹 1,最近有一個大數據量插入的操作入庫的業務場景,需要先做一些其他修改操作,然後在執行插入操作,由於插入數據可能會很多,用到多線程去拆分數據並行處理來提高響應時間,如果有一個線程執行失敗,則全部回滾。 2,在spring中可以使用@Transactional註解去控制事務,使出現異常時會進行 ...
  • 線程(thread)是操作系統能夠進行運算調度的最小單位。它被包含在進程之中,是進程中的實際 運作單位。一條線程指的是進程中一個單一順序的控制流,一個進程中可以併發多個線程,每條線 程並行執行不同的任務。 ...
  • 發現Java 21的StringBuilder和StringBuffer中多了repeat方法: /** * @throws IllegalArgumentException {@inheritDoc} * * @since 21 */ @Override public StringBuilder ...