Redis 數據結構-雙向鏈表

来源:https://www.cnblogs.com/taojietaoge/archive/2023/01/10/17039831.html
-Advertisement-
Play Games

Redis 數據結構-雙向鏈表 最是人間留不住,朱顏辭鏡花辭樹。 1、簡介 Redis 之所以快主要得益於它的數據結構、操作記憶體資料庫、單線程和多路 I/O 復用模型,進一步窺探下它常見的五種基本數據的底層數據結構。 Redis 常見數據類型對應的的底層數據結構。 String:簡單動態字元串。 L ...


Redis 數據結構-雙向鏈表

 

    最是人間留不住,朱顏辭鏡花辭樹。

 

1、簡介

Redis 之所以快主要得益於它的數據結構、操作記憶體資料庫、單線程和多路 I/O 復用模型,進一步窺探下它常見的五種基本數據的底層數據結構。

Redis 常見數據類型對應的的底層數據結構。

  • String:簡單動態字元串。
  • List:雙向鏈表、壓縮列表。
  • Hash:壓縮列表、哈希表。
  • Sorted Set:壓縮列表、跳錶。
  • Set:哈希表、整數數組。

2、雙向鏈表

C 語言是沒有內置鏈表這種結構,而當一個列表鍵包含較多的元素,或者列表中包含的元素都是比較長的字元串的時,Redis 就會使用鏈表作為 list 的底層實現,就自己實現了雙向鏈表,相當於Java 語言中的LinkedList,但又不完全是。

單純的鏈表優缺點:

  • 雙向鏈表數據結構,支持前後順序遍歷。
  • 不需要連續的的記憶體空間,插入和刪除的時間複雜度是 O(1) 級別的,效率較高。
  • 比起數組它的缺點就是查詢較慢(時間複雜度O(n))。

常見使用場景

雙向鏈表的特性經常被用於非同步隊列的使用。實際開發中將需要延後處理的任務結構體序列化成字元串,放入Redis 的隊列中,另一個線程從這個列表中獲取數據進行後續的業務邏輯。

鏈表節點結構

從redis/src/adlist.h 源碼文件中查看鏈表節點結構設計。

1 typedef struct listNode {
2  struct listNode *prev; // 前置節點,如果是list的頭結點,則prev指向NULL 
3  struct listNode *next;// 後置節點,如果是list尾部結點,則next指向NULL 
4  void *value; // 記錄該節點的值,能夠存放任何信息(也叫萬能節點)
5 } listNode;

從listNode 結構中看到一個節點由頭指針 prev 、尾指針 next  以及節點的值 value 組成,這種有前置節點和後置節點很明顯就是一個雙向鏈表。

鏈表結構

為了方便操作,Redis 在 listNode 鏈表節點結構體基礎上又封裝了 list 這個數據結構,而且封裝之後,還提供了頭節點、尾節點以及一些自定義的函數。鏈表結構如下:

 1 typedef struct list { 
 2   listNode *head; // 鏈表 頭結點 指針 
 3   listNode *tail; // 鏈表 尾結點 指針
 4   unsigned long len; // 鏈表長度計數器 即 節點的個數
 5  
 6   // 三個函數指針
 7   void *(*dup)(void *ptr); // 複製函數 複製鏈表節點保存的值 
 8   void (*free)(void *ptr); // 釋放函數 釋放鏈表節點保存的值
 9   int (*match)(void *ptr, void *key); // 匹配函數 查找節點時使用 比較鏈表節點所保存的節點值和另一個輸入的值是否相等 
10 } list;

list 結構為鏈表提供了鏈表頭指針 head、鏈表尾節點 tail、鏈表節點數量 len、以及可以自定義實現的 dup、free、match 函數。

  • head:鏈表 頭結點 指針,指向了雙向鏈表的最開始的一個節點;
  • tail:鏈表 尾結點 指針,指向了雙向鏈表的最後一個節點;
  • len:代表了雙向鏈表節點的數量;
  • dup:複製函數,用於複製雙向鏈表節點所保存的值;
  • free:釋放函數,用於釋放雙向鏈表節點所保存的值;
  • match:匹配函數,用於對比雙向鏈表節點所保存的值和另外一個的輸入值是否相等。

相關命令

右進左出(隊列)

隊列在結構上是先進先出(FIFO)的數據結構(比如排隊購票的順序),常見場景如消息排隊、非同步處理等,用於確保元素的訪問順序。
lpush -> 從左邊邊添加元素

127.0.0.1:6379> lpush tjt_list 1 2 3

rpush -> 從右邊添加元素

127.0.0.1:6379> rpush tjt_list 1 2 3

llen -> 獲取列表的長度

127.0.0.1:6379> llen tjt_list

lpop -> 從左邊彈出元素

127.0.0.1:6379> lpop tjt_list

右進右出(

棧在結構上是先進後出(FILO)的數據結構(比如彈夾壓入子彈,子彈被射擊出去的順序就是棧),這種數據結構一般用來處理一些逆序輸出的業務場景。

lpush -> 從左邊邊添加元素

127.0.0.1:6379> lpush tjt_list 1 2 3

rpush -> 從右邊添加元素

127.0.0.1:6379> rpush tjt_list 1 2 3

rpop -> 從右邊彈出元素

127.0.0.1:6379> rpop tjt_list

慢操作

由於列表(list)的鏈表數據結構,它的遍歷是慢操作,所以涉及到遍歷的性能將會隨著遍歷區間range 的增大而增大。在Redis 鏈表中,list 的索引運行為負數,-1代表倒數第一個,-2代表倒數第二個,其它同理。

lindex -> 遍歷獲取列表指定索引處的值(下方所有為 0)

127.0.0.1:6379> lindex tjt_list 0
"you"

lrange -> 獲取從索引start 到stop 處的全部值

127.0.0.1:6379> lrange tjt_list 0 -1
1) "you"
2) "will"
3) "never"
4) "know"

ltrim -> 截取並保存索引start 到stop 處的全部值,其它將會被刪除

127.0.0.1:6379> ltrim tjt_list 1 -1
OK
127.0.0.1:6379> lrange tjt_list 0 -1
1) "will"
2) "never"
3) "know"

非普通LinkedList

前面提到了Redis 數據類型List 對應的的底層數據結構有 雙向鏈表 和 壓縮列表,因為 Redis底層存儲list(列表)不是一個簡單的LinkedList,而是quicklist 快速列表。

為什麼用quicklist 替代LinkedList

普通的LinkedList node節點元素,都會持有一個prev-> 執行前一個node 節點和next-> 指向後一個node 節點的指針(引用),這種結構雖然支持前後順序遍歷,但是也帶來了不小的記憶體開銷,如果node 節點僅僅是一個int 類型的值,那麼引用的記憶體比例將會更大。所以Redis 底層對於list(列表)的存儲,當元素個數少的時候,它會使用一塊連續的記憶體空間來存儲,這樣可以減少每個元素增加prev 和next 指針帶來的記憶體消耗,減少記憶體碎片化問題。

quicklist

quicklist 是多個ziplist (壓縮列表)組成的雙向列表。

ziplist

ziplist是一塊連續的記憶體地址,他們之間無需持有prev和next指針,能通過地址順序定址訪問。

3、鏈表小結

鏈表優勢

  • listNode 鏈表節點的結構裡帶有 prev 和 next 指針,獲取某個節點的前置節點或後置節點的時間複雜度只需O(1),而且這兩個指針都可以指向 NULL,所以鏈表是無環鏈表,對雙向鏈表的訪問以 NULL 結束;
  • list 結構因為提供了表頭指針 head 和表尾節點 tail,所以獲取鏈表的表頭、表尾節點的時間複雜度都是 O(1);
  • list 結構因為提供了鏈表節點數量 len,通過 len 屬性直接獲取節點的數量,時間複雜度為 O(1) , 效率高;
  • listNode 鏈表節使用 void* 指針保存節點值,並且可以通過 list 結構的 dup、free、match 函數指針為節點設置該節點類型特定的函數,因此鏈表節點可以保存各種不同類型的值。

​鏈表缺陷

  • 鏈表每個節點之間的記憶體都是不連續的,無法很好利用 CPU 緩存。數組數據結構就能很好利用 CPU 緩存,因為數組的記憶體是連續的,可以充分利用 CPU 緩存來加速訪問。
  • 保存一個鏈表節點的值每次都需要為一個鏈表節點結構頭分配空間,記憶體開銷較大。Redis 3.0 的 List 對象在數據量比較少的情況下,會採用 壓縮列表 作為底層數據結構的實現,節省記憶體空間,降低保存鏈表節點的記憶體開銷。

 

 

  最是人間留不住 朱顏辭鏡花辭樹      

 

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 方法一: 在 JavaScript 中,可以使用 URLSearchParams 對象來處理 URL 中的查詢字元串。 序列化(將 JavaScript 對象轉換為查詢字元串)可以使用 URLSearchParams 對象的 append() 方法,如下所示: let params = new UR ...
  • 這裡給大家分享我在網上總結出來的一些知識,希望對大家有所幫助 測試環境好好地功能,上了生產,莫名其妙報錯,開始以為是沒有設置Js安全介面功能變數名稱,結果讓相應人員一查,已經設置了相應的功能變數名稱,再看下公眾號內的介面許可權部分,相關js許可權也都是已授權,沒辦法,只能按照微信文檔上的常見錯誤及解決方法,設置debu ...
  • 本文簡介 點贊 + 關註 + 收藏 = 學會了 學習 Fabric.js,我的建議是看文檔不如看 demo。 本文實現的功能:將元素拖進到畫布中並生成對應的圖形或圖片。 效果如下圖所示: 思路 要實現以上效果,需要考慮以下幾點: 元素有拖拽功能。 能在畫布中生成對應的元素。 畫佈有可能縮放。 畫佈有 ...
  • 儘量不要用== ==的比較過程 以 [] == ![] 為例 左邊 [] 是個數組 右邊 ![] 是個表達式,表示對數組取反,需要對數組進行布爾判定,數組是對象所以是true,取反之後為false,所以就相當於比較 == 兩邊數據類型不一樣會將數據轉變成原始類型 ,原始類型有 null 、 unde ...
  • 路線規劃 簡介 路線規劃常用於出行路線的提前預覽,我們提供4種類型的路線規劃,分別為:駕車、步行、公交和騎行,滿足各種的出行場景。 高德開放平臺 本例是駕車路線規劃功能和位置選擇地圖api:chooseLocation 示例: 1、在頁面的 js 文件中,實例化 AMapWX 對象,請求進行駕車路線 ...
  • 前一段時間做項目,頻繁使用到上傳圖片組件,而且只上傳一個封面,於是想著自定義一個圖片封面上傳組件。先來看一下效果: 第一張圖片是上傳之前,第二張圖片是上傳成功後,第3張圖片是滑鼠放上去之後的效果! 首先整理需求,圖片上傳我們使用照片牆的方式,只能上傳一張圖片,圖片上傳成功後不能繼續上傳,如果想要更換 ...
  • 電銷是什麼?就是坐席拿著電話給客戶打電話嗎?no no no,讓我們一起走進京音平臺之電銷系統。 京音平臺2020年初開始建設,過去的兩年多的時間里,經歷了跌宕起伏,有經驗、有教訓,整體來說平臺經歷了人工、自動化階段,目前處於初步智能化階段,希望可以將過去的一些心路歷程分享給大家,共同交流、共同進... ...
  • 1高階函數 1.1 數學概念 回顧下數學知識: y=f(x) 這是最開始接觸的普通函數 y=g(f(x)) 這個就是我們接觸到的高階函數 在數學和電腦科學中,高階函數至少應當是滿足下麵一個條件的函數: 1)接受一個或者多個函數作為參數 2)輸出一個函數 程式中我們的高階函數也類似 示例計數器的函數 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...