堆分配演算法

来源:https://www.cnblogs.com/linhaostudy/archive/2019/03/31/10632349.html
-Advertisement-
Play Games

我們在前面的章節中已經詳細介紹了堆在進程中的地址空間是如何分佈的,對於程式來說,堆空間只是程式向操作系統申請划出來的一大塊地址空間。而程式在通過 malloc申請 記憶體空間時的大小卻是不一定的,從數個字到數個GB都是有可能的。於是我們必須將堆空間管理起來,將它分塊地按照用戶需求出售給最終的程式,並且 ...


我們在前面的章節中已經詳細介紹了堆在進程中的地址空間是如何分佈的,對於程式來說,堆空間只是程式向操作系統申請划出來的一大塊地址空間。而程式在通過 malloc申請

記憶體空間時的大小卻是不一定的,從數個字到數個GB都是有可能的。於是我們必須將堆空間管理起來,將它分塊地按照用戶需求出售給最終的程式,並且還可以按照一定的方式收回記憶體。其實這個問題可以歸結為:如何管理一大塊連續的記憶體空間,能夠按照需求分配、釋放其中的空間,這就是堆分配的演算法。堆的分配演算法有很多種,有很簡單的(比如這裡要介紹的幾種方法),也有些很複雜、適用於某些高性能或者有其他特殊要求的場合.

1. 空閑鏈表

空閑鏈表( Free List)的方法實際上就是把堆中各個空閑的塊按照鏈表的方式連接起來,當用戶請求一塊空間時,可以遍歷整個列表,直到找到合適大小的塊並且將它拆分;當用戶釋放空間時將它合併到空閑鏈表中。

我們首先需要一個數據結構來登記堆空間里所有的空閑空間,這樣才能知道程式請求空間的時候該分配給它哪一塊記憶體。這樣的結構有很多種,這裡介紹最簡單的一種空閑鏈表空閑鏈表是這樣一種結構,在堆里的每一個空閑空間的開頭(或結尾)有一個頭( header),頭結構里記錄了上一個(prev)和下一個(next)空閑塊的地址,也就是說,所有的空閑塊形成了一個鏈表。如圖10-15所示

在這樣結構下如何分配空間呢?

首先在空閑鏈表中查找足夠容納大小的一個空閑塊,然後將這個塊分為兩個部分,一部分為程式請求的空間,另一部分為剩餘的空閑空間。下麵將鏈表裡對應的原來的空閑塊的結構更新為新的剩下來的空閑塊,如果剩下的空閑塊大小為0,則直接將這個結構從鏈表裡刪除。圖10-16演示了用戶請求了一塊和空閑塊2恰好相等的記憶體空間的堆的狀態

這樣的空閑鏈表實現儘管簡單,但在釋放空間的時候,給定一個已分配塊的指針,堆無法確定這個塊的大小。一個簡單的解決方法是當用戶請求k個位元組空間的時候,我們實際分配k+4個位元組,這4個位元組用於存儲該分配的大小,即k+4。這樣釋放該記憶體的時候只要看看這4個位元組的值,就能知道該記憶體塊的大小,然後將其插入到空閑鏈表裡就可以了。

當然這僅僅是最簡單的一種分配策略,這樣的思路存在很多問題。例如,一旦鏈表被破壞,或者記錄長度的那4位元組被破壞,整個堆就無法正常工作,而這些數據恰恰很容易被越界讀寫所接觸到

2. 點陣圖

針對空閑鏈表的弊端,另一種分配方式顯得更加穩健。這種方式稱為點陣圖( Bitmap),其核心思想是將整個堆劃分為大量的塊( block),每個塊的大小相同。當用戶請求記憶體的時候,總是分配整數個塊的空間給用戶,第一個塊我們稱為已分配區域的頭(Head),其餘的稱為己分配區域的主體(Body)。而我們可以使用一個整數數組來記錄塊的使用情況,由於每個塊只有頭/主體空閑三種狀態,因此僅僅需要兩位即可表示一個塊,因此稱為點陣圖。

Q&A

假設堆的大小為1MB,那麼我們讓一個塊大小為128位元組,那麼總共就有1M/128=8k個塊,可以用8k/(32/2)=512個int來存儲。這有512個int的數組就是一個點陣圖,其中每兩位代表一個塊。當用戶請求300位元組的記憶體時,堆分配給用戶3個塊,並將點陣圖的相應位置
標記為頭或軀體。

圖10-17為一個這樣的堆的實例

這個堆分配了3片記憶體,分別有2/4/1個塊,用虛線框標出。其對應的點陣圖將是:

(HIGH) 11 00 00 10 10 10 11 00 00 00 00 00 00 00 10 11 (LOW)

其中11表示H(HEAD),10表示主體(Body),00表示空閑(Free)

這樣的實現方式有幾個優點:

  • 速度快:由於整個堆的空閑信息存儲在一個數組內,因此訪問該數組時cache容易命中;
  • 穩定性好:為了避免用戶越界讀寫破壞數據,我們只須簡單備份一下點陣圖即可,而且即使部分數據被破壞,也不會導致整個堆無法工作
  • 塊也不需要額外信息,易於管理

當然缺點也是顯而易見的

  • 分配記憶體的時候容易產生碎片。例如分配300位元組的時候,實際分配了3塊即384個位元組,浪費了84個位元組
  • 如果堆很大,或者設定的一個塊很小(這樣可以減少碎片),那麼點陣圖將會很大,可能會失去cache命中率很高的優勢,而且也會浪費一定的空間。針對這種情況,我們可以使用多級的點陣圖。

3. 對象池

以上介紹的堆管理方法是最為基本的兩種,實際上在一些場合,被分配對象的大小是較為固定的幾個值,這時候我們可以針對這樣的特征設計一個更為高效的堆演算法,稱為對象池。

對象池的思路很簡單,如果每一次分配的空間大小都一樣,那麼就可以按照這個每次請求分配的大小作為一個單位,把整個堆空間劃分為大量的小塊,每次請求的時候只需要找到個小塊就可以了

對象池的管理方法可以採用空閑鏈表,也可以採用點陣圖,與它們的區別僅僅在於它假定了每次請求的都是一個固定的大小,因此實現起來很容易。由於每次總是只請求一個單位的記憶體,因此請求得到滿足的速度非常快,無須查找一個足夠大的空間。

實際上很多現實應用中,堆的分配演算法往往是採取多種演算法複合而成的。比如對於 glibc來說,它對於小於64位元組的空間申請是採用類似於對象池的方法;而對於大於512位元組的空間申請採用的是最佳適配演算法:對於大於64位元組而小於512位元組的,它會根據情況採取上述方法中的最佳折中策略:對於大於128KB的申請,它會使用mmap機制直接向操作系統申請空間。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 在搜索引擎優化領域,靜態網頁對於SEO的優化有著很大的好處,因此很多人就想把自己的網站的一些網頁做成偽靜態。我們現在在網路上發現很多博客網站、論壇網站、CMS內容管理系統等都有使用偽靜態這一種情況,偽靜態在地址欄看到的URL地址是以.html結尾的,但實際上卻是一個動態的網頁,後臺可能是Asp.ne ...
  • 在C#中可以使用MemoryStream類、BinaryFormatter類等來操作圖片,將圖片讀取到二進位數據流中,最終轉成二進位數據流進行調用,詳細的實現如下方法所示。 備註:原文轉載自C#將圖片轉換為二進位流調用_IT技術小趣屋。 ...
  • C#操作MySQL的類 C#操作MySQL的類 [C#cāozuò MySQL de lèi] C# operation MySQL class C#操作MySQL的類 [C#cāozuò MySQL de lèi] C# operation MySQL class C#操作MySQL的類 [C#c ...
  • 內核編譯丶sed丶awk Linux:單內核 模塊化:動態 /lib/modules lsmod,modinfo,modprobe,insmod,,modprobe -r ,rmmod dep文件:模塊的依賴關係 sysbols:符號映射 depmod:用來生成模塊依賴關係 kernel文件夾下 a ...
  • 第一章 操作系統的定義:控制和管理電腦軟硬體資源、合理組織電腦工作流程,以方便用戶使用電腦的程式的集合。 操作系統的目標:方便性、有效性、可擴充性、開放性 操作系統的五個基本功能:存儲管理、處理機管理、設備管理、文件管理、用戶介面 操作系統的發展過程: 未配置操作系統的電腦系統:人工操作方式 ...
  • 1. 創建shell腳本 2. 給shell腳本添加執行許可權 3. 給腳本添加定時任務 crontab文件的說明: 用戶創建的crontab文件中,每一行都代表一項定時任務,每行的每個欄位代表一項設置,它的格式每行共分為六個欄位,前五段是時間設定欄位,第六段是要執行的命令欄位。 格式如下:minut ...
  • 樹狀目錄結構: 以下是對這些目錄的解釋: /bin:bin是Binary的縮寫, 這個目錄存放著最經常使用的命令。 /boot:這裡存放的是啟動Linux時使用的一些核心文件,包括一些連接文件以及鏡像文件。 /dev :dev是Device(設備)的縮寫, 該目錄下存放的是Linux的外部設備,在L ...
  • 基本信息記錄我在使用win10過程中遇到的一些問題我所使用的兩個win10系統Win10 企業版 1607(家裡電腦)Win10 專業版 1806(公司電腦)win10 開啟Sets請問您在開始-設置-系統-多任務中是否看到Sets的相關設置。如果沒有請您嘗試將時區和地區設置成美國後查看有沒有相關設... ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...