brk() 和 mmap() 記憶體映射

来源:https://www.cnblogs.com/zhangtiezi/archive/2018/02/08/8431091.html
-Advertisement-
Play Games

參考博文:http://www.cnblogs.com/huxiao-tee/p/4660352.html x86平臺下linux進程虛擬地址空間分佈(2.6.7以前版本) mmap區域與棧區域相對增長,只有1GB連續的虛擬地址空間可用。 x86平臺下linux進程虛擬地址空間分佈(2.6.7以後版 ...


參考博文:http://www.cnblogs.com/huxiao-tee/p/4660352.html

  • x86平臺下linux進程虛擬地址空間分佈(2.6.7以前版本)

    mmap區域與棧區域相對增長,只有1GB連續的虛擬地址空間可用。

  • x86平臺下linux進程虛擬地址空間分佈(2.6.7以後版本)

Random stack offset:由於之前棧的地址是固定的,容易被人利用棧溢出進行攻擊,這裡棧每次有一個偏移量。

RLIMIT_STACK:向棧中壓入數據容量超過棧的容量時,會觸發page fault,異常會檢測到最近的虛擬地址空間,發現產生異常的地址與棧相鄰,會擴大棧的大小(一般是8M)。如果棧被加長,棧針回退時不會再收縮,如果stack overflow則會導致segment fault。

Memory Mapping Segment:記憶體映射的位置,一種高效I/O,後面會細說。

  • 對heap的操作函數  brk() 和 sbrk()  

      int brk(void *addr);

    void sbrk(intptr_t increment);

    內核數據結構mm_struct中 start_brk是進程動態分配的起始地址(heap的起始地址),brk 是堆當前最後的地址。      

    首先program break就是當前brk的位置,所以他是數據段初始化結束後heap的第一個位置,而不是heap的尾部。

    sbrk()是庫函數,brk()是系統調用,相對於庫函數來說一般系統調用會提供相對簡單的工作。都是改變brk的值來擴展收縮堆(increment 為負數時收縮)。

  • mmap 映射區函數

   1.基礎概念

    mmap 是一種記憶體映射方法,將一個文件或其他對象映射到進程的地址空間,實現文件磁碟地址和進程虛擬地址一一對應的關係。內核空間對這塊區域的改變也直接反應到用戶空間,實現不同進程的文件共用。

    linux內核使用vm_area_struct結構表示一個獨立的虛擬記憶體區域,一個進程使用多個vm_area_struct來分別表示不同類型的虛擬記憶體區域.

    當vm_area_struct數目較少時,按照升序以單戀表的形式組織結構,在數目較多時使用AVL樹來實現。

v

mmap函數是創建一個新的vm_area_struct結構,並將其與物理地址相連

   2.  mmap記憶體映射原理

    分為三個階段

    • 進程啟動映射過程,併在虛擬地址空間中為映射創建虛擬映射區域  

       1>進程在用戶空間調用mmap。

       原型:void *mmap(void *start, size_t length, int prot, int flags, int fd, off_t offset);

       2>在當前進程的虛擬地址空間中,尋找一段空間滿足要求的連續的虛擬地址。

       3>為此虛擬區分配一個vm_area_struct 結構,接著對這個結構的各個域進行初始化

       4>將新建的虛擬結構(vm_area_struct)插入到進程的虛擬地址區的鏈表或數種。

    • 調用內核空間的系統調用函數mmap(不同於用戶空間)實現文件物理地址和進程虛擬地址的一一映射關係 

       5>為映射分配了新的虛擬地址區域後,通過待映射的文件指針,在文件描述符表中找到對應的文件描述符,加入到struct file中 

       6>linux中的file_operation結構中定義了不同事件對應的設備驅動函數,其中有  int mmap(struct file *filp, struct vm_area_struct *vma),其實這個函數就是將用戶空間與設備記憶體相連,也就是對虛擬地址的訪問轉化為對設備的訪問

       7>通過inode模塊找到對應的文件,也就是磁碟的物理地址

       8>建立頁表,實現文件地址和虛擬地址區域的映射關係。這裡只建立了映射關係,主存中沒有對應物理地址的數據。

    • 進程發起對這片映射空間的訪問,引發缺頁異常,實現文件內容到主存的拷貝

       9>進程的讀寫,通過查詢頁表發現這一段地址不再物理頁面上,引發缺頁異常

       10>進行缺頁異常判斷,申請調頁

       11>先判斷swap cache中沒有沒需要訪問的記憶體頁,如果沒有調用nopage把所缺德頁從磁碟裝入主存

       12>之後可以進行讀寫,會有一段時間延遲,調用msync()立即更新。

   3. mmap優點總結

         1>對文件的讀取操作跨過了頁緩存,減少了數據的拷貝次數,使用記憶體讀取代了I/O操作,提高了文件讀取效率。

    2>實現了用戶空間和內核空間的高效交互方式

    3>提供進程間共用記憶體及相互通信方式

    4>實現高效的大規模數據傳輸

 

還有內核的高端記憶體映射:https://www.cnblogs.com/wuchanming/p/4360277.html

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 這是一個可以幫助你快速開發Repository的lib。有點像Springdata JPA根據方法名、註解來自動生成查詢方法的功能。 對於一些簡單的查詢,只需要定義介面就行了,實現都不用。 ...
  • 1.下載ActiveMQ 官方網站下載地址:http://activemq.apache.org/ 2.運行ActiveMQ 解壓縮apache-activemq-5.10.0-bin.zip,然後雙擊apache-activemq-5.10.0\bin\win32\activemq.bat運行Ac ...
  • 輸入的時候輸這種代碼式後臺監控cd /nmon./nmon_x86_64_sles11 -f -s 30 -c 120其中各參數表示: -f 按標準格式輸出文件:_YYYYMMDD_HHMM.nmon -s 每隔n秒抽樣一次,這裡為30 -c 取出多少個抽樣數量,這裡為120,即監控=120*(30... ...
  • 2017工作學習總結 2017年最大的一件事當然是結婚了,正式步入婚姻生活後,才真正意識到了人生已經進入到了下一個階段了,即從“天生”的三口之家,變成了獨立的新家。對於這個新的開始,我無比的激動,並充滿幻想,我希望將來能和我的妻子,共同分享我們努力換來的幸福生活。 2017年,另一件事情是我開始了對 ...
  • 1. 前言 在WPF中,很多打開下拉框(Popup或Flyout)選擇一個結果值的控制項,除了ComboBox等少數例外,這種控制項都以 Picker做名稱尾碼。因為要打開關閉下拉框和計算下拉框的彈出位置, 這類控制項實現起來還挺麻煩的。Silverlight Toolkit中貼心地提供了一個Picker ...
  • inux中增加swap分區文件的步驟方法: 1、檢查當前的swap情況(使用free -h或cat /proc/swaps或swapon -s ): 2、查看硬碟使用情況(df -hal): 3、使用dd命令創建名為swapfile 的swap交換文件(文件名和目錄任意): 科普:if(即輸入文件, ...
  • 當我們在 Linux 系統中進行進程間通信時,例如信號量,消息隊列,共用記憶體等方式,會發現有System V以及POSIX兩種類型。今天我們就來簡單介紹下它們。 POSIX: POSIX(Portable Operating System Interface for Computing System ...
  • 1、set -e "Exit immediately if a simple command exits with a non-zero status." 在“set -e”之後出現的代碼,一旦出現返回值非零,整個腳本就會立即退出。 2、set -o pipefail "If set, the re ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...