聊一聊 .NET高級調試 中的一些記憶體術語

来源:https://www.cnblogs.com/huangxincheng/archive/2023/12/04/17874509.html
-Advertisement-
Play Games

一:背景 1. 講故事 在高級調試的旅程中,經常會有一些朋友問我什麼是 工作集(記憶體),什麼是 提交大小,什麼是 Virtual Size, 什麼是 Working Set 。。。截圖如下: 既然有很多朋友問,這些用口頭也不怎麼好描述,剛好上午有時間就系統的聊一下吧。 二:記憶體術語解讀 1. Vir ...


一:背景

1. 講故事

在高級調試的旅程中,經常會有一些朋友問我什麼是 工作集(記憶體),什麼是 提交大小,什麼是 Virtual Size, 什麼是 Working Set 。。。截圖如下:

既然有很多朋友問,這些用口頭也不怎麼好描述,剛好上午有時間就系統的聊一下吧。

二:記憶體術語解讀

1. Virtual Size 是什麼

可能有些朋友知道,記憶體中的虛擬地址被劃分成了三類。

  • Reserved (預定地址)
  • Committed (提交地址)
  • Free (蠻荒地址)

上面的 預定+提交 就是我們的 Virtual Size,即 Virtual Size = Reserved + Committed

當然口說無憑,得要拿出證據,寫一個 x86 的 C# 測試代碼,參考如下:


        static void Main(string[] args)
        {
            Console.WriteLine("hello world!");
            Console.ReadLine();
        }

將程式跑起來後用 windbg 附加,使用 !address -summary 將計算出的記憶體和 Process Explorer 工具顯示的 Virtual Size 進行對比,截圖如下:

有些較真的朋友可能說:Explorer 顯示出的是 163.300,而 windbg 顯示的是 163.281 ,為什麼還差一點點,其實這是不同工具的統計誤差,僅此而已。

2. Working Set

有些朋友可能知道,一個程式所占的記憶體最終會在三個地方落地:

  • 物理記憶體條
  • 虛擬記憶體 pagefile
  • 物理文件 MappedFile

這裡的 Workding Set 特指的就是 物理記憶體條 ,由於 Windows 有 MappedFile 這種文件映射(記憶體共用)機制,所以物理記憶體條上的記憶體可以進一步劃分為 自己獨占的 + 大家共用的,可能有些朋友比較蒙,截個圖如下:

有了這張圖的基礎,轉化為專業術語就是:

  • Workding Set = WS Private + WS Shareable

最後我們還是用 Explorer 觀察下剛纔的 C# 程式,截圖如下:

3. Private Bytes

剛纔我們說到了記憶體最終會落地到三個地方,其中一個地方就是 虛擬記憶體(pagefile),簡而言之它的作用就是給物理記憶體打輔助,這個 pagefile.sys 預設是在 C 盤上,截圖如下:

有了這些基礎,就可以列出一個公式了。

  • Private Bytes = WS Private + Pages Out (pagefile)

上面的 Pages Out 是我定義的換頁記憶體,這個 Private Bytes 指標在分析記憶體泄露的場景下特別有用,它能夠準備的洞察當前程式是否存在大量的 Pages Out(換頁記憶體)

為了方便演示出現了大量的換頁記憶體,寫一個不斷灌數據的例子。


    internal class Program
    {
        static void Main(string[] args)
        {
            var list = new List<string>();

            for (int i = 0; i < 100000000; i++)
            {
                list.Add(string.Join(",", Enumerable.Range(0, 100000)));

                if (i % 10000 == 0) { Console.WriteLine($"i={i}"); }
            }
            Console.WriteLine("成功!");

            Console.ReadLine();
        }
    }

將程式跑起來後,截圖如下:

根據剛纔的計算公式:Pages Out = Private Bytes - WS Private ,可以得知大概有 29G 不得不存放在 pagefile 中。

本來想用 wmic pagefile get /value 看一下當前機器的虛擬記憶體占用,發現有時候不准,我也沒太深究了,輸出如下:


C:\Users\Administrator>wmic pagefile get /value

AllocatedBaseSize=49464
Caption=C:\pagefile.sys
CurrentUsage=1473
Description=C:\pagefile.sys
InstallDate=20230807095038.481750+480
Name=C:\pagefile.sys
PeakUsage=1640
Status=
TempPageFile=FALSE

不過可以看到,這個 pagefile.sys 已經從剛開始的 4.8G 暴漲到 49G 了,其中一大半都被我的程式吞掉了。

4. WS Shared

這個也是很多朋友會問的,WS ShareableWS Shared 到底有什麼區別,從字面意思上看就是:一個可被多個進程共用的記憶體頁集合中,當前已經被共用的記憶體頁集合。

可能這麼說大家有點懵逼,不過沒關係,可以藉助 VMMap 工具觀察。

  1. 開啟一個 ConsoleApp6 進程觀察

從圖中可以看到 Shareable=104k,而 Shared=0k ,這是什麼意思呢? 由於 ConsoleApp6.exe 是文件映射到記憶體的,占用了 104k 的物理記憶體,此時沒有其他進程共用這一塊物理記憶體,所以此時為Shared=0,要想把這裡的 Shared 也給填充起來,最簡單的辦法就是開啟多個ConsoleApp6實例。

  1. 開啟多個 ConsoleApp6 進程觀察

接下來反覆點擊 ConsoleApp6 生成多個實例,再次使用 VMMap 觀察,截圖如下:

三:總結

我盡最大努力通過多個觀察工具用眼見為實的方式把這幾個記憶體指標系統的說了一下,希望大家對這幾個術語不再迷茫,以後有人問類似問題就可以把這篇丟過去,減輕了你我負擔...

圖片名稱
您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 概要 由於目前在做一個比較複雜的嵌入式項目,想要藉此提升一下代碼的結構設計能力,所以想要以面向對象的思想來完成這個項目,即把每個板載外設資源視為一個對象,採用msp+bsp的模式,對每個bsp外設實現對象化處理,現有方案需要手動傳入對象引用,調用方法時比較麻煩,所以考慮簡化調用方式。 面向對象實現思 ...
  • 1.部署異常如下: 2.出現原因 這個問題的原因是高版本的tomcat中的新特性:就是嚴格按照 RFC 3986規範進行訪問解析,而 RFC 3986規範定義了Url中只允許包含英文字母(a-zA-Z)、數字(0-9)、-_.~4個特殊字元以及所有保留字元(RFC3986中指定了以下字元為保留字元: ...
  • 記憶體是在程式中打交道不可缺少的存在,或者在GC語言中記憶體概念會被刻意的屏蔽掉,但如果是棧遞歸函數調用自身這種情況,stack overflow這種情況是一樣的會碰到的,所以瞭解下堆與棧碰到問題的時候好解決問題 ...
  • 在.NET Core中,使用Action和Options參數方式配置服務並將配置信息對象註冊到IServiceCollection的好處在於,它提供了更高級別的可配置性和可擴展性。這種模式允許將配置信息與服務的實現分離,使配置更加模塊化和可管理。通過將配置信息對象註冊到IServiceCollect ...
  • 簡介 從C# 3.0起很少需要自己聲明委托。System.Func 是一個泛型委托,它可以表示帶有返回值的方法。它可以接受一個到多個輸入參數,並返回一個指定類型的結果。System.Func 委托的最後一個類型參數表示方法的返回值類型。而System.Action系列代表返回void的方法。 Fun ...
  • 這是我在C#中第一次用到json,以前都用別的替代,但是瞭解了之後發現這個是真的好用。 首先,有幾個網站先貼上來保存一下。 JSON 模式驗證器 - Newtonsoft (jsonschemavalidator.net),顧名思義,就是驗證我們的json格式是否正確。 Introduction ( ...
  • 在本示例中,我們將使用Autofac和AspectC(Autofac.Extras.DynamicProxy2)來演示如何實現AOP(面向切麵編程)。我們將創建一個簡單的C#控制台應用程式,並應用AOP以解決日誌記錄的問題。首先,讓我們討論AOP的用途和目標。 AOP(面向切麵編程)的用途 AOP是 ...
  • 在我們很多應用系統中,往往都需要根據實際情況生成一些編碼規則,如訂單號、入庫單號、出庫單號、退貨單號等等,我們有時候根據規則自行增加一個函數來生成處理,不過我們仔細觀察後,發現它們的編碼規則有很大的共通性,因此可以考慮使用一些通用的業務編碼規則生成,從而在系統中統一維護即可,本篇隨筆介紹如何在WIn... ...
一周排行
    -Advertisement-
    Play Games
  • 前言 推薦一款基於.NET 8、WPF、Prism.DryIoc、MVVM設計模式、Blazor以及MySQL資料庫構建的企業級工作流系統的WPF客戶端框架-AIStudio.Wpf.AClient 6.0。 項目介紹 框架採用了 Prism 框架來實現 MVVM 模式,不僅簡化了 MVVM 的典型 ...
  • 先看一下效果吧: 我們直接通過改造一下原版的TreeView來實現上面這個效果 我們先創建一個普通的TreeView 代碼很簡單: <TreeView> <TreeViewItem Header="人事部"/> <TreeViewItem Header="技術部"> <TreeViewItem He ...
  • 1. 生成式 AI 簡介 https://imp.i384100.net/LXYmq3 2. Python 語言 https://imp.i384100.net/5gmXXo 3. 統計和 R https://youtu.be/ANMuuq502rE?si=hw9GT6JVzMhRvBbF 4. 數 ...
  • 本文為大家介紹下.NET解壓/壓縮zip文件。雖然解壓縮不是啥核心技術,但壓縮性能以及進度處理還是需要關註下,針對使用較多的zip開源組件驗證,給大家提供個技術選型參考 之前在《.NET WebSocket高併發通信阻塞問題 - 唐宋元明清2188 - 博客園 (cnblogs.com)》講過,團隊 ...
  • 之前寫過兩篇關於Roslyn源生成器生成源代碼的用例,今天使用Roslyn的代碼修複器CodeFixProvider實現一個cs文件頭部註釋的功能, 代碼修複器會同時涉及到CodeFixProvider和DiagnosticAnalyzer, 實現FileHeaderAnalyzer 首先我們知道修 ...
  • 在軟體行業,經常會聽到一句話“文不如表,表不如圖”說明瞭圖形在軟體應用中的重要性。同樣在WPF開發中,為了程式美觀或者業務需要,經常會用到各種個樣的圖形。今天以一些簡單的小例子,簡述WPF開發中幾何圖形(Geometry)相關內容,僅供學習分享使用,如有不足之處,還請指正。 ...
  • 在 C# 中使用 RabbitMQ 通過簡訊發送重置後的密碼到用戶的手機號上,你可以按照以下步驟進行 1.安裝 RabbitMQ 客戶端庫 首先,確保你已經安裝了 RabbitMQ 客戶端庫。你可以通過 NuGet 包管理器來安裝: dotnet add package RabbitMQ.Clien ...
  • 1.下載 Protocol Buffers 編譯器(protoc) 前往 Protocol Buffers GitHub Releases 頁面。在 "Assets" 下找到適合您系統的壓縮文件,通常為 protoc-{version}-win32.zip 或 protoc-{version}-wi ...
  • 簡介 在現代微服務架構中,服務發現(Service Discovery)是一項關鍵功能。它允許微服務動態地找到彼此,而無需依賴硬編碼的地址。以前如果你搜 .NET Service Discovery,大概率會搜到一大堆 Eureka,Consul 等的文章。現在微軟為我們帶來了一個官方的包:Micr ...
  • ZY樹洞 前言 ZY樹洞是一個基於.NET Core開發的簡單的評論系統,主要用於大家分享自己心中的感悟、經驗、心得、想法等。 好了,不賣關子了,這個項目其實是上班無聊的時候寫的,為什麼要寫這個項目呢?因為我單純的想吐槽一下工作中的不滿而已。 項目介紹 項目很簡單,主要功能就是提供一個簡單的評論系統 ...