聊一聊 .NET高級調試 中的一些記憶體術語

来源:https://www.cnblogs.com/huangxincheng/archive/2023/12/04/17874509.html
-Advertisement-
Play Games

一:背景 1. 講故事 在高級調試的旅程中,經常會有一些朋友問我什麼是 工作集(記憶體),什麼是 提交大小,什麼是 Virtual Size, 什麼是 Working Set 。。。截圖如下: 既然有很多朋友問,這些用口頭也不怎麼好描述,剛好上午有時間就系統的聊一下吧。 二:記憶體術語解讀 1. Vir ...


一:背景

1. 講故事

在高級調試的旅程中,經常會有一些朋友問我什麼是 工作集(記憶體),什麼是 提交大小,什麼是 Virtual Size, 什麼是 Working Set 。。。截圖如下:

既然有很多朋友問,這些用口頭也不怎麼好描述,剛好上午有時間就系統的聊一下吧。

二:記憶體術語解讀

1. Virtual Size 是什麼

可能有些朋友知道,記憶體中的虛擬地址被劃分成了三類。

  • Reserved (預定地址)
  • Committed (提交地址)
  • Free (蠻荒地址)

上面的 預定+提交 就是我們的 Virtual Size,即 Virtual Size = Reserved + Committed

當然口說無憑,得要拿出證據,寫一個 x86 的 C# 測試代碼,參考如下:


        static void Main(string[] args)
        {
            Console.WriteLine("hello world!");
            Console.ReadLine();
        }

將程式跑起來後用 windbg 附加,使用 !address -summary 將計算出的記憶體和 Process Explorer 工具顯示的 Virtual Size 進行對比,截圖如下:

有些較真的朋友可能說:Explorer 顯示出的是 163.300,而 windbg 顯示的是 163.281 ,為什麼還差一點點,其實這是不同工具的統計誤差,僅此而已。

2. Working Set

有些朋友可能知道,一個程式所占的記憶體最終會在三個地方落地:

  • 物理記憶體條
  • 虛擬記憶體 pagefile
  • 物理文件 MappedFile

這裡的 Workding Set 特指的就是 物理記憶體條 ,由於 Windows 有 MappedFile 這種文件映射(記憶體共用)機制,所以物理記憶體條上的記憶體可以進一步劃分為 自己獨占的 + 大家共用的,可能有些朋友比較蒙,截個圖如下:

有了這張圖的基礎,轉化為專業術語就是:

  • Workding Set = WS Private + WS Shareable

最後我們還是用 Explorer 觀察下剛纔的 C# 程式,截圖如下:

3. Private Bytes

剛纔我們說到了記憶體最終會落地到三個地方,其中一個地方就是 虛擬記憶體(pagefile),簡而言之它的作用就是給物理記憶體打輔助,這個 pagefile.sys 預設是在 C 盤上,截圖如下:

有了這些基礎,就可以列出一個公式了。

  • Private Bytes = WS Private + Pages Out (pagefile)

上面的 Pages Out 是我定義的換頁記憶體,這個 Private Bytes 指標在分析記憶體泄露的場景下特別有用,它能夠準備的洞察當前程式是否存在大量的 Pages Out(換頁記憶體)

為了方便演示出現了大量的換頁記憶體,寫一個不斷灌數據的例子。


    internal class Program
    {
        static void Main(string[] args)
        {
            var list = new List<string>();

            for (int i = 0; i < 100000000; i++)
            {
                list.Add(string.Join(",", Enumerable.Range(0, 100000)));

                if (i % 10000 == 0) { Console.WriteLine($"i={i}"); }
            }
            Console.WriteLine("成功!");

            Console.ReadLine();
        }
    }

將程式跑起來後,截圖如下:

根據剛纔的計算公式:Pages Out = Private Bytes - WS Private ,可以得知大概有 29G 不得不存放在 pagefile 中。

本來想用 wmic pagefile get /value 看一下當前機器的虛擬記憶體占用,發現有時候不准,我也沒太深究了,輸出如下:


C:\Users\Administrator>wmic pagefile get /value

AllocatedBaseSize=49464
Caption=C:\pagefile.sys
CurrentUsage=1473
Description=C:\pagefile.sys
InstallDate=20230807095038.481750+480
Name=C:\pagefile.sys
PeakUsage=1640
Status=
TempPageFile=FALSE

不過可以看到,這個 pagefile.sys 已經從剛開始的 4.8G 暴漲到 49G 了,其中一大半都被我的程式吞掉了。

4. WS Shared

這個也是很多朋友會問的,WS ShareableWS Shared 到底有什麼區別,從字面意思上看就是:一個可被多個進程共用的記憶體頁集合中,當前已經被共用的記憶體頁集合。

可能這麼說大家有點懵逼,不過沒關係,可以藉助 VMMap 工具觀察。

  1. 開啟一個 ConsoleApp6 進程觀察

從圖中可以看到 Shareable=104k,而 Shared=0k ,這是什麼意思呢? 由於 ConsoleApp6.exe 是文件映射到記憶體的,占用了 104k 的物理記憶體,此時沒有其他進程共用這一塊物理記憶體,所以此時為Shared=0,要想把這裡的 Shared 也給填充起來,最簡單的辦法就是開啟多個ConsoleApp6實例。

  1. 開啟多個 ConsoleApp6 進程觀察

接下來反覆點擊 ConsoleApp6 生成多個實例,再次使用 VMMap 觀察,截圖如下:

三:總結

我盡最大努力通過多個觀察工具用眼見為實的方式把這幾個記憶體指標系統的說了一下,希望大家對這幾個術語不再迷茫,以後有人問類似問題就可以把這篇丟過去,減輕了你我負擔...

圖片名稱
您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 概要 由於目前在做一個比較複雜的嵌入式項目,想要藉此提升一下代碼的結構設計能力,所以想要以面向對象的思想來完成這個項目,即把每個板載外設資源視為一個對象,採用msp+bsp的模式,對每個bsp外設實現對象化處理,現有方案需要手動傳入對象引用,調用方法時比較麻煩,所以考慮簡化調用方式。 面向對象實現思 ...
  • 1.部署異常如下: 2.出現原因 這個問題的原因是高版本的tomcat中的新特性:就是嚴格按照 RFC 3986規範進行訪問解析,而 RFC 3986規範定義了Url中只允許包含英文字母(a-zA-Z)、數字(0-9)、-_.~4個特殊字元以及所有保留字元(RFC3986中指定了以下字元為保留字元: ...
  • 記憶體是在程式中打交道不可缺少的存在,或者在GC語言中記憶體概念會被刻意的屏蔽掉,但如果是棧遞歸函數調用自身這種情況,stack overflow這種情況是一樣的會碰到的,所以瞭解下堆與棧碰到問題的時候好解決問題 ...
  • 在.NET Core中,使用Action和Options參數方式配置服務並將配置信息對象註冊到IServiceCollection的好處在於,它提供了更高級別的可配置性和可擴展性。這種模式允許將配置信息與服務的實現分離,使配置更加模塊化和可管理。通過將配置信息對象註冊到IServiceCollect ...
  • 簡介 從C# 3.0起很少需要自己聲明委托。System.Func 是一個泛型委托,它可以表示帶有返回值的方法。它可以接受一個到多個輸入參數,並返回一個指定類型的結果。System.Func 委托的最後一個類型參數表示方法的返回值類型。而System.Action系列代表返回void的方法。 Fun ...
  • 這是我在C#中第一次用到json,以前都用別的替代,但是瞭解了之後發現這個是真的好用。 首先,有幾個網站先貼上來保存一下。 JSON 模式驗證器 - Newtonsoft (jsonschemavalidator.net),顧名思義,就是驗證我們的json格式是否正確。 Introduction ( ...
  • 在本示例中,我們將使用Autofac和AspectC(Autofac.Extras.DynamicProxy2)來演示如何實現AOP(面向切麵編程)。我們將創建一個簡單的C#控制台應用程式,並應用AOP以解決日誌記錄的問題。首先,讓我們討論AOP的用途和目標。 AOP(面向切麵編程)的用途 AOP是 ...
  • 在我們很多應用系統中,往往都需要根據實際情況生成一些編碼規則,如訂單號、入庫單號、出庫單號、退貨單號等等,我們有時候根據規則自行增加一個函數來生成處理,不過我們仔細觀察後,發現它們的編碼規則有很大的共通性,因此可以考慮使用一些通用的業務編碼規則生成,從而在系統中統一維護即可,本篇隨筆介紹如何在WIn... ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...