Linux-3.14.12記憶體管理筆記【伙伴管理演算法(4)】

来源:https://www.cnblogs.com/linhaostudy/archive/2019/12/18/12064512.html
-Advertisement-
Play Games

此處承接前面未深入分析的頁面釋放部分,主要詳細分析伙伴管理演算法中頁面釋放的實現。頁面釋放的函數入口是__free_page(),其實則是一個巨集定義。 具體實現: 而__free_pages()的實現: 其中put_page_testzero()是對page結構的_count引用計數做原子減及測試,用 ...


此處承接前面未深入分析的頁面釋放部分,主要詳細分析伙伴管理演算法中頁面釋放的實現。頁面釋放的函數入口是__free_page(),其實則是一個巨集定義。

具體實現:

【file:/include/linux/gfp.h】
#define __free_page(page) __free_pages((page), 0)

而__free_pages()的實現:

【file:/mm/page_alloc.c】
void __free_pages(struct page *page, unsigned int order)
{
    if (put_page_testzero(page)) {
        if (order == 0)
            free_hot_cold_page(page, 0);
        else
            __free_pages_ok(page, order);
    }
}

其中put_page_testzero()是對page結構的_count引用計數做原子減及測試,用於檢查記憶體頁面是否仍被使用,如果不再使用,則進行釋放。其中order表示頁面數量,如果釋放的是單頁,則會調用free_hot_cold_page()將頁面釋放至per-cpu page緩存中,而不是伙伴管理演算法;真正的釋放至伙伴管理演算法的是__free_pages_ok(),同時也是用於多個頁面釋放的情況。

此處接著則由free_hot_cold_page()開始分析:

【file:/mm/page_alloc.c】
/*
 * Free a 0-order page
 * cold == 1 ? free a cold page : free a hot page
 */
void free_hot_cold_page(struct page *page, int cold)
{
    struct zone *zone = page_zone(page);
    struct per_cpu_pages *pcp;
    unsigned long flags;
    int migratetype;
 
    if (!free_pages_prepare(page, 0))
        return;
 
    migratetype = get_pageblock_migratetype(page);
    set_freepage_migratetype(page, migratetype);
    local_irq_save(flags);
    __count_vm_event(PGFREE);
 
    /*
     * We only track unmovable, reclaimable and movable on pcp lists.
     * Free ISOLATE pages back to the allocator because they are being
     * offlined but treat RESERVE as movable pages so we can get those
     * areas back if necessary. Otherwise, we may have to free
     * excessively into the page allocator
     */
    if (migratetype >= MIGRATE_PCPTYPES) {
        if (unlikely(is_migrate_isolate(migratetype))) {
            free_one_page(zone, page, 0, migratetype);
            goto out;
        }
        migratetype = MIGRATE_MOVABLE;
    }
 
    pcp = &this_cpu_ptr(zone->pageset)->pcp;
    if (cold)
        list_add_tail(&page->lru, &pcp->lists[migratetype]);
    else
        list_add(&page->lru, &pcp->lists[migratetype]);
    pcp->count++;
    if (pcp->count >= pcp->high) {
        unsigned long batch = ACCESS_ONCE(pcp->batch);
        free_pcppages_bulk(zone, batch, pcp);
        pcp->count -= batch;
    }
 
out:
    local_irq_restore(flags);
}

先看一下free_pages_prepare()的實現:

【file:/mm/page_alloc.c】
static bool free_pages_prepare(struct page *page, unsigned int order)
{
    int i;
    int bad = 0;
 
    trace_mm_page_free(page, order);
    kmemcheck_free_shadow(page, order);
 
    if (PageAnon(page))
        page->mapping = NULL;
    for (i = 0; i < (1 << order); i++)
        bad += free_pages_check(page + i);
    if (bad)
        return false;
 
    if (!PageHighMem(page)) {
        debug_check_no_locks_freed(page_address(page),
                       PAGE_SIZE << order);
        debug_check_no_obj_freed(page_address(page),
                       PAGE_SIZE << order);
    }
    arch_free_page(page, order);
    kernel_map_pages(page, 1 << order, 0);
 
    return true;
}

其中trace_mm_page_free()用於trace追蹤機制;而kmemcheck_free_shadow()用於記憶體檢測工具kmemcheck,如果未定義CONFIG_KMEMCHECK的情況下,它是一個空函數。接著後面的PageAnon()等都是用於檢查頁面狀態的情況,以判斷頁面是否允許釋放,避免錯誤釋放頁面。由此可知該函數主要作用是檢查和調試。

接著回到free_hot_cold_page()函數中,get_pageblock_migratetype()和set_freepage_migratetype()分別是獲取和設置頁面的遷移類型,即設置到page->index;local_irq_save()和末尾的local_irq_restore()則用於保存恢復中斷請求標識。

if (migratetype >= MIGRATE_PCPTYPES) {

    if (unlikely(is_migrate_isolate(migratetype))) {

        free_one_page(zone, page, 0, migratetype);

        goto out;

    }

    migratetype = MIGRATE_MOVABLE;

}

這裡面的MIGRATE_PCPTYPES用來表示每CPU頁框高速緩存的數據結構中的鏈表的遷移類型數目,如果某個頁面類型大於MIGRATE_PCPTYPES則表示其可掛到可移動列表中,如果遷移類型是MIGRATE_ISOLATE則直接將該其釋放到伙伴管理演算法中。

末尾部分:

    pcp = &this_cpu_ptr(zone->pageset)->pcp;

    if (cold)

        list_add_tail(&page->lru, &pcp->lists[migratetype]);

    else

        list_add(&page->lru, &pcp->lists[migratetype]);

    pcp->count++;

    if (pcp->count >= pcp->high) {

        unsigned long batch = ACCESS_ONCE(pcp->batch);

        free_pcppages_bulk(zone, batch, pcp);

        pcp->count -= batch;

    }

其中pcp表示記憶體管理區的每CPU管理結構,cold表示冷熱頁面,如果是冷頁就將其掛接到對應遷移類型的鏈表尾,而若是熱頁則掛接到對應遷移類型的鏈表頭。其中if (pcp->count >= pcp->high)判斷值得註意,其用於如果釋放的頁面超過了每CPU緩存的最大頁面數時,則將其批量釋放至伙伴管理演算法中,其中批量數為pcp->batch。

具體分析一下釋放至伙伴管理演算法的實現free_pcppages_bulk():

【file:/mm/page_alloc.c】
/*
 * Frees a number of pages from the PCP lists
 * Assumes all pages on list are in same zone, and of same order.
 * count is the number of pages to free.
 *
 * If the zone was previously in an "all pages pinned" state then look to
 * see if this freeing clears that state.
 *
 * And clear the zone's pages_scanned counter, to hold off the "all pages are
 * pinned" detection logic.
 */
static void free_pcppages_bulk(struct zone *zone, int count,
                    struct per_cpu_pages *pcp)
{
    int migratetype = 0;
    int batch_free = 0;
    int to_free = count;
 
    spin_lock(&zone->lock);
    zone->pages_scanned = 0;
 
    while (to_free) {
        struct page *page;
        struct list_head *list;
 
        /*
         * Remove pages from lists in a round-robin fashion. A
         * batch_free count is maintained that is incremented when an
         * empty list is encountered. This is so more pages are freed
         * off fuller lists instead of spinning excessively around empty
         * lists
         */
        do {
            batch_free++;
            if (++migratetype == MIGRATE_PCPTYPES)
                migratetype = 0;
            list = &pcp->lists[migratetype];
        } while (list_empty(list));
 
        /* This is the only non-empty list. Free them all. */
        if (batch_free == MIGRATE_PCPTYPES)
            batch_free = to_free;
 
        do {
            int mt; /* migratetype of the to-be-freed page */
 
            page = list_entry(list->prev, struct page, lru);
            /* must delete as __free_one_page list manipulates */
            list_del(&page->lru);
            mt = get_freepage_migratetype(page);
            /* MIGRATE_MOVABLE list may include MIGRATE_RESERVEs */
            __free_one_page(page, zone, 0, mt);
            trace_mm_page_pcpu_drain(page, 0, mt);
            if (likely(!is_migrate_isolate_page(page))) {
                __mod_zone_page_state(zone, NR_FREE_PAGES, 1);
                if (is_migrate_cma(mt))
                    __mod_zone_page_state(zone, NR_FREE_CMA_PAGES, 1);
            }
        } while (--to_free && --batch_free && !list_empty(list));
    }
    spin_unlock(&zone->lock);
}

裡面while大迴圈用於計數釋放指定批量數的頁面。其中釋放方式是先自MIGRATE_UNMOVABLE遷移類型起(止於MIGRATE_PCPTYPES遷移類型),遍歷各個鏈表統計其鏈表中頁面數:

do {

    batch_free++;

    if (++migratetype == MIGRATE_PCPTYPES)

        migratetype = 0;

    list = &pcp->lists[migratetype];

} while (list_empty(list));

如果只有MIGRATE_PCPTYPES遷移類型的鏈表為非空鏈表,則全部頁面將從該鏈表中釋放。

後面的do{}while()裡面,其先將頁面從lru鏈表中去除,然後獲取頁面的遷移類型,通過__free_one_page()釋放頁面,最後使用__mod_zone_page_state()修改管理區的狀態值。

著重分析一下__free_one_page()的實現:

【file:/mm/page_alloc.c】
/*
 * Freeing function for a buddy system allocator.
 *
 * The concept of a buddy system is to maintain direct-mapped table
 * (containing bit values) for memory blocks of various "orders".
 * The bottom level table contains the map for the smallest allocatable
 * units of memory (here, pages), and each level above it describes
 * pairs of units from the levels below, hence, "buddies".
 * At a high level, all that happens here is marking the table entry
 * at the bottom level available, and propagating the changes upward
 * as necessary, plus some accounting needed to play nicely with other
 * parts of the VM system.
 * At each level, we keep a list of pages, which are heads of continuous
 * free pages of length of (1 << order) and marked with _mapcount
 * PAGE_BUDDY_MAPCOUNT_VALUE. Page's order is recorded in page_private(page)
 * field.
 * So when we are allocating or freeing one, we can derive the state of the
 * other. That is, if we allocate a small block, and both were
 * free, the remainder of the region must be split into blocks.
 * If a block is freed, and its buddy is also free, then this
 * triggers coalescing into a block of larger size.
 *
 * -- nyc
 */
 
static inline void __free_one_page(struct page *page,
        struct zone *zone, unsigned int order,
        int migratetype)
{
    unsigned long page_idx;
    unsigned long combined_idx;
    unsigned long uninitialized_var(buddy_idx);
    struct page *buddy;
 
    VM_BUG_ON(!zone_is_initialized(zone));
 
    if (unlikely(PageCompound(page)))
        if (unlikely(destroy_compound_page(page, order)))
            return;
 
    VM_BUG_ON(migratetype == -1);
 
    page_idx = page_to_pfn(page) & ((1 << MAX_ORDER) - 1);
 
    VM_BUG_ON_PAGE(page_idx & ((1 << order) - 1), page);
    VM_BUG_ON_PAGE(bad_range(zone, page), page);
 
    while (order < MAX_ORDER-1) {
        buddy_idx = __find_buddy_index(page_idx, order);
        buddy = page + (buddy_idx - page_idx);
        if (!page_is_buddy(page, buddy, order))
            break;
        /*
         * Our buddy is free or it is CONFIG_DEBUG_PAGEALLOC guard page,
         * merge with it and move up one order.
         */
        if (page_is_guard(buddy)) {
            clear_page_guard_flag(buddy);
            set_page_private(page, 0);
            __mod_zone_freepage_state(zone, 1 << order,
                          migratetype);
        } else {
            list_del(&buddy->lru);
            zone->free_area[order].nr_free--;
            rmv_page_order(buddy);
        }
        combined_idx = buddy_idx & page_idx;
        page = page + (combined_idx - page_idx);
        page_idx = combined_idx;
        order++;
    }
    set_page_order(page, order);
 
    /*
     * If this is not the largest possible page, check if the buddy
     * of the next-highest order is free. If it is, it's possible
     * that pages are being freed that will coalesce soon. In case,
     * that is happening, add the free page to the tail of the list
     * so it's less likely to be used soon and more likely to be merged
     * as a higher order page
     */
    if ((order < MAX_ORDER-2) && pfn_valid_within(page_to_pfn(buddy))) {
        struct page *higher_page, *higher_buddy;
        combined_idx = buddy_idx & page_idx;
        higher_page = page + (combined_idx - page_idx);
        buddy_idx = __find_buddy_index(combined_idx, order + 1);
        higher_buddy = higher_page + (buddy_idx - combined_idx);
        if (page_is_buddy(higher_page, higher_buddy, order + 1)) {
            list_add_tail(&page->lru,
                &zone->free_area[order].free_list[migratetype]);
            goto out;
        }
    }
 
    list_add(&page->lru, &zone->free_area[order].free_list[migratetype]);
out:
    zone->free_area[order].nr_free++;
}

於while (order < MAX_ORDER-1)前面主要是對釋放的頁面進行檢查校驗操作。而while迴圈內,通過__find_buddy_index()獲取與當前釋放的頁面處於同一階的伙伴頁面索引值,同時藉此索引值計算出伙伴頁面地址,並做伙伴頁面檢查以確定其是否可以合併,若否則退出;接著if (page_is_guard(buddy))用於對頁面的debug_flags成員做檢查,由於未配置CONFIG_DEBUG_PAGEALLOC,page_is_guard()固定返回false;則剩下的操作主要就是將頁面從分配鏈中摘除,同時將頁面合併並將其處於的階提升一級。

退出while迴圈後,通過set_page_order()設置頁面最終可合併成為的管理階。最後判斷當前合併的頁面是否為最大階,否則將頁面放至伙伴管理鏈表的末尾,避免其過早被分配,得以機會進一步與高階頁面進行合併。末了,將最後的掛入的階的空閑計數加1。

至此伙伴管理演算法的頁面釋放完畢。

而__free_pages_ok()的頁面釋放實現調用棧則是:

__free_pages_ok()

—>free_one_page()

—>__free_one_page()

殊途同歸,最終還是__free_one_page()來釋放,具體的過程就不再仔細分析了。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 到目前為止,設計人員可以使用的存儲技術是易變的,這意味著在斷電後,存儲器中的數據內容會丟失。但是,隨著Everspin Technologies推出256Mb STT-MRAM,系統現在可以擁有像DRAM這樣具有高性能的記憶體,但可以提供持久的非易失性數據存儲。 圖1:STT-MRAM STT-MRA ...
  • asp.net core 3.0 MVC JSON 全局配置 System.Text.Json(default) 1. startup配置代碼如下: 2. "官方API" Newtonsoft.Json 1. Install Package Microsoft.AspNetCore.Mvc.Newt ...
  • 一.介面部分的代碼 [HttpGet] public HttpResponseMessage ExportPdf(string id) { string pdfName = ""; //id 查詢條件,根據實際情況修改即可 //pdfName 例如download.pdf byte[] pdfDat ...
  • static byte[] GetBytesFromDic(Dictionary<string,string> dic) { if(dic==null || !dic.Any()) { return null; } using (MemoryStream ms = new MemoryStream(... ...
  • 1、要開始安裝 .NET,您需要註冊 Microsoft 簽名密鑰並添加 Microsoft 產品提要。每台機器只需要做一次。 打開命令提示符並運行以下命令:sudo rpm -Uvh https://packages.microsoft.com/config/centos/7/packages-m ...
  • 前言 前面我們介紹了 "ModBusTcp協議" 。今天我們接著來介紹ModBusRtu協議。和ModBusTcp不同的是ModBusRtu基於串口通信,ModBusTcp是基於Tcp乙太網通信。 所以我們在講解ModBusRtu協議之前會先介紹下串口通信。 串口通信 串口出現在1980年前後,當初 ...
  • 通過文件的inode號刪除文件 先用ls -i 找出要刪除文件的inode 號 ls -i |grep xxxxxx|awk '{print $2}'|xargs -i rm -f {} xxxxxx為文件的 inode 號通過文件大小刪除文件刪除當前目錄以及所有子目錄下的文件大小為零的文件find... ...
  • CentOS 7 離線環境安裝nginx時報錯:./configure: error: C compiler cc is not found,查看objs/autoconf.err文件中的報錯信息,對錯下包 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...