零拷貝技術:減少數據複製和上下文切換,提高網路傳輸效率(下)

来源:https://www.cnblogs.com/guoxiaoyu/archive/2023/09/15/17694789.html
-Advertisement-
Play Games

本章節主要討論瞭如何通過零拷貝技術來優化文件傳輸的性能。零拷貝技術主要通過減少用戶態和內核態之間的上下文切換次數和數據拷貝次數來提高性能。具體來說,介紹了兩種實現零拷貝的方式:mmap + write和sendfile。使用mmap + write可以減少一次數據拷貝過程,而使用sendfile系統... ...


前章回顧

在前一章節中,我們瞭解了DMA技術在文件傳輸中的重要性,並簡要介紹了零拷貝技術。為了提高文件傳輸的性能,我們需要減少用戶態與內核態之間的上下文切換次數以及記憶體拷貝次數。本章將深入探討零拷貝技術的優化方法,讓我們一起走進零拷貝的優化之路!

如何優化文件傳輸的性能?

當我們意識到有問題需要進行優化時,我們可以逐個解決問題,例如先減少用戶態和內核態的上下文切換次數。

我們知道上下文切換是因為用戶空間沒有許可權操作磁碟或網卡,而只能在虛擬空間上進行。相比之下,內核擁有最高許可權,因此操作設備的任務都需要操作系統內核完成。為此,我們需要使用操作系統提供的系統調用函數來通過內核完成這些任務。如果對此還不清楚的小伙伴,可以查看之前章節中單獨講解的內容。

一次系統調用必然會發生兩次上下文切換:首先從用戶態切換到內核態,當內核執行完任務後,再切換回用戶態由進程代碼繼續執行。

因此,要減少上下文切換的次數,就需要減少系統調用的次數。

另外,我們還可以減少數據拷貝的次數。在之前的分析中,我們發現操作會進行四次數據拷貝,包括兩次CPU拷貝和兩次DMA控制器數據拷貝。然而,在文件傳輸過程中,我們實際上並沒有對文件進行任何操作,只是將磁碟文件傳輸給網卡。CPU數據拷貝的次數是由於上下文切換導致CPU在用戶態和內核態之間來回覆制數據,這是沒有必要的。此外,用戶緩衝區在整個傳輸過程中也是沒有必要存在的。

如何實現零拷貝

零拷貝技術實現的方式通常有 2 種:

  1. mmap + write
  2. sendfile

讓我們來探討一下如何通過兩種方式實現零拷貝技術,從而減少上下文切換和數據拷貝的次數。

mmap(共用緩衝區) + write

首先是使用 mmap + write 的方式。在之前的討論中,我們瞭解到在使用 read() 系統調用時,會發生將內核緩衝區的數據拷貝到用戶緩衝區的過程。為了減少這一步的開銷,可以使用 mmap() 替換 read() 系統調用函數。

我們之前在討論進程間如何通信時,我們有提到過共用緩衝區,即將內核態的一部分記憶體空間映射到應用程式所使用的虛擬空間上。如圖所示:

image

而我們此時並不需要多個進程通信,如果只需要將物理記憶體映射給需要文件傳輸的進程,情況就會變得稍有不同。那麼就可以演化成下麵的這種方式,如圖所示:

image

具體過程如下:

  1. 應用程式調用 mmap() 函數後,DMA會將磁碟數據拷貝到內核態的緩存區上,然後應用程式與操作系統共用這個緩衝區。
  2. 應用程式調用 write(),操作系統直接將內核態中的緩衝區數據拷貝到 socket 緩衝區,此時只在內核態進行操作,不會產生用戶態和內核態切換,數據搬運過程由CPU完成。
  3. 最後,將內核的 socket 緩衝區數據拷貝到網卡中的數據緩衝區,這一步由DMA控制器操作。

我們可以得知,通過使用 mmap() 替代 read(),可以減少一次數據拷貝的過程。然而,這仍然不是最理想的零拷貝方式,因為仍然需要通過 CPU 將內核緩衝區的數據拷貝到 socket 緩衝區,且仍然需要進行 4 次上下文切換,因為系統調用仍然發生了兩次。

接下來,我們來看第二種實現零拷貝的方式 - sendfile。

sendfile

在 Linux 內核版本 2.1 中,引入了一個名為sendfile()的系統調用函數,它提供了一種更高效的文件發送方法。sendfile()函數的使用方式如下:

#include <sys/socket.h>
ssize_t sendfile(int out_fd, int in_fd, off_t *offset, size_t count);	

該函數的前兩個參數是目標端和源端的文件描述符,後面兩個參數分別表示源端的偏移量和要複製的數據長度。函數的返回值是實際複製數據的長度。

sendfile()函數具有以下優點:

首先,它可以代替之前需要使用read()和write()兩個系統調用的操作,從而減少了一次系統調用的開銷。儘管sendfile()函數本身仍然需要進行系統調用,但仍然能夠減少了2次上下文切換的開銷。

其次,該系統調用可以直接將內核緩衝區中的數據複製到套接字緩衝區中,而無需再複製到用戶態。這樣一來,只需要進行2次上下文切換和3次數據拷貝。下圖展示了這一過程的流程:

image

然而,這個過程仍然不能被稱為真正的零拷貝技術。如果我們的網卡支持SG-DMA(散射-聚集直接記憶體訪問)技術,與普通的DMA有所不同,那麼我們可以進一步減少通過CPU將內核緩衝區中的數據拷貝到套接字緩衝區的過程。

你可以在你的Linux系統上使用以下命令來查看網卡是否支持散射-聚集特性::

$ ethtool -k eth0 | grep scatter-gather
scatter-gather: on

因此,從Linux內核2.4版本開始,在網卡支持SG-DMA技術的情況下,sendfile()系統調用的過程發生了一些變化,具體過程如下:

第一步,通過DMA將磁碟上的數據拷貝到內核緩衝區中;

第二步:內核緩衝區只需要將描述符和數據長度發送給套接字緩衝區,然後將直接通過SG-DMA將內核緩衝區中的數據拷貝到網卡的緩衝區中,這個過程不再需要從操作系統的內核緩衝區中拷貝到套接字緩衝區,從而減少了一次數據拷貝的過程。

因此,在這個過程中,只進行了兩次數據拷貝,如下圖所示:

image

這就是所謂的零拷貝(Zero-copy)技術,因為我們沒有在記憶體層面進行數據拷貝,也就是說在整個過程中沒有使用CPU來傳輸數據,而是完全依靠DMA來進行數據傳輸。

相比傳統的文件傳輸方式,零拷貝技術可以減少2次上下文切換和數據拷貝的次數,只需要進行2次上下文切換和數據拷貝,就能完成文件的傳輸。而且這2次數據拷貝過程都不需要通過CPU,而是由DMA來進行數據傳輸。

因此,總體來看,零拷貝技術可以將文件傳輸的性能提升至少一倍以上。值得一提的是,在講解零拷貝技術時,並沒有提到網路協議是在哪個步驟中封裝的。大家也應該知道,在內核中完成了網路協議的封裝,而不是直接從緩衝區中取出數據併發送給網卡就結束了。

總結

本章主要介紹了零拷貝技術在文件傳輸中的優化方法。首先,通過減少用戶態和內核態之間的上下文切換次數和數據拷貝次數來優化文件傳輸的性能。其次,介紹了兩種實現零拷貝的方式:mmap + write和sendfile。通過使用mmap + write,可以將內核緩衝區的數據直接拷貝到socket緩衝區,減少一次數據拷貝過程。而使用sendfile系統調用,則可以進一步減少系統調用和數據拷貝次數。若網卡支持SG-DMA技術,還可以通過DMA將內核緩衝區的數據直接拷貝到網卡緩衝區,實現真正的零拷貝。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 1 前言 高性能的HTTP和反向代理伺服器,Nginx用來: 搭建Web Server 作負載均衡 供配置的日誌欄位豐富,從各類HTTP頭部到內部性能數據都有 Nginx的訪問日誌中,存在499狀態碼的日誌。但常見4xx狀態碼只有400、401、403、404等,499並未在HTTP RFC文檔。這 ...
  • 本篇咱們從零開發一個quarkus應用,支持虛擬線程響應web服務,響應式操作postgresql資料庫,並且在quarkus官方還未支持的情況下,率先並將其製作成docker鏡像 ...
  • 本文深入探討Go語言中的流程式控制制語法,包括基本的if-else條件分支、for迴圈、switch-case多條件分支,以及與特定數據類型相關的流程式控制制,如for-range迴圈和type-switch。文章還詳細描述了goto、fallthrough等跳轉語句的使用方法,通過清晰的代碼示例為讀者提供 ...
  • 一、什麼是kafka,什麼是rabbit Kafka是由Scala語言開發的一種分散式流處理框架,主要用於處理活躍的流式數據,以及大數據量的數據處理。它採用發佈-訂閱模型,支持消息的批量處理,數據的存儲和獲取是本地磁碟順序批量操作,這使得消息處理的效率較高,吞吐量較大。 RabbitMQ則是由Erl ...
  • InlineHook 是一種電腦安全編程技術,其原理是在電腦程式執行期間進行攔截、修改、增強現有函數功能。它使用鉤子函數(也可以稱為回調函數)來截獲程式執行的各種事件,併在事件發生前或後進行自定義處理,從而控制或增強程式行為。Hook技術常被用於系統加速、功能增強、等領域。本章將重點講解Hook... ...
  • pycharm作為開發python程式的最適合編輯器,幾乎已經普及了所有的python開發者 但是還有很多同學不會免費使用pycharm的方法,今天我就給大家普及兩種Pycharm安裝和免費激活的方式 本文提供圖文教程,一步一步地演示永久激活 Pycharm 的方法。適用於最新的幾個版本,步驟簡單, ...
  • 問題 在Spring Cloud項目中,前後端分離目前很常見,在調試時,會遇到兩種情況的跨域: 前端頁面通過不同功能變數名稱或IP訪問微服務的後臺,例如前端人員會在本地起HttpServer 直連後臺開發本地起的服務,此時,如果不加任何配置,前端頁面的請求會被瀏覽器跨域限制攔截,所以,業務服務常常會添加如下 ...
  • 在開發應用程式時,記錄日誌是一項關鍵的任務,以便在應用程式運行時追蹤問題、監視性能和保留審計記錄。Go 語言提供了靈活且強大的日誌記錄功能,可以通過多種方式配置和使用。其中一個常用的日誌記錄庫是 github.com/natefinch/lumberjack,它提供了一個方便的方式來處理日誌文件的輪 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...