零拷貝技術:減少數據複製和上下文切換,提高網路傳輸效率(下)

来源:https://www.cnblogs.com/guoxiaoyu/archive/2023/09/15/17694789.html
-Advertisement-
Play Games

本章節主要討論瞭如何通過零拷貝技術來優化文件傳輸的性能。零拷貝技術主要通過減少用戶態和內核態之間的上下文切換次數和數據拷貝次數來提高性能。具體來說,介紹了兩種實現零拷貝的方式:mmap + write和sendfile。使用mmap + write可以減少一次數據拷貝過程,而使用sendfile系統... ...


前章回顧

在前一章節中,我們瞭解了DMA技術在文件傳輸中的重要性,並簡要介紹了零拷貝技術。為了提高文件傳輸的性能,我們需要減少用戶態與內核態之間的上下文切換次數以及記憶體拷貝次數。本章將深入探討零拷貝技術的優化方法,讓我們一起走進零拷貝的優化之路!

如何優化文件傳輸的性能?

當我們意識到有問題需要進行優化時,我們可以逐個解決問題,例如先減少用戶態和內核態的上下文切換次數。

我們知道上下文切換是因為用戶空間沒有許可權操作磁碟或網卡,而只能在虛擬空間上進行。相比之下,內核擁有最高許可權,因此操作設備的任務都需要操作系統內核完成。為此,我們需要使用操作系統提供的系統調用函數來通過內核完成這些任務。如果對此還不清楚的小伙伴,可以查看之前章節中單獨講解的內容。

一次系統調用必然會發生兩次上下文切換:首先從用戶態切換到內核態,當內核執行完任務後,再切換回用戶態由進程代碼繼續執行。

因此,要減少上下文切換的次數,就需要減少系統調用的次數。

另外,我們還可以減少數據拷貝的次數。在之前的分析中,我們發現操作會進行四次數據拷貝,包括兩次CPU拷貝和兩次DMA控制器數據拷貝。然而,在文件傳輸過程中,我們實際上並沒有對文件進行任何操作,只是將磁碟文件傳輸給網卡。CPU數據拷貝的次數是由於上下文切換導致CPU在用戶態和內核態之間來回覆制數據,這是沒有必要的。此外,用戶緩衝區在整個傳輸過程中也是沒有必要存在的。

如何實現零拷貝

零拷貝技術實現的方式通常有 2 種:

  1. mmap + write
  2. sendfile

讓我們來探討一下如何通過兩種方式實現零拷貝技術,從而減少上下文切換和數據拷貝的次數。

mmap(共用緩衝區) + write

首先是使用 mmap + write 的方式。在之前的討論中,我們瞭解到在使用 read() 系統調用時,會發生將內核緩衝區的數據拷貝到用戶緩衝區的過程。為了減少這一步的開銷,可以使用 mmap() 替換 read() 系統調用函數。

我們之前在討論進程間如何通信時,我們有提到過共用緩衝區,即將內核態的一部分記憶體空間映射到應用程式所使用的虛擬空間上。如圖所示:

image

而我們此時並不需要多個進程通信,如果只需要將物理記憶體映射給需要文件傳輸的進程,情況就會變得稍有不同。那麼就可以演化成下麵的這種方式,如圖所示:

image

具體過程如下:

  1. 應用程式調用 mmap() 函數後,DMA會將磁碟數據拷貝到內核態的緩存區上,然後應用程式與操作系統共用這個緩衝區。
  2. 應用程式調用 write(),操作系統直接將內核態中的緩衝區數據拷貝到 socket 緩衝區,此時只在內核態進行操作,不會產生用戶態和內核態切換,數據搬運過程由CPU完成。
  3. 最後,將內核的 socket 緩衝區數據拷貝到網卡中的數據緩衝區,這一步由DMA控制器操作。

我們可以得知,通過使用 mmap() 替代 read(),可以減少一次數據拷貝的過程。然而,這仍然不是最理想的零拷貝方式,因為仍然需要通過 CPU 將內核緩衝區的數據拷貝到 socket 緩衝區,且仍然需要進行 4 次上下文切換,因為系統調用仍然發生了兩次。

接下來,我們來看第二種實現零拷貝的方式 - sendfile。

sendfile

在 Linux 內核版本 2.1 中,引入了一個名為sendfile()的系統調用函數,它提供了一種更高效的文件發送方法。sendfile()函數的使用方式如下:

#include <sys/socket.h>
ssize_t sendfile(int out_fd, int in_fd, off_t *offset, size_t count);	

該函數的前兩個參數是目標端和源端的文件描述符,後面兩個參數分別表示源端的偏移量和要複製的數據長度。函數的返回值是實際複製數據的長度。

sendfile()函數具有以下優點:

首先,它可以代替之前需要使用read()和write()兩個系統調用的操作,從而減少了一次系統調用的開銷。儘管sendfile()函數本身仍然需要進行系統調用,但仍然能夠減少了2次上下文切換的開銷。

其次,該系統調用可以直接將內核緩衝區中的數據複製到套接字緩衝區中,而無需再複製到用戶態。這樣一來,只需要進行2次上下文切換和3次數據拷貝。下圖展示了這一過程的流程:

image

然而,這個過程仍然不能被稱為真正的零拷貝技術。如果我們的網卡支持SG-DMA(散射-聚集直接記憶體訪問)技術,與普通的DMA有所不同,那麼我們可以進一步減少通過CPU將內核緩衝區中的數據拷貝到套接字緩衝區的過程。

你可以在你的Linux系統上使用以下命令來查看網卡是否支持散射-聚集特性::

$ ethtool -k eth0 | grep scatter-gather
scatter-gather: on

因此,從Linux內核2.4版本開始,在網卡支持SG-DMA技術的情況下,sendfile()系統調用的過程發生了一些變化,具體過程如下:

第一步,通過DMA將磁碟上的數據拷貝到內核緩衝區中;

第二步:內核緩衝區只需要將描述符和數據長度發送給套接字緩衝區,然後將直接通過SG-DMA將內核緩衝區中的數據拷貝到網卡的緩衝區中,這個過程不再需要從操作系統的內核緩衝區中拷貝到套接字緩衝區,從而減少了一次數據拷貝的過程。

因此,在這個過程中,只進行了兩次數據拷貝,如下圖所示:

image

這就是所謂的零拷貝(Zero-copy)技術,因為我們沒有在記憶體層面進行數據拷貝,也就是說在整個過程中沒有使用CPU來傳輸數據,而是完全依靠DMA來進行數據傳輸。

相比傳統的文件傳輸方式,零拷貝技術可以減少2次上下文切換和數據拷貝的次數,只需要進行2次上下文切換和數據拷貝,就能完成文件的傳輸。而且這2次數據拷貝過程都不需要通過CPU,而是由DMA來進行數據傳輸。

因此,總體來看,零拷貝技術可以將文件傳輸的性能提升至少一倍以上。值得一提的是,在講解零拷貝技術時,並沒有提到網路協議是在哪個步驟中封裝的。大家也應該知道,在內核中完成了網路協議的封裝,而不是直接從緩衝區中取出數據併發送給網卡就結束了。

總結

本章主要介紹了零拷貝技術在文件傳輸中的優化方法。首先,通過減少用戶態和內核態之間的上下文切換次數和數據拷貝次數來優化文件傳輸的性能。其次,介紹了兩種實現零拷貝的方式:mmap + write和sendfile。通過使用mmap + write,可以將內核緩衝區的數據直接拷貝到socket緩衝區,減少一次數據拷貝過程。而使用sendfile系統調用,則可以進一步減少系統調用和數據拷貝次數。若網卡支持SG-DMA技術,還可以通過DMA將內核緩衝區的數據直接拷貝到網卡緩衝區,實現真正的零拷貝。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 1 前言 高性能的HTTP和反向代理伺服器,Nginx用來: 搭建Web Server 作負載均衡 供配置的日誌欄位豐富,從各類HTTP頭部到內部性能數據都有 Nginx的訪問日誌中,存在499狀態碼的日誌。但常見4xx狀態碼只有400、401、403、404等,499並未在HTTP RFC文檔。這 ...
  • 本篇咱們從零開發一個quarkus應用,支持虛擬線程響應web服務,響應式操作postgresql資料庫,並且在quarkus官方還未支持的情況下,率先並將其製作成docker鏡像 ...
  • 本文深入探討Go語言中的流程式控制制語法,包括基本的if-else條件分支、for迴圈、switch-case多條件分支,以及與特定數據類型相關的流程式控制制,如for-range迴圈和type-switch。文章還詳細描述了goto、fallthrough等跳轉語句的使用方法,通過清晰的代碼示例為讀者提供 ...
  • 一、什麼是kafka,什麼是rabbit Kafka是由Scala語言開發的一種分散式流處理框架,主要用於處理活躍的流式數據,以及大數據量的數據處理。它採用發佈-訂閱模型,支持消息的批量處理,數據的存儲和獲取是本地磁碟順序批量操作,這使得消息處理的效率較高,吞吐量較大。 RabbitMQ則是由Erl ...
  • InlineHook 是一種電腦安全編程技術,其原理是在電腦程式執行期間進行攔截、修改、增強現有函數功能。它使用鉤子函數(也可以稱為回調函數)來截獲程式執行的各種事件,併在事件發生前或後進行自定義處理,從而控制或增強程式行為。Hook技術常被用於系統加速、功能增強、等領域。本章將重點講解Hook... ...
  • pycharm作為開發python程式的最適合編輯器,幾乎已經普及了所有的python開發者 但是還有很多同學不會免費使用pycharm的方法,今天我就給大家普及兩種Pycharm安裝和免費激活的方式 本文提供圖文教程,一步一步地演示永久激活 Pycharm 的方法。適用於最新的幾個版本,步驟簡單, ...
  • 問題 在Spring Cloud項目中,前後端分離目前很常見,在調試時,會遇到兩種情況的跨域: 前端頁面通過不同功能變數名稱或IP訪問微服務的後臺,例如前端人員會在本地起HttpServer 直連後臺開發本地起的服務,此時,如果不加任何配置,前端頁面的請求會被瀏覽器跨域限制攔截,所以,業務服務常常會添加如下 ...
  • 在開發應用程式時,記錄日誌是一項關鍵的任務,以便在應用程式運行時追蹤問題、監視性能和保留審計記錄。Go 語言提供了靈活且強大的日誌記錄功能,可以通過多種方式配置和使用。其中一個常用的日誌記錄庫是 github.com/natefinch/lumberjack,它提供了一個方便的方式來處理日誌文件的輪 ...
一周排行
    -Advertisement-
    Play Games
  • WPF本身不支持直接的3D繪圖,但是它提供了一些用於實現3D效果的高級技術。 如果你想要在WPF中進行3D繪圖,你可以使用兩種主要的方法: WPF 3D:這是一種在WPF應用程式中創建3D圖形的方式。WPF 3D提供了一些基本的3D形狀(如立方體、球體和錐體)以及一些用於控制3D場景和對象的工具(如 ...
  • 一、XML概述 XML(可擴展標記語言)是一種用於描述數據的標記語言,旨在提供一種通用的方式來傳輸和存儲數據,特別是Web應用程式中經常使用的數據。XML並不預定義標記。因此,XML更加靈活,並且可以適用於廣泛的應用領域。 XML文檔由元素(element)、屬性(attribute)和內容(con ...
  • 從今年(2023)三月份開始,Github開始強制用戶開啟兩步驗證2FA(雙因數)登錄驗證,毫無疑問,是出於安全層面的考慮,畢竟Github賬號一旦被盜,所有代碼倉庫都會毀於一旦,關於雙因數登錄的必要性請參見:別讓你的伺服器(vps)淪為肉雞(ssh暴力破解),密鑰驗證、雙向因數登錄值得擁有。 雙因 ...
  • 第一題 下列代碼輸入什麼? public class Test { public static Test t1 = new Test(); { System.out.println("blockA"); } static { System.out.println("blockB"); } publi ...
  • 本文主要涉及的問題:用ElementTree和XPath讀寫XML文件;解決ElementTree新增元素後再寫入格式不統一的問題;QTableWidget單元格設置控制項 ...
  • QStandardItemModel 類作為標準模型,主打“類型通用”,前一篇水文中,老周還沒提到樹形結構的列表,本篇咱們就好好探討一下這貨。 還是老辦法,咱們先做示例,然後再聊知識點。下麵這個例子,使用 QTreeView 組件來顯示數據,使用的列表模型比較簡單,只有一列。 #include <Q ...
  • 一、直充內充(充值方式) 直充: 包裝套餐直接充值到上游API系統。【PID/Smart】 (如:支付寶、微信 話費/流量/語音/簡訊 等 充值系統)。 內充(套餐打包常見物聯卡系統功能): 套餐包裝 適用於不同類型套餐 如 流量、簡訊、語音 等。 (目前已完善流量邏輯) 二、套餐與計費產品 計費產 ...
  • 在前面幾天中,我們學習了Dart基礎語法、可迭代集合,它們是Flutter應用研發的基本功。今天,我們繼續學習Flutter應用另一個必須掌握知識點:非同步編程(即Future和async/await)。它類似於Java中的FutureTask、JavaScript中的Promise。它是後續Flut... ...
  • 針對改動範圍大、影響面廣的需求,我通常會問上線了最壞情況是什麼?應急預案是什麼?你帶開關了嗎?。當然開關也是有成本的,接下來本篇跟大家一起交流下高頻發佈支撐下的功能開關技術理論與實踐結合的點點滴滴。 ...
  • 1.d3.shuffle D3.shuffle() 方法用於將數組中的元素隨機排序。它使用 Fisher–Yates 洗牌演算法,該演算法是無偏的,具有最佳的漸近性能(線性時間和常數記憶體)。 D3.shuffle() 方法的語法如下: d3.shuffle(array, [start, end]) 其中 ...