解密Linux中的通用塊層:加速存儲系統,提升系統性能

来源:https://www.cnblogs.com/guoxiaoyu/archive/2023/09/11/17686106.html
-Advertisement-
Play Games

本文探討了Linux操作系統中的通用塊層和存儲系統I/O軟體分層的優化策略。通用塊層作為文件系統和磁碟驅動之間的介面,通過排隊和調度I/O請求,提高磁碟的讀寫效率和可靠性。存儲系統的I/O軟體分層包括文件系統層、通用塊層和設備層,它們相互協作,實現對存儲系統的高效管理和操作。本文旨在深入瞭解通用塊層... ...


通用塊層

通用塊層是Linux中的一個重要組件,用於管理不同塊設備的統一介面,減少不同塊設備的差異帶來的影響。它位於文件系統和磁碟驅動之間,類似於Java中的適配器模式,讓我們無需關註底層實現,只需提供固定介面即可。

通用塊層的設計目的是為了提高磁碟讀寫的效率和可靠性。它通過對I/O請求進行排隊和調度,以最大化磁碟的吞吐量和響應時間。通用塊層可以管理多個塊設備,並將它們抽象為一個統一的介面,使得文件系統和應用程式可以無差別地訪問這些設備。

在Linux內核中,有五種主要的I/O調度演算法可供選擇,它們分別是沒有調度演算法、先入先出調度演算法、完全公平調度演算法、優先順序調度演算法和最終期限調度演算法。這些演算法適用於不同的場景和需求。

  1. 第一種,沒有調度演算法,就是沒有任何特殊的處理,直接將文件系統和應用程式的I/O請求發送給塊設備。這種演算法常用在虛擬機中,因為磁碟I/O調度交由物理機系統負責。
  2. 第二種,先入先出調度演算法,就是按照I/O請求的到達順序進行調度,先進入I/O調度隊列的請求會先被處理。
  3. 第三種,完全公平調度演算法,是大部分系統預設使用的調度演算法。它為每個進程維護一個I/O調度隊列,並根據時間片來均勻分配每個進程的I/O請求。
  4. 第四種,優先順序調度演算法,根據請求的優先順序進行調度,優先順序高的請求先被處理。這種演算法適用於運行大量進程的系統,比如桌面環境或多媒體應用。
  5. 第五種,最終期限調度演算法,為讀寫請求創建了不同的I/O隊列,以提高機械磁碟的吞吐量,並確保達到最終期限的請求優先處理。這種演算法適用於I/O壓力較大的場景,比如資料庫等。

另外多說一句優先順序調度演算法,它適合桌面環境或多媒體應用的原因主要有以下幾點:

  • 響應性:桌面環境或多媒體應用通常需要實時的響應,對於用戶的操作或多媒體數據的播放,延遲較小的I/O響應是非常重要的。通過使用優先順序調度演算法,可以確保高優先順序的I/O請求被優先處理,從而提高系統的響應性能。
  • 性能優化:桌面環境或多媒體應用通常需要處理大量的數據,如圖像、音頻或視頻等。通過使用優先順序調度演算法,可以將這些需要優先處理的數據請求置於較高的優先順序,確保它們能夠及時得到處理,從而提高整體的性能和流暢度。
  • 平衡資源:桌面環境或多媒體應用通常需要同時運行多個任務或進程,這些任務可能會涉及到不同的資源需求。通過使用優先順序調度演算法,可以在資源有限的情況下,合理地分配和管理這些任務的I/O請求,避免某些任務長時間等待,從而實現資源的平衡利用。

存儲系統I/O軟體分層

在前面的討論中,我們提到了存儲系統的各個組成部分,包括設備、設備控制器、驅動程式和通用塊層。現在結合文件系統原理,我們來詳細瞭解一下 Linux 存儲系統的 I/O 軟體分層。

Linux 存儲系統的 I/O 軟體分層可以分為三個層次,分別是文件系統層、通用塊層和設備層。它們之間的關係如下圖所示:

image

這三個層次的作用是相互協作,實現對存儲系統的高效管理和操作。

文件系統層是用戶與存儲系統交互的介面,通過虛擬文件系統和具體的文件系統實現,為應用程式提供了標準的文件訪問介面。它負責將用戶的文件操作請求轉化為對底層存儲設備的讀寫操作,並管理文件的元數據和目錄結構。

通用塊層在文件系統層之下,負責對文件系統的I/O請求進行排隊和調度,以提高磁碟的讀寫效率。它包括塊設備的I/O隊列和I/O調度器,通過合理的調度演算法,選擇最優的順序和時間進行I/O操作。

設備層是位於存儲系統的最底層,包括硬體設備、設備控制器和驅動程式。它負責實際執行物理設備的I/O操作,將數據讀取到記憶體或將數據寫入到磁碟。

為了提高I/O的效率,Linux提供了多種緩存機制。頁緩存、索引節點緩存和目錄項緩存等緩存機制用於減少對塊設備的直接訪問,提高對文件數據的讀取和寫入效率。此外,還有緩衝區用於緩存塊設備的數據,以減少對磁碟的頻繁訪問。

為了滿足特定設備的功能和屬性的檢查和配置需求,Linux提供了ioctl介面,它是一種通用的輸入輸出控制介面,用於對特定設備進行屬性和功能的控制和修改。

總的來說,前面討論了這麼多知識點,你會發現從介紹操作系統開始到現在,所有操作都有一個中間層做‘適配’,其實目的很簡單,中間層既相當於我們的攔截器一樣,對上層的操作請求進行優化,又可以像適配器一樣屏蔽掉底層設備的各個差異方便操作而已。

總結

通用塊層是Linux中的重要組件,位於文件系統和磁碟驅動之間,提供統一介面,優化磁碟讀寫效率和可靠性。它管理多個塊設備,抽象為統一介面,使得文件系統和應用程式可以無差別訪問。通用塊層通過排隊和調度I/O請求,最大化磁碟吞吐量和響應時間。Linux內核提供多種I/O調度演算法適用於不同需求。當你學完這些知識點是否你自己可以大致想出敲完字母‘A’後,是如何顯示到屏幕上的嗎?
image


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • Python的運算符是用於執行各種操作的符號或符號組合。它們用於操作數據併進行算術、比較、邏輯和其他類型的運算。我們所熟知的加減乘除也是運算符中的一種。Python提供了多種類型的運算符,有算術運算符,比較運算符,賦值運算符,邏輯運算符,位算符等等。 算術運算符 算術運算符是Python中比較簡單的 ...
  • 序 ​ 一直都有做筆記的習慣,以前都是將記錄在印象筆記,但只能給自己看,不利於技術的分享,希望在平臺上記錄下自己的點點滴滴,方便自己,也是方便他人。 ​ 首先要想到的一個問題,就是現在技術平臺那麼多,總不能登錄每個網站,一個一個登錄、複製、黏貼發佈吧,我們可是程式員!!這種低效率的手動工作可不能做, ...
  • 本文全面探討了Go語言中的各類運算操作符,從基礎的數學和位運算到邏輯和特殊運算符。文章旨在深入解析每一種運算操作符的工作原理、應用場景和註意事項,以幫助開發者編寫更高效、健壯和可讀的Go代碼。 簡介 Go語言,作為一種現代的編程語言,不僅因為其簡單易讀的語法而受到歡迎,還因為它的性能和高度併發能力在 ...
  • 本文主要介紹 RocketMQ 管理工具(mqadmin)的使用,文中所使用到的軟體版本:RocketMQ 5.1.3、CentOS 7.9.2009。 1、mqadmin 說明 A、執行命令方法:./mqadmin {command} {args}B、幾乎所有命令都需要配置 -n 表示 NameS ...
  • 歡迎訪問我的GitHub 這裡分類和彙總了欣宸的全部原創(含配套源碼):https://github.com/zq2599/blog_demos 本篇概覽 本篇概覽 這是道高頻面試題,值得一看 首先,這道題的難度是中等 來看題目描述: 給你一個整數 n ,返回 和為 n 的完全平方數的最少數量 。 ...
  • 文件與文件流的區別(自己的話): 在軟體開發過程中,我們常常把文件的“讀寫操作”,與“創造、移動、複製、刪除操作”區分開來。其中,文件的“讀寫操作”是由System.IO命名空間下fileStream類控制的。而文件的“創造、移動、複製、刪除操作”是由file類控制的。 當然了,還有很多和這兩個類功 ...
  • 哈嘍大家好,我是鹹魚 不知道小伙伴們有沒有遇到過下麵的情況: 使用終端(XShell、secureCRT 或 MobaXterm 等)登錄 Linux 伺服器之後如果有一段時間沒有進行交互,SSH 會話就會斷開 如果正在執行一些非後臺命令,SSH 會話斷開就可能會使得這些命令可能會被中斷,導致任務無 ...
  • 我的系統是CentOS 7.6,按流程走完後可以實現系統內所有用戶都預設使用zsh且插件配置共用省去重覆編寫配置或軟連接的煩惱 1 安裝git yum -y install git 2 安裝zsh yum -y install zsh 3 更改root的預設shell #查看當前可用shell列表 ...
一周排行
    -Advertisement-
    Play Games
  • WPF本身不支持直接的3D繪圖,但是它提供了一些用於實現3D效果的高級技術。 如果你想要在WPF中進行3D繪圖,你可以使用兩種主要的方法: WPF 3D:這是一種在WPF應用程式中創建3D圖形的方式。WPF 3D提供了一些基本的3D形狀(如立方體、球體和錐體)以及一些用於控制3D場景和對象的工具(如 ...
  • 一、XML概述 XML(可擴展標記語言)是一種用於描述數據的標記語言,旨在提供一種通用的方式來傳輸和存儲數據,特別是Web應用程式中經常使用的數據。XML並不預定義標記。因此,XML更加靈活,並且可以適用於廣泛的應用領域。 XML文檔由元素(element)、屬性(attribute)和內容(con ...
  • 從今年(2023)三月份開始,Github開始強制用戶開啟兩步驗證2FA(雙因數)登錄驗證,毫無疑問,是出於安全層面的考慮,畢竟Github賬號一旦被盜,所有代碼倉庫都會毀於一旦,關於雙因數登錄的必要性請參見:別讓你的伺服器(vps)淪為肉雞(ssh暴力破解),密鑰驗證、雙向因數登錄值得擁有。 雙因 ...
  • 第一題 下列代碼輸入什麼? public class Test { public static Test t1 = new Test(); { System.out.println("blockA"); } static { System.out.println("blockB"); } publi ...
  • 本文主要涉及的問題:用ElementTree和XPath讀寫XML文件;解決ElementTree新增元素後再寫入格式不統一的問題;QTableWidget單元格設置控制項 ...
  • QStandardItemModel 類作為標準模型,主打“類型通用”,前一篇水文中,老周還沒提到樹形結構的列表,本篇咱們就好好探討一下這貨。 還是老辦法,咱們先做示例,然後再聊知識點。下麵這個例子,使用 QTreeView 組件來顯示數據,使用的列表模型比較簡單,只有一列。 #include <Q ...
  • 一、直充內充(充值方式) 直充: 包裝套餐直接充值到上游API系統。【PID/Smart】 (如:支付寶、微信 話費/流量/語音/簡訊 等 充值系統)。 內充(套餐打包常見物聯卡系統功能): 套餐包裝 適用於不同類型套餐 如 流量、簡訊、語音 等。 (目前已完善流量邏輯) 二、套餐與計費產品 計費產 ...
  • 在前面幾天中,我們學習了Dart基礎語法、可迭代集合,它們是Flutter應用研發的基本功。今天,我們繼續學習Flutter應用另一個必須掌握知識點:非同步編程(即Future和async/await)。它類似於Java中的FutureTask、JavaScript中的Promise。它是後續Flut... ...
  • 針對改動範圍大、影響面廣的需求,我通常會問上線了最壞情況是什麼?應急預案是什麼?你帶開關了嗎?。當然開關也是有成本的,接下來本篇跟大家一起交流下高頻發佈支撐下的功能開關技術理論與實踐結合的點點滴滴。 ...
  • 1.d3.shuffle D3.shuffle() 方法用於將數組中的元素隨機排序。它使用 Fisher–Yates 洗牌演算法,該演算法是無偏的,具有最佳的漸近性能(線性時間和常數記憶體)。 D3.shuffle() 方法的語法如下: d3.shuffle(array, [start, end]) 其中 ...