解密Linux中的通用塊層:加速存儲系統,提升系統性能

来源:https://www.cnblogs.com/guoxiaoyu/archive/2023/09/11/17686106.html
-Advertisement-
Play Games

本文探討了Linux操作系統中的通用塊層和存儲系統I/O軟體分層的優化策略。通用塊層作為文件系統和磁碟驅動之間的介面,通過排隊和調度I/O請求,提高磁碟的讀寫效率和可靠性。存儲系統的I/O軟體分層包括文件系統層、通用塊層和設備層,它們相互協作,實現對存儲系統的高效管理和操作。本文旨在深入瞭解通用塊層... ...


通用塊層

通用塊層是Linux中的一個重要組件,用於管理不同塊設備的統一介面,減少不同塊設備的差異帶來的影響。它位於文件系統和磁碟驅動之間,類似於Java中的適配器模式,讓我們無需關註底層實現,只需提供固定介面即可。

通用塊層的設計目的是為了提高磁碟讀寫的效率和可靠性。它通過對I/O請求進行排隊和調度,以最大化磁碟的吞吐量和響應時間。通用塊層可以管理多個塊設備,並將它們抽象為一個統一的介面,使得文件系統和應用程式可以無差別地訪問這些設備。

在Linux內核中,有五種主要的I/O調度演算法可供選擇,它們分別是沒有調度演算法、先入先出調度演算法、完全公平調度演算法、優先順序調度演算法和最終期限調度演算法。這些演算法適用於不同的場景和需求。

  1. 第一種,沒有調度演算法,就是沒有任何特殊的處理,直接將文件系統和應用程式的I/O請求發送給塊設備。這種演算法常用在虛擬機中,因為磁碟I/O調度交由物理機系統負責。
  2. 第二種,先入先出調度演算法,就是按照I/O請求的到達順序進行調度,先進入I/O調度隊列的請求會先被處理。
  3. 第三種,完全公平調度演算法,是大部分系統預設使用的調度演算法。它為每個進程維護一個I/O調度隊列,並根據時間片來均勻分配每個進程的I/O請求。
  4. 第四種,優先順序調度演算法,根據請求的優先順序進行調度,優先順序高的請求先被處理。這種演算法適用於運行大量進程的系統,比如桌面環境或多媒體應用。
  5. 第五種,最終期限調度演算法,為讀寫請求創建了不同的I/O隊列,以提高機械磁碟的吞吐量,並確保達到最終期限的請求優先處理。這種演算法適用於I/O壓力較大的場景,比如資料庫等。

另外多說一句優先順序調度演算法,它適合桌面環境或多媒體應用的原因主要有以下幾點:

  • 響應性:桌面環境或多媒體應用通常需要實時的響應,對於用戶的操作或多媒體數據的播放,延遲較小的I/O響應是非常重要的。通過使用優先順序調度演算法,可以確保高優先順序的I/O請求被優先處理,從而提高系統的響應性能。
  • 性能優化:桌面環境或多媒體應用通常需要處理大量的數據,如圖像、音頻或視頻等。通過使用優先順序調度演算法,可以將這些需要優先處理的數據請求置於較高的優先順序,確保它們能夠及時得到處理,從而提高整體的性能和流暢度。
  • 平衡資源:桌面環境或多媒體應用通常需要同時運行多個任務或進程,這些任務可能會涉及到不同的資源需求。通過使用優先順序調度演算法,可以在資源有限的情況下,合理地分配和管理這些任務的I/O請求,避免某些任務長時間等待,從而實現資源的平衡利用。

存儲系統I/O軟體分層

在前面的討論中,我們提到了存儲系統的各個組成部分,包括設備、設備控制器、驅動程式和通用塊層。現在結合文件系統原理,我們來詳細瞭解一下 Linux 存儲系統的 I/O 軟體分層。

Linux 存儲系統的 I/O 軟體分層可以分為三個層次,分別是文件系統層、通用塊層和設備層。它們之間的關係如下圖所示:

image

這三個層次的作用是相互協作,實現對存儲系統的高效管理和操作。

文件系統層是用戶與存儲系統交互的介面,通過虛擬文件系統和具體的文件系統實現,為應用程式提供了標準的文件訪問介面。它負責將用戶的文件操作請求轉化為對底層存儲設備的讀寫操作,並管理文件的元數據和目錄結構。

通用塊層在文件系統層之下,負責對文件系統的I/O請求進行排隊和調度,以提高磁碟的讀寫效率。它包括塊設備的I/O隊列和I/O調度器,通過合理的調度演算法,選擇最優的順序和時間進行I/O操作。

設備層是位於存儲系統的最底層,包括硬體設備、設備控制器和驅動程式。它負責實際執行物理設備的I/O操作,將數據讀取到記憶體或將數據寫入到磁碟。

為了提高I/O的效率,Linux提供了多種緩存機制。頁緩存、索引節點緩存和目錄項緩存等緩存機制用於減少對塊設備的直接訪問,提高對文件數據的讀取和寫入效率。此外,還有緩衝區用於緩存塊設備的數據,以減少對磁碟的頻繁訪問。

為了滿足特定設備的功能和屬性的檢查和配置需求,Linux提供了ioctl介面,它是一種通用的輸入輸出控制介面,用於對特定設備進行屬性和功能的控制和修改。

總的來說,前面討論了這麼多知識點,你會發現從介紹操作系統開始到現在,所有操作都有一個中間層做‘適配’,其實目的很簡單,中間層既相當於我們的攔截器一樣,對上層的操作請求進行優化,又可以像適配器一樣屏蔽掉底層設備的各個差異方便操作而已。

總結

通用塊層是Linux中的重要組件,位於文件系統和磁碟驅動之間,提供統一介面,優化磁碟讀寫效率和可靠性。它管理多個塊設備,抽象為統一介面,使得文件系統和應用程式可以無差別訪問。通用塊層通過排隊和調度I/O請求,最大化磁碟吞吐量和響應時間。Linux內核提供多種I/O調度演算法適用於不同需求。當你學完這些知識點是否你自己可以大致想出敲完字母‘A’後,是如何顯示到屏幕上的嗎?
image


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • Python的運算符是用於執行各種操作的符號或符號組合。它們用於操作數據併進行算術、比較、邏輯和其他類型的運算。我們所熟知的加減乘除也是運算符中的一種。Python提供了多種類型的運算符,有算術運算符,比較運算符,賦值運算符,邏輯運算符,位算符等等。 算術運算符 算術運算符是Python中比較簡單的 ...
  • 序 ​ 一直都有做筆記的習慣,以前都是將記錄在印象筆記,但只能給自己看,不利於技術的分享,希望在平臺上記錄下自己的點點滴滴,方便自己,也是方便他人。 ​ 首先要想到的一個問題,就是現在技術平臺那麼多,總不能登錄每個網站,一個一個登錄、複製、黏貼發佈吧,我們可是程式員!!這種低效率的手動工作可不能做, ...
  • 本文全面探討了Go語言中的各類運算操作符,從基礎的數學和位運算到邏輯和特殊運算符。文章旨在深入解析每一種運算操作符的工作原理、應用場景和註意事項,以幫助開發者編寫更高效、健壯和可讀的Go代碼。 簡介 Go語言,作為一種現代的編程語言,不僅因為其簡單易讀的語法而受到歡迎,還因為它的性能和高度併發能力在 ...
  • 本文主要介紹 RocketMQ 管理工具(mqadmin)的使用,文中所使用到的軟體版本:RocketMQ 5.1.3、CentOS 7.9.2009。 1、mqadmin 說明 A、執行命令方法:./mqadmin {command} {args}B、幾乎所有命令都需要配置 -n 表示 NameS ...
  • 歡迎訪問我的GitHub 這裡分類和彙總了欣宸的全部原創(含配套源碼):https://github.com/zq2599/blog_demos 本篇概覽 本篇概覽 這是道高頻面試題,值得一看 首先,這道題的難度是中等 來看題目描述: 給你一個整數 n ,返回 和為 n 的完全平方數的最少數量 。 ...
  • 文件與文件流的區別(自己的話): 在軟體開發過程中,我們常常把文件的“讀寫操作”,與“創造、移動、複製、刪除操作”區分開來。其中,文件的“讀寫操作”是由System.IO命名空間下fileStream類控制的。而文件的“創造、移動、複製、刪除操作”是由file類控制的。 當然了,還有很多和這兩個類功 ...
  • 哈嘍大家好,我是鹹魚 不知道小伙伴們有沒有遇到過下麵的情況: 使用終端(XShell、secureCRT 或 MobaXterm 等)登錄 Linux 伺服器之後如果有一段時間沒有進行交互,SSH 會話就會斷開 如果正在執行一些非後臺命令,SSH 會話斷開就可能會使得這些命令可能會被中斷,導致任務無 ...
  • 我的系統是CentOS 7.6,按流程走完後可以實現系統內所有用戶都預設使用zsh且插件配置共用省去重覆編寫配置或軟連接的煩惱 1 安裝git yum -y install git 2 安裝zsh yum -y install zsh 3 更改root的預設shell #查看當前可用shell列表 ...
一周排行
    -Advertisement-
    Play Games
  • 示例項目結構 在 Visual Studio 中創建一個 WinForms 應用程式後,項目結構如下所示: MyWinFormsApp/ │ ├───Properties/ │ └───Settings.settings │ ├───bin/ │ ├───Debug/ │ └───Release/ ...
  • [STAThread] 特性用於需要與 COM 組件交互的應用程式,尤其是依賴單線程模型(如 Windows Forms 應用程式)的組件。在 STA 模式下,線程擁有自己的消息迴圈,這對於處理用戶界面和某些 COM 組件是必要的。 [STAThread] static void Main(stri ...
  • 在WinForm中使用全局異常捕獲處理 在WinForm應用程式中,全局異常捕獲是確保程式穩定性的關鍵。通過在Program類的Main方法中設置全局異常處理,可以有效地捕獲並處理未預見的異常,從而避免程式崩潰。 註冊全局異常事件 [STAThread] static void Main() { / ...
  • 前言 給大家推薦一款開源的 Winform 控制項庫,可以幫助我們開發更加美觀、漂亮的 WinForm 界面。 項目介紹 SunnyUI.NET 是一個基於 .NET Framework 4.0+、.NET 6、.NET 7 和 .NET 8 的 WinForm 開源控制項庫,同時也提供了工具類庫、擴展 ...
  • 說明 該文章是屬於OverallAuth2.0系列文章,每周更新一篇該系列文章(從0到1完成系統開發)。 該系統文章,我會儘量說的非常詳細,做到不管新手、老手都能看懂。 說明:OverallAuth2.0 是一個簡單、易懂、功能強大的許可權+可視化流程管理系統。 有興趣的朋友,請關註我吧(*^▽^*) ...
  • 一、下載安裝 1.下載git 必須先下載並安裝git,再TortoiseGit下載安裝 git安裝參考教程:https://blog.csdn.net/mukes/article/details/115693833 2.TortoiseGit下載與安裝 TortoiseGit,Git客戶端,32/6 ...
  • 前言 在項目開發過程中,理解數據結構和演算法如同掌握蓋房子的秘訣。演算法不僅能幫助我們編寫高效、優質的代碼,還能解決項目中遇到的各種難題。 給大家推薦一個支持C#的開源免費、新手友好的數據結構與演算法入門教程:Hello演算法。 項目介紹 《Hello Algo》是一本開源免費、新手友好的數據結構與演算法入門 ...
  • 1.生成單個Proto.bat內容 @rem Copyright 2016, Google Inc. @rem All rights reserved. @rem @rem Redistribution and use in source and binary forms, with or with ...
  • 一:背景 1. 講故事 前段時間有位朋友找到我,說他的窗體程式在客戶這邊出現了卡死,讓我幫忙看下怎麼回事?dump也生成了,既然有dump了那就上 windbg 分析吧。 二:WinDbg 分析 1. 為什麼會卡死 窗體程式的卡死,入口門檻很低,後續往下分析就不一定了,不管怎麼說先用 !clrsta ...
  • 前言 人工智慧時代,人臉識別技術已成為安全驗證、身份識別和用戶交互的關鍵工具。 給大家推薦一款.NET 開源提供了強大的人臉識別 API,工具不僅易於集成,還具備高效處理能力。 本文將介紹一款如何利用這些API,為我們的項目添加智能識別的亮點。 項目介紹 GitHub 上擁有 1.2k 星標的 C# ...