解密Linux中的通用塊層:加速存儲系統,提升系統性能

来源:https://www.cnblogs.com/guoxiaoyu/archive/2023/09/11/17686106.html
-Advertisement-
Play Games

本文探討了Linux操作系統中的通用塊層和存儲系統I/O軟體分層的優化策略。通用塊層作為文件系統和磁碟驅動之間的介面,通過排隊和調度I/O請求,提高磁碟的讀寫效率和可靠性。存儲系統的I/O軟體分層包括文件系統層、通用塊層和設備層,它們相互協作,實現對存儲系統的高效管理和操作。本文旨在深入瞭解通用塊層... ...


通用塊層

通用塊層是Linux中的一個重要組件,用於管理不同塊設備的統一介面,減少不同塊設備的差異帶來的影響。它位於文件系統和磁碟驅動之間,類似於Java中的適配器模式,讓我們無需關註底層實現,只需提供固定介面即可。

通用塊層的設計目的是為了提高磁碟讀寫的效率和可靠性。它通過對I/O請求進行排隊和調度,以最大化磁碟的吞吐量和響應時間。通用塊層可以管理多個塊設備,並將它們抽象為一個統一的介面,使得文件系統和應用程式可以無差別地訪問這些設備。

在Linux內核中,有五種主要的I/O調度演算法可供選擇,它們分別是沒有調度演算法、先入先出調度演算法、完全公平調度演算法、優先順序調度演算法和最終期限調度演算法。這些演算法適用於不同的場景和需求。

  1. 第一種,沒有調度演算法,就是沒有任何特殊的處理,直接將文件系統和應用程式的I/O請求發送給塊設備。這種演算法常用在虛擬機中,因為磁碟I/O調度交由物理機系統負責。
  2. 第二種,先入先出調度演算法,就是按照I/O請求的到達順序進行調度,先進入I/O調度隊列的請求會先被處理。
  3. 第三種,完全公平調度演算法,是大部分系統預設使用的調度演算法。它為每個進程維護一個I/O調度隊列,並根據時間片來均勻分配每個進程的I/O請求。
  4. 第四種,優先順序調度演算法,根據請求的優先順序進行調度,優先順序高的請求先被處理。這種演算法適用於運行大量進程的系統,比如桌面環境或多媒體應用。
  5. 第五種,最終期限調度演算法,為讀寫請求創建了不同的I/O隊列,以提高機械磁碟的吞吐量,並確保達到最終期限的請求優先處理。這種演算法適用於I/O壓力較大的場景,比如資料庫等。

另外多說一句優先順序調度演算法,它適合桌面環境或多媒體應用的原因主要有以下幾點:

  • 響應性:桌面環境或多媒體應用通常需要實時的響應,對於用戶的操作或多媒體數據的播放,延遲較小的I/O響應是非常重要的。通過使用優先順序調度演算法,可以確保高優先順序的I/O請求被優先處理,從而提高系統的響應性能。
  • 性能優化:桌面環境或多媒體應用通常需要處理大量的數據,如圖像、音頻或視頻等。通過使用優先順序調度演算法,可以將這些需要優先處理的數據請求置於較高的優先順序,確保它們能夠及時得到處理,從而提高整體的性能和流暢度。
  • 平衡資源:桌面環境或多媒體應用通常需要同時運行多個任務或進程,這些任務可能會涉及到不同的資源需求。通過使用優先順序調度演算法,可以在資源有限的情況下,合理地分配和管理這些任務的I/O請求,避免某些任務長時間等待,從而實現資源的平衡利用。

存儲系統I/O軟體分層

在前面的討論中,我們提到了存儲系統的各個組成部分,包括設備、設備控制器、驅動程式和通用塊層。現在結合文件系統原理,我們來詳細瞭解一下 Linux 存儲系統的 I/O 軟體分層。

Linux 存儲系統的 I/O 軟體分層可以分為三個層次,分別是文件系統層、通用塊層和設備層。它們之間的關係如下圖所示:

image

這三個層次的作用是相互協作,實現對存儲系統的高效管理和操作。

文件系統層是用戶與存儲系統交互的介面,通過虛擬文件系統和具體的文件系統實現,為應用程式提供了標準的文件訪問介面。它負責將用戶的文件操作請求轉化為對底層存儲設備的讀寫操作,並管理文件的元數據和目錄結構。

通用塊層在文件系統層之下,負責對文件系統的I/O請求進行排隊和調度,以提高磁碟的讀寫效率。它包括塊設備的I/O隊列和I/O調度器,通過合理的調度演算法,選擇最優的順序和時間進行I/O操作。

設備層是位於存儲系統的最底層,包括硬體設備、設備控制器和驅動程式。它負責實際執行物理設備的I/O操作,將數據讀取到記憶體或將數據寫入到磁碟。

為了提高I/O的效率,Linux提供了多種緩存機制。頁緩存、索引節點緩存和目錄項緩存等緩存機制用於減少對塊設備的直接訪問,提高對文件數據的讀取和寫入效率。此外,還有緩衝區用於緩存塊設備的數據,以減少對磁碟的頻繁訪問。

為了滿足特定設備的功能和屬性的檢查和配置需求,Linux提供了ioctl介面,它是一種通用的輸入輸出控制介面,用於對特定設備進行屬性和功能的控制和修改。

總的來說,前面討論了這麼多知識點,你會發現從介紹操作系統開始到現在,所有操作都有一個中間層做‘適配’,其實目的很簡單,中間層既相當於我們的攔截器一樣,對上層的操作請求進行優化,又可以像適配器一樣屏蔽掉底層設備的各個差異方便操作而已。

總結

通用塊層是Linux中的重要組件,位於文件系統和磁碟驅動之間,提供統一介面,優化磁碟讀寫效率和可靠性。它管理多個塊設備,抽象為統一介面,使得文件系統和應用程式可以無差別訪問。通用塊層通過排隊和調度I/O請求,最大化磁碟吞吐量和響應時間。Linux內核提供多種I/O調度演算法適用於不同需求。當你學完這些知識點是否你自己可以大致想出敲完字母‘A’後,是如何顯示到屏幕上的嗎?
image


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • Python的運算符是用於執行各種操作的符號或符號組合。它們用於操作數據併進行算術、比較、邏輯和其他類型的運算。我們所熟知的加減乘除也是運算符中的一種。Python提供了多種類型的運算符,有算術運算符,比較運算符,賦值運算符,邏輯運算符,位算符等等。 算術運算符 算術運算符是Python中比較簡單的 ...
  • 序 ​ 一直都有做筆記的習慣,以前都是將記錄在印象筆記,但只能給自己看,不利於技術的分享,希望在平臺上記錄下自己的點點滴滴,方便自己,也是方便他人。 ​ 首先要想到的一個問題,就是現在技術平臺那麼多,總不能登錄每個網站,一個一個登錄、複製、黏貼發佈吧,我們可是程式員!!這種低效率的手動工作可不能做, ...
  • 本文全面探討了Go語言中的各類運算操作符,從基礎的數學和位運算到邏輯和特殊運算符。文章旨在深入解析每一種運算操作符的工作原理、應用場景和註意事項,以幫助開發者編寫更高效、健壯和可讀的Go代碼。 簡介 Go語言,作為一種現代的編程語言,不僅因為其簡單易讀的語法而受到歡迎,還因為它的性能和高度併發能力在 ...
  • 本文主要介紹 RocketMQ 管理工具(mqadmin)的使用,文中所使用到的軟體版本:RocketMQ 5.1.3、CentOS 7.9.2009。 1、mqadmin 說明 A、執行命令方法:./mqadmin {command} {args}B、幾乎所有命令都需要配置 -n 表示 NameS ...
  • 歡迎訪問我的GitHub 這裡分類和彙總了欣宸的全部原創(含配套源碼):https://github.com/zq2599/blog_demos 本篇概覽 本篇概覽 這是道高頻面試題,值得一看 首先,這道題的難度是中等 來看題目描述: 給你一個整數 n ,返回 和為 n 的完全平方數的最少數量 。 ...
  • 文件與文件流的區別(自己的話): 在軟體開發過程中,我們常常把文件的“讀寫操作”,與“創造、移動、複製、刪除操作”區分開來。其中,文件的“讀寫操作”是由System.IO命名空間下fileStream類控制的。而文件的“創造、移動、複製、刪除操作”是由file類控制的。 當然了,還有很多和這兩個類功 ...
  • 哈嘍大家好,我是鹹魚 不知道小伙伴們有沒有遇到過下麵的情況: 使用終端(XShell、secureCRT 或 MobaXterm 等)登錄 Linux 伺服器之後如果有一段時間沒有進行交互,SSH 會話就會斷開 如果正在執行一些非後臺命令,SSH 會話斷開就可能會使得這些命令可能會被中斷,導致任務無 ...
  • 我的系統是CentOS 7.6,按流程走完後可以實現系統內所有用戶都預設使用zsh且插件配置共用省去重覆編寫配置或軟連接的煩惱 1 安裝git yum -y install git 2 安裝zsh yum -y install zsh 3 更改root的預設shell #查看當前可用shell列表 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...