操作系統中文件系統的實現和分配方式探析(上)

来源:https://www.cnblogs.com/guoxiaoyu/archive/2023/09/05/17673042.html
-Advertisement-
Play Games

本文主要討論了操作系統中文件系統的實現和分配方式。首先介紹了虛擬文件系統(VFS)作為中間層,統一了不同文件系統的介面。然後介紹了文件的物理結構,包括文件塊和邏輯塊之間的映射關係。接著詳細討論了連續分配方式的特點和優缺點,包括順序訪問和隨機訪問的效率,以及磁碟空間碎片和文件長度擴展不方便的問題。最後... ...


虛擬文件系統

在 Linux 文件系統中,用戶空間、系統調用、虛擬機文件系統、緩存、文件系統以及存儲之間存在著緊密的關係。 如下圖:

image

在操作系統中,文件系統起到了重要的作用,它們負責管理操作系統中的文件和目錄。然而,不同的文件系統有著不同的實現方式和存儲位置。為了提供一個統一的介面給用戶,操作系統引入了虛擬文件系統(Virtual File System,VFS)作為中間層。

VFS 定義了一組通用的數據結構和標準介面,使得程式員無需瞭解具體文件系統的工作原理,只需要瞭解 VFS 提供的介面即可進行文件操作,其實連提供的介面各種編程語言都替我們封裝好了,只需要調用一些方法就完事了。

Linux 支持多種文件系統,根據存儲位置的不同,可以將文件系統分為三類。

  1. 磁碟的文件系統,它將數據直接存儲在磁碟中,例如 Ext 2/3/4、XFS 等。
  2. 記憶體的文件系統,這類文件系統的數據存儲在記憶體中,如 /proc 和 /sys 文件系統,讀寫這些文件實際上是讀寫內核中相關的數據。
  3. 網路的文件系統,用於訪問其他電腦主機的數據,例如 NFS、SMB 等。

為了正常使用文件系統,首先需要將其掛載到某個目錄上。例如,在 Linux 系統啟動時,會將文件系統掛載到根目錄,從而使文件系統可用。

文件的物理結構

操作系統負責管理磁碟中的數據,並將其呈現為易讀的形式,使我們不需要關心數據的具體存放位置及其存儲方式。操作系統背後的機制將數據存儲在磁碟上,以便我們可以方便地訪問和操作。

在操作系統的輔助下,我們看下文件的物理結構是如何在磁碟中存儲的。

文件塊

我們知道,物理磁碟上存儲的最小單位是扇區,通常為512位元組。這意味著即使一個數據不足512位元組,它仍然會占用512位元組的磁碟空間。然而,由於扇區的大小較小,會導致讀寫效率降低。

為了方便管理和訪問文件,操作系統引入了邏輯塊的概念。幾乎所有的文件系統都會將文件分割成固定大小的塊來存儲,前面我們說過通常一個塊的大小為4KB。如果磁碟的扇區大小為512位元組,而文件系統的塊大小為4KB,那麼文件系統的存儲單元就是8個扇區。這也解釋了為什麼文件的大小和占用空間之間存在差異。文件的大小指的是文件本身的實際大小,但並不一定等於占用的空間大小。因為不管文件的大小是否達到4KB,只要有數據,都會分配給它一個塊進行存儲。

需要註意的是,在Windows的NTFS文件系統中,如果寫入的數據很小,小於1KB,它將被存儲在文件表中,而不是以4KB為單位的塊中。但一旦數據超過1KB,將會分配4KB的存儲空間。

記憶體管理也採用類似的邏輯塊的概念。文件的邏輯地址也被分為一塊塊的文件塊,邏輯地址由邏輯塊號和塊內地址組成。用戶通過邏輯地址來操作文件,而操作系統負責完成邏輯地址與物理地址的映射,以實現對文件的訪問和操作。

image

文件分配方式

文件分配方式大致可以分為連續分配和非連續分配兩種。連續分配是指將文件的數據塊連續地存儲在磁碟上的相鄰區域,類似於Java中的數組。非連續分配則是將文件的數據塊分散存儲在磁碟上的不同區域,類似於Java中的鏈表。

連續分配

這種分配方式可以提高訪問速度,因為文件的塊是連續存儲的,所以在訪問文件時不需要進行磁頭的來回移動,可以直接順序訪問。這種順序訪問的特性使得連續分配適用於訪問模式較為順序的文件,比如視頻文件或音樂文件。

image

那麼操作系統如何完成邏輯塊與物理塊之間的映射呢?

在實際情況中,每個文件都會被放置在一個目錄中,無論是最外層的根目錄還是用戶自己創建的目錄,都會有一個對應的目錄結構文件,它記錄了當前目錄下的目錄項和文件信息。如圖所示:

image

具體來說,操作系統通過邏輯塊號和塊內地址的映射關係來實現邏輯塊與物理塊之間的對應關係,即(邏輯塊號,塊內地址)-> (物理塊號,塊內地址)。對於用戶訪問一個文件的內容,操作系統會通過文件的標識符找到對應的目錄項,並通過邏輯塊號計算出物理塊號,即物理塊號 = 起始塊號 + 邏輯塊號。由於可以根據邏輯塊號直接計算出物理塊號,所以連續分配方式支持順序訪問和隨機訪問。

連續分配方式在讀寫文件時效率較高,因為文件的磁碟塊是相鄰的,減少了移動磁頭的時間。這也是為什麼一些中間件或資料庫在寫文件時採用順序寫的機制,以提高處理速度。

連續空間存放的方式雖然讀寫效率高,但是缺點也很明顯,有「磁碟空間碎片」和「文件長度不易擴展」的缺陷。

然而,連續分配方式也存在明顯的缺點,主要是磁碟空間碎片和文件長度不易擴展。當一個文件被刪除時,會留下一塊空缺,如果新文件的大小小於該空缺的大小,可以將其放置在空缺中。但如果新文件的大小大於所有空缺的總大小,即使磁碟上有足夠的空閑空間,也無法存放該文件。在這種情況下,我們可以通過移動已有文件來騰出空間以容納新文件,但是磁碟上的文件移動是非常耗時的,因此這種方式並不太實際。

image

另一個問題是文件長度擴展不方便。例如,在上述圖示中,如果文件A需要擴大,就需要更多的磁碟空間。然而,唯一的辦法就是通過移動文件來騰出足夠的空間,而這種方式的效率非常低下。

那麼有沒有更好的方式來解決上面的問題呢?確實,為瞭解決連續分配方式的問題,可以採用非連續空間存放方式,如鏈式存儲、索引存儲和組織表等方式。這些方式可以剋服連續分配方式的空間碎片和文件長度擴展不方便的問題。那這種非連續的分配方式我們下回講解!

總結

本文主要討論了操作系統中文件系統的實現和分配方式。首先介紹了虛擬文件系統(VFS)作為中間層,統一了不同文件系統的介面。然後介紹了文件的物理結構,包括文件塊和邏輯塊之間的映射關係。接著詳細討論了連續分配方式的特點和優缺點,包括順序訪問和隨機訪問的效率,以及磁碟空間碎片和文件長度擴展不方便的問題。為了知識的消化理解,本章留下的問題我們下一章再詳細講下!


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • ## 背景 - 需要對Excel進行讀取和寫入,目前使用Dotnet6開發環境,故直接使用。 - 達到的效果:相容`.xls`和`.xlsx`,識別行為空自動跳過,識別顯示值,識別格式內容 ## 步驟 - `Dotnet 6`Nuget 安裝 `NPOI`, 具體版本 `2.6.1`,tips: 搜 ...
  • # Unity UGUI的Dropdown(下拉菜單)組件的介紹及使用 ## 1. 什麼是Dropdown組件? Dropdown(下拉菜單)是Unity UGUI中的一個常用組件,用於在用戶點擊或選擇時顯示一個下拉菜單,提供多個選項供用戶選擇。 ## 2. Dropdown組件的工作原理 Drop ...
  • 上篇文章講述了[C#委托和事件知識點](http://mp.weixin.qq.com/s?__biz=MzI2NDE1MDE1MQ==&mid=2650851553&idx=1&sn=b1c601eaf4bb4f2898cbd418fa0ae426&chksm=f1456509c632ec1f8f ...
  • 基本屬性: 屬性 說明 描述 Color 設置陰影效果背景色 Color="Red" ShadowDepth 設置陰影的偏移度 ShadowDepth="5" Direction 設置陰影的角度 Direction="-45" BlurRadius 設置陰影模糊程度 BlurRadius="20" ...
  • [toc] # Linux運維工程師面試題(7) > 祝各位小伙伴們早日找到自己心儀的工作。 > 持續學習才不會被淘汰。 > 地球不爆炸,我們不放假。 > 機會總是留給有有準備的人的。 > 加油,打工人! ## 1 常用的 ansible 模塊有哪些 - Ping - Command - Shell ...
  • 1.禁用swap分區 swapoff -a && sysctl -w vm.swappiness=0 sed -ri '/^[^#]*swap/s@^@#@' /etc/fstab grep swap /etc/fstab 2. 禁用防火牆和selinux 2.1禁用防火牆,網路管理,郵箱 1 sy ...
  • 《Linux內核設計與實現(第三版)》中所用的內核版本為2.6.34,這個版本太舊了,在高版本系統中編譯各種不支持,所以選了Ubuntu 14.04進行編譯。 編譯準備 編譯環境:Ubuntu 14.04 GCC版本:4.8.4 編譯的內核版本:Linux 2.6.34 內核源碼下載:https:/ ...
  • 最近在進行免殺的學習,在《黑客免殺攻防》這本書中找到了非常好的關於PE文件的描述,雖然書比較古老的,但是裡面的內容是非常精細和優秀的。它的附頁中有非常清晰的PE文件結構圖,可是翻看比較麻煩,撕下來又可惜,於是我今天對著附頁的圖用excel重新畫了一個。這些工作我平時做的比較少,所以消耗了比較久的時間 ...
一周排行
    -Advertisement-
    Play Games
  • 示例項目結構 在 Visual Studio 中創建一個 WinForms 應用程式後,項目結構如下所示: MyWinFormsApp/ │ ├───Properties/ │ └───Settings.settings │ ├───bin/ │ ├───Debug/ │ └───Release/ ...
  • [STAThread] 特性用於需要與 COM 組件交互的應用程式,尤其是依賴單線程模型(如 Windows Forms 應用程式)的組件。在 STA 模式下,線程擁有自己的消息迴圈,這對於處理用戶界面和某些 COM 組件是必要的。 [STAThread] static void Main(stri ...
  • 在WinForm中使用全局異常捕獲處理 在WinForm應用程式中,全局異常捕獲是確保程式穩定性的關鍵。通過在Program類的Main方法中設置全局異常處理,可以有效地捕獲並處理未預見的異常,從而避免程式崩潰。 註冊全局異常事件 [STAThread] static void Main() { / ...
  • 前言 給大家推薦一款開源的 Winform 控制項庫,可以幫助我們開發更加美觀、漂亮的 WinForm 界面。 項目介紹 SunnyUI.NET 是一個基於 .NET Framework 4.0+、.NET 6、.NET 7 和 .NET 8 的 WinForm 開源控制項庫,同時也提供了工具類庫、擴展 ...
  • 說明 該文章是屬於OverallAuth2.0系列文章,每周更新一篇該系列文章(從0到1完成系統開發)。 該系統文章,我會儘量說的非常詳細,做到不管新手、老手都能看懂。 說明:OverallAuth2.0 是一個簡單、易懂、功能強大的許可權+可視化流程管理系統。 有興趣的朋友,請關註我吧(*^▽^*) ...
  • 一、下載安裝 1.下載git 必須先下載並安裝git,再TortoiseGit下載安裝 git安裝參考教程:https://blog.csdn.net/mukes/article/details/115693833 2.TortoiseGit下載與安裝 TortoiseGit,Git客戶端,32/6 ...
  • 前言 在項目開發過程中,理解數據結構和演算法如同掌握蓋房子的秘訣。演算法不僅能幫助我們編寫高效、優質的代碼,還能解決項目中遇到的各種難題。 給大家推薦一個支持C#的開源免費、新手友好的數據結構與演算法入門教程:Hello演算法。 項目介紹 《Hello Algo》是一本開源免費、新手友好的數據結構與演算法入門 ...
  • 1.生成單個Proto.bat內容 @rem Copyright 2016, Google Inc. @rem All rights reserved. @rem @rem Redistribution and use in source and binary forms, with or with ...
  • 一:背景 1. 講故事 前段時間有位朋友找到我,說他的窗體程式在客戶這邊出現了卡死,讓我幫忙看下怎麼回事?dump也生成了,既然有dump了那就上 windbg 分析吧。 二:WinDbg 分析 1. 為什麼會卡死 窗體程式的卡死,入口門檻很低,後續往下分析就不一定了,不管怎麼說先用 !clrsta ...
  • 前言 人工智慧時代,人臉識別技術已成為安全驗證、身份識別和用戶交互的關鍵工具。 給大家推薦一款.NET 開源提供了強大的人臉識別 API,工具不僅易於集成,還具備高效處理能力。 本文將介紹一款如何利用這些API,為我們的項目添加智能識別的亮點。 項目介紹 GitHub 上擁有 1.2k 星標的 C# ...