SQL Server 文件和文件組

来源:https://www.cnblogs.com/ljhdo/archive/2018/05/16/4588372.html
-Advertisement-
Play Games

資料庫是數據的倉庫,用於存儲數據,而存儲數據需要媒介,現在的存儲媒介,最常用的是硬碟,土豪一點的伺服器使用固態硬碟(SSD),特殊用途的伺服器使用記憶體。資料庫最常用的存儲文件是數據文件和日誌文件,數據文件用於存儲數據,由一個主數據文件(.mdf)和若幹個輔助數據文件(.ndf)構成;日誌文件用於存儲 ...


資料庫是數據的倉庫,用於存儲數據,而存儲數據需要媒介,現在的存儲媒介,最常用的是硬碟,土豪一點的伺服器使用固態硬碟(SSD),特殊用途的伺服器使用記憶體。資料庫最常用的存儲文件是數據文件和日誌文件,數據文件用於存儲數據,由一個主數據文件(.mdf)和若幹個輔助數據文件(.ndf)構成;日誌文件用於存儲事物日誌,由.ldf文件構成。不同的文件可以存分佈到不同的物理硬碟上,這樣便於分散硬碟IO,提高數據的讀取速度。

數據文件的組合,稱作文件組(File Group),資料庫不能直接設置存儲數據的數據文件,而是通過文件組來指定。

一,文件組和文件的作用

SQL Server的數據存儲在文件中,文件是實際存儲數據的物理實體,文件組是邏輯對象,SQL Server通過文件組來管理文件。

 

一個資料庫有一個或多個文件組,主文件組(Primary File Group)是系統自動創建的,用戶可以根據需要添加文件組。每一個文件組管理一個或多個文件,其中主文件組中包含主數據文件(master data file),擴展名是.mdf,這個文件是系統預設生成的,並且在資料庫中是唯一的;輔助文件的擴展名是.ndf,是用戶根據需要添加的。主文件組中也可以包含輔助文件,除了主文件組之外,其他文件組只能包含輔助文件。

例如,查看示例資料庫的文件組,Primary 是住文件組,勾選Default表示住文件組是預設的文件組,這意味著,如果在create table和create index中沒有指定FileGroup選項,那麼SQL Server將使用預設的文件組來存儲數據。

文件組是一個邏輯實體,實際上,數據存儲在文件中(.mdf和.ndf)中,每一個文件組中都包含文件,因此,在create table和create index命令中指定文件組,那麼數據就會存儲到文件組包含的文件中。

從上圖中可以看到,資料庫文件的元數據:

  • Logical Name是數據文件的邏輯名稱,用於數據壓縮 DBCC ShrinkFile等;
  • 資料庫文件有兩種類型:Rows Data(存儲數據)和Log(存儲日誌),
  • Initial Size是文件的初始大小,
  • Autogrowth表示文件自動增加的大小,Maxsize是文件大小的最大值,
  • Path參數表示文件的路徑,
  • File Name是文件的物理名稱,邏輯名稱和物理名可以是不同的。

用戶也可以使用sys.database_files sys.filegroups 查看數據的文件和文件組的元數據。

二,使用文件組的優勢

在實際開發資料庫的過程中,通常情況下,用戶需要關註文件組,而不用關心文件的物理存儲,即使DBA改變文件的物理存儲,用戶也不會察覺到,也不會影響資料庫去執行查詢。除了邏輯文件和物理文件的分離之外,SQL Server使用文件組還有一個優勢,那就是分散IO負載,其實現的原理是:

  • 對於單分區表,數據只能存到一個文件組中。如果把文件組內的數據文件分佈在不同的物理硬碟上,那麼SQL Server能同時從不同的物理硬碟上讀寫數據,把IO負載分散到不同的硬碟上。
  • 對於多分區表,每個分區使用一個文件組,把不同的數據子集存儲在不同的磁碟上,SQL Server在讀寫某一個分組的數據時,能夠調用不同的硬碟IO。

這兩種方式,其本質上,都是使每個硬碟均攤系統負載,提高IO性能。

創建分區表時,不同的分區可以使用相同的文件組,也可以使用不同的文件組。因此,在設計文件組時,應儘量把包含的文件包含在不同的硬碟上,以實現物理IO的最大分散化。

在創建文件時,伺服器CPU核的數量,決定最大的併發IO度,應該根據CPU 核的數量創建多個文件。通常情況下,文件的數量和CPU核的數量一致,是最優化的設計。

還有,應該根據硬碟的性能來創建文件組,日誌文件存儲到性能最好的硬碟上,而查詢延遲要求高的數據,也需要存儲到性能最好的硬碟上。

不是所有的數據都是同等重要的,應該根據業務需求和查詢延遲,對數據分級,因此,在設計文件組時,應該把級別高的數據分散,而把那些基本用不到的數據存儲到性能差的,用於存儲歸檔數據的硬碟上,以實現伺服器性能的合理配置。

三,指定文件組

在創建表時,在on子句中指定文件組,那麼數據將存儲在該文件組包含的文件中:

CREATE TABLE [dbo].[student](
...
) ON [PRIMARY]

在創建索引時,在on子句指定文件組選項,那麼該表的索引結構將存儲在文件組包含的文件中:

CREATE NONCLUSTERED INDEX [idx_student_stuname] 
ON [dbo].[student]( [stuname] ASC ) 
ON [PRIMARY]

在創建分區時,在TO自居中指定文件組,每一個分區將存儲到文件組中:

REATE PARTITION SCHEME scheme_name
AS PARTITION function_name 
TO ([fg_name1], <....>, [fp_nameN])

四,數據文件大小增長導致的問題

當數據文件爆滿,沒有空間存儲數據時,此時執行insert命令,這會導致數據文件的增長。如果filegrowth選項設置的過大,會導致SQL Server耗費較長時間來實現文件的增長,在數據文件增長時,該文件是不能訪問的,因此,即使用戶僅插入一條數據,也要等待很長時間才能完成查詢,對用戶來說,體驗不友好。

數據文件增長是非常耗費系統資源和影響性能,如果設置SQL Server 自動增長,可能會導致系統性能不夠穩定,所以,應該預測可能的空間使用需求,並提前做好規劃。儘量避免空間用盡而使得SQL Server不得不自動增長的現象發生。同時也要確保每一次自動增長都能夠在可接受的時間內完成,及時滿足客戶端應用的需求。

 

推薦文檔:

文件自動增長和自動收縮sql server


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 本篇總結一下RMAN命令中的DELETE操作,DELETE命令用於刪除RMAN備份記錄以及相應的物理文件。 To delete physical backups and copies as well as do the following: 1: Update their repository re... ...
  • 創建數據表及插入數據 USE [TestPb]GO/****** Object: Table [dbo].[DicRegion] Script Date: 2018/5/16 15:22:30 ******/SET ANSI_NULLS ONGOSET QUOTED_IDENTIFIER ONGOS ...
  • 今天同事發現程式日誌有異常拋出,詢問原因,進過排查發現與java的連接參數有關係,具體處理過程如下: 一、錯誤信息 二、錯誤原因 資料庫版本是5.7.18-log,而程式mysql-connector 庫使用的版本是5.1.43,這裡用最新的mysql-connector-java-5.1.46-b ...
  • 從網上搜的,一點一點加吧。 ...
  • 一、MySQL case when的三種用法: 1.case 欄位 when, 欄位的具體值; 2.case when 欄位,可對欄位進行取值範圍設置; 3.case when 欄位1,欄位2,可對多個欄位進行取值映射; 註:如果兩個條件都針對一個欄位的話,會顯示第一個when的值。 二、具體解釋: ...
  • oracle快速將表緩存到記憶體中,使得訪問速度加快。 共有2種方法: 1)alter table fisher cache; 2)alter table fisher storage(buffer_pool keep); --取消緩存 1)alter table fisher nocache; 2) ...
  • 官網地址:https://dev.mysql.com/downloads/mysql/ 我這裡是RHEL6.5的系統,因此選擇RedHat 6 x86,64bit操作系統 下載第一個RPM Bundle即可--mysql-8.0.11-1.el6.x86_64.rpm-bundle.tar。 目前M ...
  • 註意點:1、redo要是能sesize的話就完美了2、drop時候如果active就得checkpoint才能drop3、物理刪除舊redo文件redo大小影響切換,進而影響性能,至於什麼樣的業務設置多大暫時還不是很確定,正常情況下設置1g-2g就差不多了。另外可能還跟IO有關,因為在切換時候如果I ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...