女朋友說:你要搞懂了MySQL三大日誌,我就讓你嘿嘿嘿!

来源:https://www.cnblogs.com/yidengjiagou/archive/2022/06/30/16428990.html
-Advertisement-
Play Games

MySQL實現事務、崩潰恢復、集群的主從複製,底層都離不開日誌,所以日誌是MySQL的精華所在。只有瞭解MySQL日誌,才算是徹底搞懂MySQL。 今天一燈就帶你深入淺出的學習MySQL的三大日誌系統,Redo Log(重做日誌)、Undo Log(恢復日誌)、Bin Log(備份日誌)。 ...


1. 背景

MySQL實現事務、崩潰恢復、集群的主從複製,底層都離不開日誌,所以日誌是MySQL的精華所在。只有瞭解MySQL日誌,才算是徹底搞懂MySQL。

今天一燈就帶你深入淺出的學習MySQL的三大日誌系統,Redo Log(重做日誌)Undo Log(恢復日誌)Bin Log(備份日誌)

2. Redo Log(重做日誌)

2.1 Redo Log的內容與作用

Redo Log 記錄的是物理日誌,也就是磁碟數據頁的修改。

作用: 用來保證服務崩潰後,仍能把事務中變更的數據持久化到磁碟上。

MySQL事務中持久性就是使用Redo Log實現的。

2.2 什麼時候寫入Redo Log?

  1. 從磁碟載入數據到記憶體
  2. 在記憶體中修改數據
  3. 把新數據寫到Redo Log Buffer
  4. Redo Log Buffer中數據持久化到Redo Log文件中
  5. Redo Log文件中數據持久化到資料庫磁碟中

你可能會問,為什麼需要寫Redo Log BufferRedo Log FIle?直接持久化到磁碟不好嗎?

直接寫磁碟會有產生嚴重的性能問題:

  1. InnoDB在磁碟中存儲的基本單元是頁,可能本次修改只變更一頁中幾個位元組,但是需要刷新整頁的數據,就很浪費資源。

  2. 一個事務可能修改了多頁中的數據,頁之間又是不連續的,就會產生隨機IO,性能更差。

這種方案叫做WAL(Write-Ahead Logging),預寫日誌,就是先寫日誌,再寫磁碟。

2.3 Redo Log刷盤規則

寫入Redo Log Buffer之後,並不會立即持久化到Redo Log FIle,需要等待操作系統調用fsync()操作,才會刷到磁碟上。

具體什麼時候可以把Redo Log Buffer刷到Redo Log FIle中,可以通過innodb_flush_log_at_trx_commit參數配置決定。

參數值 含義
0(延遲寫) 提交事務後,不會立即刷到OS Buffer中,而是等一秒後刷新到OS Buffer並調用fsync()寫入Redo Log FIle,可能會丟失一秒鐘的數據。
1(實時寫 每次提交事務,都會刷新到OS Buffer並調用fsync()寫到Redo Log FIle,性能較差
2(延遲刷新) 每次提交事務只刷新到OS Buffer,一秒後再調用fsync()寫入Redo Log FIle

InnoDB 的Redo Log File是固定大小的。可以配置為每組4個文件,每個文件的大小是 1GB,那麼Redo Log File可以記錄4GB的操作。

採用迴圈寫入覆蓋的方式,write pos記錄開始寫的位置,向後移動。checkpoint記錄將要擦除的位置,也是向後移動。write pos到checkpoint之間的位置,是可寫區域,checkpoint到write pos之間的位置是已寫區域。

3. Undo Log(回滾日誌)

3.1 Undo Log的內容與作用

Undo Log記錄的是邏輯日誌,也就是SQL語句。

比如:當我們執行一條insert語句時,Undo Log就記錄一條相反的delete語句。

作用:

  1. 回滾事務時,恢復到修改前的數據。

  2. 實現 MVCC(多版本併發控制,Multi-Version Concurrency Control)

MySQL事務中原子性就是使用Undo Log實現的。

3.2 Undo Log如何回滾到上一個版本

實現方式通過兩個隱藏列trx_id(最近一次提交事務的ID)和roll_pointer(上個版本的地址),建立一個版本鏈。併在事務中讀取的時候生成一個ReadView(讀視圖),在Read Committed隔離級別下,每次讀取都會生成一個讀視圖,而在Repeatable Read隔離級別下,只會在第一次讀取時生成一個讀視圖。

4. Bin Log(備份日誌)

4.1 Bin Log的內容與作用

Bin Log記錄的是邏輯日誌,即原始的SQL語句,是MySQL自帶的。

作用: 數據備份和主從同步。

Bin Log共有三種日誌格式,可以binlog_format配置參數指定。

參數值 含義
Statement 記錄原始SQL語句,會導致更新時間與原庫不一致。
比如 update_time=now()
Row 記錄每行數據的變化,保證了數據與原庫一致,缺點是數據量較大。
Mixed Statement和Row的混合模式,預設採用Statement模式,涉及日期、函數相關的時候採用Row模式,既減少了數據量,又保證了數據一致性。

4.2 什麼時候寫入Bin Log?

Bin Log採用追加寫入的模式,並不會覆蓋原有日誌,所以可以用來恢復到之前某個時刻的數據。

Bin Log也是採用WAL模式,先寫日誌,再寫磁碟。

至於什麼時候刷新到磁碟,可以sync_binlog配置參數指定。

參數值 含義
0(延遲寫) 每次提交事務都不會刷盤,由系統自己決定什麼時候刷盤,可能會丟失數據。
1(實時寫) 每次提交事務,都會刷盤,性能較差。
N(延遲寫) 提交N個事務後,才會刷盤。

加入寫Bin Log之後的事務流程:

這就是二階段提交的概念,先寫處於prepare狀態的Redo Log,事務提交後,再寫處於commit狀態的Redo Log。

知識點總結:

有了MySQL日誌的基礎,下篇就可以一塊學習MySQL集群和主從同步了。

文章持續更新,可以微信搜一搜「 一燈架構 」第一時間閱讀更多技術乾貨。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 1. Text 的絕對居中 Android中顯示時會有預設的padding保留,導致垂直居中會有誤差 //不寫下麵兩個,Android系統上文字會偏下* includeFontPadding: false, textAlignVertical: "center", Text省略號顯示 <Text n ...
  • 2.兩數相加 給你兩個 非空 的鏈表,表示兩個非負的整數。它們每位數字都是按照 逆序 的方式存儲的,並且每個節點只能存儲 一位 數字。 請你將兩個數相加,並以相同形式返回一個表示和的鏈表。 你可以假設除了數字 0 之外,這兩個數都不會以 0 開頭。 示例 1: 輸入:l1 = [2,4,3], l2 ...
  • 編寫代碼中通常會有快速初始化數組的需求,例如我們需要一個類似matlab里的zeros函數,假如這裡我們需要生成一個0-23的數組用於表示一天24小時。 最基本的做法如下: function(){ let hours = []; for(let k = 0; k < 24; k++ )hours.p ...
  • 視頻鏈接:P8~P29 黑馬程式員pink老師前端入門教程,零基礎必看的h5(html5)+css3+移動 參考鏈接: HTML 元素 1.HTML語法規範 1.1 基本語法概述 HTML 標簽是由尖括弧包圍的關鍵詞,例如<html>。 HTML 標簽 通常成對出現,例如 開始標簽 和 結束標簽 , ...
  • 設計模式,設計模式概述,UML,UML類圖,七大原則,程式設計七大原則 ...
  • 函數聲明 int plus_one(int n) { return n + 1; } 函數聲明的語法有以下幾點,需要註意。 返回值類型 函數聲明時,首先需要給出返回值的類型,上例是int,表示函數plus_one()返回一個整數。 參數 函數名後面的圓括弧裡面,需要聲明參數的類型和參數名,plus_ ...
  • 數組、排序和查找 數組 數組介紹 數組可以存放多個同一類型的數據。數組也是一種數據類型,是引用類型。即:數組就是一組數據 數組快速入門 //1. double[]表示是double類型的數組,數組名hens //2.{3,5,1,3.4,2,50}表示數組的值/元素,依次表示數組的 //第幾個元素 ...
  • ArrayList分析1-迴圈、擴容、版本 轉載請註明出處 https://www.cnblogs.com/funnyzpc/p/16407733.html 前段時間抽空看了下ArrayList的源碼,發現了一些有意思的東東,真的是大受裨益哈,尤其是版本問題😊 所以,本篇博客開始我將大概分三篇講講 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...