多版本併發控制 MVCC

来源:https://www.cnblogs.com/feiyu2/archive/2022/09/14/mvcc.html
-Advertisement-
Play Games

介紹多版本併發控制 多版本併發控制技術(Multiversion Concurrency Control,MVCC) 技術是為瞭解決問題而生的,通過 MVCC 我們可以解決以下幾個問題: 讀寫之間阻塞的問題:通過 MVCC 可以讓讀寫互相不阻塞,即讀不阻塞寫,寫不阻塞讀,這樣就可以提升事務併發處理能 ...


介紹多版本併發控制

多版本併發控制技術(Multiversion Concurrency Control,MVCC)

技術是為瞭解決問題而生的,通過 MVCC 我們可以解決以下幾個問題:

  1. 讀寫之間阻塞的問題:通過 MVCC 可以讓讀寫互相不阻塞,即讀不阻塞寫,寫不阻塞讀,這樣就可以提升事務併發處理能力。
  2. 降低了死鎖的概率:這是因為 MVCC 沒有使用鎖,讀取數據時並不需要加鎖,對於寫操作,也只鎖定必要的行。
  3. 解決一致性讀的問題:一致性讀也被稱為快照讀,當我們查詢資料庫在某個時間點的快照時,只能看到這個時間點之前事務提交更新的結果,而不能看到這個時間點之後事務提交更新的結果。

MVCC 的思想

MVCC 是通過數據行的歷史版本來實現資料庫的併發控制。

簡單來說 MVCC 的思想就是保存數據的歷史版本。這樣一個事務進行查詢操作時,就可以通過比較版本號來判斷哪個較新的版本對當前事務可見。

InnoDB 對 MVCC 的實現

MVCC 沒有正式的標準,所以在不同的 DBMS 中,MVCC 的實現方式可能是不同的。

InnoDB 對 MVCC 的實現主要是通過 版本鏈 + ReadView 結構完成。

版本鏈存儲記錄的多個版本

先介紹聚簇索引記錄的隱藏列,再介紹 Undo Log 版本鏈


對於使用 InnoDB 存儲引擎的表來說,它的聚簇索引記錄中都包含 3 個隱藏列

  1. db_row_id:隱藏的行 ID。在沒有自定義主鍵也沒有 Unique 鍵的情況下,會使用該隱藏列作為主鍵。
  2. db_trx_id:操作這個數據的事務 ID,也就是最後一個對該數據進行插入或更新的事務 ID。
  3. db_roll_ptr:回滾指針,也就是指向這個記錄的 Undo Log 信息。Undo Log 中存儲了回滾需要的數據。

事務ID

事務執行過程中,只有在第一次真正修改記錄時(比如進行 insert、delete、update 操作),才會被分配一個唯一的、單調遞增的事務 ID,如果沒有修改記錄操作,按照一定的策略分配一個比較大的事務 ID,減少分配事務 ID 的鎖競爭。每當事務向資料庫寫入新內容時, 所寫的數據都會被標記操作所屬的事務的事務ID。


在 InnoDB 存儲引擎中,版本鏈由數據行的 Undo Log 組成。

每次對數據行進行修改,都會將舊值記錄到 Undo Log,算是該數據行的一個舊版本。

Undo Log 有兩個重要的屬性:db_roll_ptr、db_trx_id

  • Undo Log 也有一個 db_roll_ptr 屬性(insert 操作對應的 Undo Log 沒有 db_roll_ptr 屬性,因為 insert 操作對應的數據行沒有更早的版本),Undo Log 的 db_roll_ptr 屬性指向上一次操作的 Undo Log,所有的版本被 db_roll_ptr 屬性連接形成一個鏈表。該鏈表即版本鏈,版本鏈的頭節點就是數據行的最新值。

  • Undo Log 還包含生成該版本時,對應的事務 ID,用於判斷當前版本的數據對事務的可見性。

版本鏈如下圖所示。這樣如果我們想要查找歷史快照,就可以通過遍歷回滾指針的方式進行查找。

file

ReadView 判斷版本鏈中的哪個較新的版本對當前事務是可見的

ReadView 用來判斷版本鏈中的哪個較新的版本對當前事務是可見的。

ReadView 中主要包含 4 個比較重要的屬性:

  • m_ids:表示在生成 ReadView 時,當前系統中所有活躍的讀寫事務的 ID 集合(列表)
  • min_transaction_id:表示在生成 ReadView 時,m_ids 中的最小值
  • max_transaction_id:表示在生成 ReadView 時,系統應該分配給下一個事務的 ID 值
  • creator_transaction_id:表示生成該 ReadView 的事務的 ID

有了這個 ReadView,這樣在訪問某條記錄時,就可以用 ReadView 來判斷版本鏈中的哪個較新的版本對當前事務是可見的。

  • 如果被訪問版本的 transaction_id 屬性值與 ReadView 中的 creator_trx_id 值相同,表明當前事務在訪問它自己修改過的記錄,所以該版本可以被當前事務訪問。

  • 如果被訪問版本的 transaction_id 屬性值 小於 ReadView 中的 min_trx_id 值,表明生成該版本的事務在當前事務生成 ReadView 前已經提交了,所以該版本可以被當前事務訪問。

  • 如果被訪問版本的 transaction_id 屬性值 大於 ReadView 中的 max_trx_id 值,表明生成該版本的事務在當前事務生成 ReadView 後才開啟,所以該版本不可以被當前事務訪問。

  • 如果被訪問版本的 transaction_id 屬性值在 ReadView 的 min_trx_id 和 max_trx_id 之間,那就需要判斷一下 transaction_id 屬性值是不是在 m_ids 列表中:

    • 如果在,表明生成 ReadView 時,被訪問版本的事務還是活躍的,所以該版本不可以被當前事務訪問
    • 如果不在,表明生成 ReadView 時,被訪問版本的事務已經被提交了,所以該版本可以被當前事務訪問

如果某個版本的數據對當前事務不可見的話,那就順著版本鏈找到下一個版本的數據,繼續按照上邊的步驟判斷

可見性,依此類推,直到版本鏈中的最後一個版本。如果最後一個版本也不可見的話,那麼就意味著該條記錄對當前事務完全不可見,查詢結果就不包含該記錄。

ReadView 的生成時機

MVCC 可以防止臟讀,也可以防止不可重覆讀。

防止臟讀 和 防止不可重覆讀 實現的不同之處就在:ReadView 的生成時機不同

  • 防止臟讀:每次讀取數據前,都生成一個 ReadView
  • 防止不可重覆讀:在當前事務第一次讀取數據時,生成一個 ReadView,之後的查詢操作都重覆使用這個 ReadView

對於隔離級別為 讀未提交 的事務來說,直接讀取記錄的最新版本即可。

對於隔離級別為 串列化 的事務來說,InnoDB 存儲引擎使用加鎖的方式來訪問記錄。

對於隔離級別為 讀已提交 和 可重覆讀 的事務來說,都必須保證只能讀到已經提交的事務修改的數據,不能讀到未提交的事務修改的數據。

參考資料

MySQL 是怎樣運行的:從根兒上理解 MySQL - 小孩子4919 - 掘金課程 (juejin.cn)

本文來自博客園,作者:真正的飛魚,轉載請註明原文鏈接:https://www.cnblogs.com/feiyu2/p/mvcc.html


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 一、argparse簡介 argparse 是 python 自帶的命令行參數解析包,可以用來方便的服務命令行參數,使用之前需要先導入包 import argparse 二、簡單案例 簡單使用,創建一個名為test.py的文件 # 導入 argparse 模塊 import argparse # 創 ...
  • 在實際業務中,當後臺數據發生變化,客戶端能夠實時的收到通知,而不是由用戶主動的進行頁面刷新才能查看,這將是一個非常人性化的設計 ...
  • 【Shashlik.EventBus】.NET 事件匯流排,分散式事務最終一致性 簡介 github https://github.com/dotnet-shashlik/shashlik.eventbus 各位爺高興了給個star唄。 分散式事務、CAP定理、事件匯流排,在當前微服務、分散式、集群大行 ...
  • 閱讀須知:本文為入門介紹、指引文章,所示代碼皆為最簡易(或僅為實現功能)的演示示例版本,不一定切實符合個人(企業)實際開發需求。 一、DbContext生存期 DbContext 的生存期從創建實例時開始,併在釋放實例時結束。 DbContext 實例旨在用於單個工作單元。這意味著 DbContex ...
  • 1. 文件系統:用來存儲、組織、管理文件的一套方式、協議 2. 文件 文件的屬性:i-node唯一表示一個文件的存在與否 文件的內容 3. Linux系統如何實現文件的操作? 硬體層: inode(屬性) >文件的內容 Linux內核: struct inode{}用來描述一個文件的屋裡inode的 ...
  • 前言 想必在linux上寫過程式的同學都有分析進程占用多少記憶體的經歷,或者被問到這樣的問題——你的程式在運行時占用了多少記憶體(物理記憶體)? 通常我們可以通過top命令查看進程占用了多少記憶體。這裡我們可以看到VIRT、RES和SHR三個重要的指標,他們分別代表什麼意思呢? 這是本文需要跟大家一起探討的 ...
  • 近日,騰訊雲MySQL發佈新架構,在基礎硬體能力、自研內核及外部網路延遲等方面進行了全面升級。 在探究新版本實際性能的過程中,測試人員通過基準測試工具SysBench以及全模擬業務生產環境,分別針對只寫、只讀以及混合讀寫場景進行性能測試。其結果顯示,新架構下的雲資料庫MySQL在性能上比原有架構提升 ...
  • 摘要:不要歪了,我這裡說特性它不是 bug,而是故意設計的機制或語法,你有可能天天寫語句或許還沒發現原來還能這樣用,沒關係我們一起學下漲姿勢。 本文分享自華為雲社區《【雲駐共創】天天寫 SQL,你遇到了哪些神奇的特性?》,作者: 龍哥手記 。 一 SQL 的第一個神奇特性 日常開發我們經常會對錶進行 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...