MySQL鎖與事務隔離級別

来源:https://www.cnblogs.com/ZekiChen/archive/2020/02/16/12311915.html
-Advertisement-
Play Games

1、概述 (1)鎖的定義 鎖是電腦協調多個進程或線程併發訪問某一資源的機制。 在資料庫中,除了傳統的計算資源(如CPU、RAM、IO等)的爭用以外,數據也是一種供需要用戶共用的資源。如何保證數據併發訪問的一致性、有效性是所有資料庫必須解決的一個問題,鎖衝突也是影響資料庫併發訪問性能的一個重要因素。 ...


1、概述

(1)鎖的定義

鎖是電腦協調多個進程或線程併發訪問某一資源的機制。

在資料庫中,除了傳統的計算資源(如CPU、RAM、IO等)的爭用以外,數據也是一種供需要用戶共用的資源。如何保證數據併發訪問的一致性、有效性是所有資料庫必須解決的一個問題,鎖衝突也是影響資料庫併發訪問性能的一個重要因素。從這個角度來說,鎖對資料庫而言顯得尤其重要,也更加複雜。

(2)鎖的分類

  • 從性能上分為樂觀鎖悲觀鎖

樂觀鎖:每次去拿數據的時候都認為別人不會修改,所以不會上鎖,但是在更新的時候會判斷一下在此期間別人有沒有去更新這個數據。

例子:① 在資料庫的表中加一個version欄位,用來記錄每次修改數據的版本號,防止併發修改數據出錯;② CAS原子類。

悲觀鎖:每次去拿數據的時候都認為別人會修改,所以每次在拿數據的時候都會上鎖,這樣別人想拿這個數據就會阻塞直到它拿到鎖。

例子:synchronized關鍵字。

  • 從對資料庫操作的類型分為讀鎖寫鎖(都屬於悲觀鎖)

讀鎖(共用鎖):針對同一份數據,多個讀操作可以同時進行而不會互相影響。

寫鎖(排它鎖):當前寫操作沒有完成前,它會阻斷其他session的寫鎖和讀鎖。(session:資料庫連接)

  • 從對數據操作的粒度分為表鎖行鎖

2、表鎖與行鎖

(1)表鎖(偏讀

表鎖偏向MyISAM存儲引擎,開銷小,加鎖快,無死鎖,鎖定粒度大,發生鎖衝突的概率最高,併發度最低。

1)基本操作

  • 建表SQL

CREATE TABLE `mylock` (
  `id` int(11) NOT NULL AUTO_INCREMENT COMMENT '主鍵id',
  `name` varchar(20) DEFAULT NULL COMMENT '名稱',
  PRIMARY KEY (`id`)
) ENGINE=MyISAM DEFAULT CHARSET=utf8

  • 插入數據

insert into `mylock` (`id`, `name`) values('1','a');
insert into `mylock` (`id`, `name`) values('2','b');
insert into `mylock` (`id`, `name`) values('3','c');
insert into `mylock` (`id`, `name`) values('4','d');

  • 手動增加表鎖

lock table 表名稱 read(write), 表名稱2 read(write)

  • 查看表上過的鎖

show open tables

  • 刪除表鎖

unlock tables

2)案例分析(加讀鎖)

當前session和其他session都可以讀該表。

當前session中插入或者更新鎖定的表都會報錯,其他session插入或更新則會等待。

3)案例分析(加寫鎖)

當前session對該表的增刪改查都沒問題,其他session對該表的索引操作被阻塞。

4)案例結論

MyISAM在執行查詢語句前,會自動給涉及的所有表加讀鎖,在執行增刪改操作前,會自動給涉及的表加寫鎖

① 對MyISAM表的讀操作(加讀鎖),不會阻塞其他進程對同一表的讀請求,但會阻塞對同一表的寫請求。只有當讀鎖釋放後,才會執行其他進程的寫操作。

② 對MyISAM表的寫操作(加寫鎖),會阻塞其他進程對同一表的讀和寫操作,只有當寫鎖釋放後,才會執行其他進程的讀寫操作。

總結讀鎖會阻塞寫,但不會阻塞讀。而寫鎖會阻塞讀和寫

(2)行鎖(偏寫

行鎖偏向InnoDB存儲引擎,開銷大,加鎖慢,會出現死鎖,鎖定粒度最小,發生鎖衝突的概率最低,併發度也最高。InnoDB和MYISAM的最大不同有兩點:① 支持事務;② 採用了行級鎖

1)行鎖支持事務

  • 事務(Transaction)及其ACID屬性

事務是由一組SQL語句組成的邏輯處理單元,事務具有以下4個屬性,通常簡稱為事務的ACID屬性。

原子性(Atomicity):事務是一個原子操作單元,其對數據的修改,要麼全部執都執行,要麼全都不執行。

一致性(Consistent):在事務開始和完成時,數據都必須保持一致狀態。這意味著所有相關的數據規則都必須應用於事務的修改,以保持數據的完整性;事務結束時,所有的內部數據結構(如B樹索引或雙向鏈表)也都必須是正確的。

隔離性(Isolation):資料庫系統提供一定的隔離機制,保證事務在不受外部併發操作影響的“獨立”環境執行。這意味著事務處理過程中的中間狀態對外部是不可見的,反之亦然。

持久性(Durable):事務完成之後,它對於數據的修改是永久性的,即使出現系統故障也能夠保持。

  • 併發事務處理帶來的問題

(溫馨提示:以下部分理論解釋看不懂沒關係,接著往下看,有例子)

更新丟失(Lost Update):當兩個或多個事務選擇同一行,然後基於最初選定的值更新該行時,由於每個事務都不知道其他事務的存在,就會發生丟失更新問題-最後的更新覆蓋了由其他事務所做的更新。(可以用類似樂觀鎖的方案解決)

臟讀(Dirty Reads):一個事務正在對一條記錄做修改,在這個事務完成並提交前,這條記錄的數據就處於不一致的狀態;這時,另一個事務也來讀取同一條記錄,如果不加控制,第二個事務讀取了這些“臟”數據,並據此做進一步的處理,就會產生未提交的數據依賴關係。這種現象被形象的叫做“臟讀”。

一句話:事務A讀取到了事務B已經修改但尚未提交的數據,還在這個數據基礎上做了操作。此時,如果B事務回滾,A讀取的數據無效,不符合一致性的要求。

不可重覆讀(Non-Repeatable Reads):一個事務在讀取某些數據後的某個時間,再次讀取以前讀過的數據,卻發現其讀出的數據已經發生了改變、或某些記錄已經被刪除了!這種現象就叫做“不可重覆讀”。

一句話:事務A讀取到了事務B已經提交的修改數據,不符合隔離性。

幻讀(Phantom Reads):一個事務按相同的查詢條件重新讀取以前檢索過的數據,卻發現其他事務插入了滿足其查詢條件的新數據,這種現象就稱為“幻讀”。

一句話:事務A讀取到了事務B已經提交的新增數據,不符合隔離性。

  • 事務的隔離級別

“臟讀”、“不可重覆讀”、“幻讀”,其實都是資料庫讀一致性問題,必須由資料庫提供一定的事務隔離機制來解決

資料庫的事務隔離級別越嚴格,併發副作用越小,但付出的性能代價也就越大,因為事務隔離實質上就是使事務在一定程度上“串列化”進行,這顯然與“併發”是矛盾的。

查看當前數據的事務隔離級別:show variables like 'tx_isolation'

設置事務隔離級別:set tx_isolation='REPEATABLE-READ'

MySQL預設的隔離級別是可重覆讀

2)行鎖案例分析

  • 用下麵的表演示,需要開啟事務,session_1更新某一行,session_2同時更新某一行將被阻塞,但是更新其他行正常

3)隔離級別案例分析

CREATE TABLE `account` (
  `id` int(11) NOT NULL AUTO_INCREMENT COMMENT '主鍵id',
  `name` varchar(255) DEFAULT NULL COMMENT '名稱',
  `balance` int(11) DEFAULT NULL COMMENT '金額',
  PRIMARY KEY (`id`)
) ENGINE=InnoDB AUTO_INCREMENT=4 DEFAULT CHARSET=utf8

insert into `account` (`id`, `name`, `balance`) values('1','lilei','450');
insert into `account` (`id`, `name`, `balance`) values('2','hanmei','16000');
insert into `account` (`id`, `name`, `balance`) values('3','lucy','2400');

① 讀未提交:

a. 打開一個客戶端A,並設置當前事務隔離級別為read uncommitted(讀未提交),set tx_isolation='read-uncommitted',查詢account表的初始值:

b. 在客戶端A的事務提交之前,打開另一個客戶端B,並設置當前事務隔離級別為read uncommitted,更新account表:

c. 這時,雖然客戶端B的事務還沒提交,但是客戶端A就可以查詢到B已經更新的數據:

d. 一旦客戶端B的事務因為某種原因回滾,所有的操作都將會被撤銷,那客戶端A查詢到的數據其實就是臟數據:

e. 臟數據展現:在客戶端A執行更新語句update account set balance=balance-50 where id=1,lilei的balance沒有變成350,而是400,數據不一致,因為在這過程中,並不知道客戶端B會話回滾了,行數據實際上是450,450-50=400,可以採用讀已提交的隔離級別。

② 讀已提交:

a. 打開一個客戶端A,並設置當前事務隔離級別為read committed(讀已提交),set tx_isolation='read-committed',查詢account表的初始值:

b. 在客戶端A的事務提交之前,打開另一個客戶端B,並設置當前事務隔離級別為read committed,更新account表:

c. 這時,客戶端B的事務還沒提交,客戶端A不能查詢到B已經更新的數據,解決了臟讀的問題:

d. 客戶端B的事務提交:

e. 客戶端A執行與上一步相同的查詢,結果與上一步不一致,即產生了不可重覆讀的問題。

③ 可重覆讀

a. 打開一個客戶端A,並設置當前事務隔離級別為repeatable read(可重覆讀),set tx_isolation='repeatable-read',查詢account表的初始值:

b. 在客戶端A的事務提交之前,打開另一個客戶端B,並設置當前事務隔離級別為repeatable read,更新account表:

c. 在客戶端A查詢account表的所有記錄,與步驟a的查詢結果一致,沒有出現不可重覆讀的問題。

d. 在客戶端A執行update account set balance=balance-50 where id=1,balance沒有變成350-50=300,lilei的balance值用的是步驟b中的300來算的,所以是250,數據的一致性倒是沒有被破壞。可重覆讀的隔離級別下使用了MVCC機制,select操作不會更新版本號,是快照讀(歷史版本);insert、update和delete會更新版本號,是當前讀(當前版本)

e. 重新打開客戶端B,插入一條新數據後提交:

f. 在客戶端A查詢account表的所有記錄,沒有查出新增數據,所以沒有出現幻讀:

g. 驗證幻讀:在客戶端A執行update account set balance=666 where id=4;能更新成功,再次查詢能查到客戶端B新增的數據:

 ④ 串列化

a. 打開一個客戶端A,並設置當前事務隔離級別為serializable(串列化),set tx_isolation='serializable',查詢account表的初始值:

b. 打開一個客戶端B,並設置當前事務隔離級別為serializable,插入一條記錄報錯,表被鎖了插入失敗,MySQL中事務隔離級別為serializable時會鎖表,因此不會出現幻讀的情況,但這種隔離級別併發性能極低,開發中很少會用到

提問:MySQL預設級別是repeatable-read,有辦法解決幻讀問題嗎?

間隙鎖在某些情況下可以解決幻讀問題。要避免幻讀可以用間隙鎖在session_1下麵執行update account set name='Zeki' where id>3 and id<=20,則其他session沒法插入這個範圍內的數據。

InnoDB的行鎖是針對索引加的鎖,不是針對記錄加的鎖。並且該索引不能失效,否則都會從行鎖升級為表鎖

無索引行鎖升級為表鎖:varchar如果不加 ' ',將導致系統自動轉換類型,行鎖變表鎖,例如:update table set name=Zeki where id=1,這個語句會導致行鎖變表鎖,其他session無法對這個表做操作,5.7之後的版本這樣寫SQL會報錯。

鎖定某一行還可以用lock in share mode(共用鎖)和for update(排他鎖),例如:select * from table where id=1 for update,這樣其他session只能讀這行數據,修改則會被阻塞,直到鎖定行的session提交。

4)案例結論

InnoDB存儲引擎由於實現了行級鎖定,雖然在鎖定機制的實現方面所帶來的性能損耗可能比表級鎖定會要更高一下,但是在整體併發處理能力方面要遠遠優於MyISAM的表級鎖定的。當系統併發量高的時候,InnoDB的整體性能和MyISAM相比就會有比較明顯的優勢了。但是,InnoDB的行級鎖同樣也有其脆弱的一面,當我們使用不當的時候,可能會讓InnoDB的整體性能表現不僅不能比MyISAM高,甚至可能會更差。

5)行鎖分析

通過檢查InnoDB_row_lock狀態變數來分析系統上的行鎖的爭奪情況:show status like 'innodb_row_lock%'

6)死鎖

set tx_isolation='repeatable-read';

session_1執行:select * from account where id=1 for update;

session_2執行:select * from account where id=2 for update;

session_1執行:select * from account where id=2 for update;

session_2執行:select * from account where id=1 for update;

查看近期死鎖日誌信息:show engine innodb status\G

大多數情況MySQL可以自動檢查死鎖並回滾產生死鎖的那個事務,但是有些情況MySQL無法自動檢測死鎖。

7)優化建議

  • 儘可能讓所有數據檢索都通過索引來完成,避免無索引行鎖升級為表鎖
  • 合理設計索引,儘量縮小鎖的範圍
  • 儘可能減少檢索條件,避免間隙鎖
  • 儘量控制事務大小,減少鎖定資源量和時間長度
  • 儘可能降低事務隔離級別

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 1 #!/bin/bash 2 # @Author: HanWei 3 # @Date: 2020-02-14 18:51:37 4 # @Last Modified by: HanWei 5 # @Last Modified time: 2020-02-14 18:51:37 6 # @E-mai ...
  • 一、環境 VMWare+Centos7 二、寫在前面的話 安裝GCC最簡單的方式當然是【yum -y install gcc】但是我的機器上安裝下來後,其版本是4.8.5,感覺有點低,所以想升級一下(7.2.0, 8.2.0之類的版本)。於是需要手動安裝。 三、吃過的坑 1. 本地沒有GCC導致編譯 ...
  • rpm可以實現程式的快速,簡單安裝(跟編譯安裝比),但是rpm自己不能解決依賴,所以很多工具為了自動解決依賴應運而生,其中yum就是其中之一。 yum解決依賴的辦法: 必須有個文件伺服器,裡面放置所以的rpm包,以及包的相關元數據( qi, qR得到的數據)。元數據可以使用 來創建。並放置在repo ...
  • 1 DHCP伺服器簡介 DHCP(Dynamic Host Configuration Protocol),動態主機配置協議,DHCP 協議主要是用來自動為區域網中的客戶機分配TCP/IP 信息的網路協議,並完成每台客戶機的TCP/IP 協議配置。當我們將區域網中客戶機IP地址設置為動態獲取方式時, ...
  • 實驗環境:centos7 註:因為本次實驗在同一臺伺服器上,Apache與Nginx同為80埠,所以改Apache埠為60 1 配置Nginx伺服器: 編輯Nginx配置文件,寫入以下內容 location ~ \.php$ { 所有以.php結尾的文件,前面\代表轉義 proxy_pass h ...
  • 很多人都有寫博客的習慣,奈何國內的博客網站正在一家家地關閉與重整,部分博客網站也充斥著太多的廣告,使用體驗非常不好。對於愛寫博客的朋友來說,其實還有一個更好的選擇,那就是自己搭建一個博客。 ...
  • 前言 年過30惶惶不安,又逢疫情,還是不斷學習,強化自己的能力。hadoop的視頻和書籍在15年的時候就看過,但是一直沒動手實踐過,要知道技術不經過實戰,一點提升也沒有。因此下定決心邊學邊做,希望能有所收穫。 軟體版本介紹 virtualbox 6.1 centos7 hadoop 3.2.1 jd ...
  • 1 查詢指定欄位 在 employee 表找出所有員工的姓名、性別和電子郵箱。 SELECT 表示查詢,隨後列出需要返回的欄位,欄位間逗號分隔 FROM 表示要從哪個表中進行查詢 分號為語句結束符 這種查詢表中指定欄位的操作在關係運算中被稱為投影(Projection) 使用 SELECT 子句進行 ...
一周排行
    -Advertisement-
    Play Games
  • 概述:在C#中,++i和i++都是自增運算符,其中++i先增加值再返回,而i++先返回值再增加。應用場景根據需求選擇,首碼適合先增後用,尾碼適合先用後增。詳細示例提供清晰的代碼演示這兩者的操作時機和實際應用。 在C#中,++i 和 i++ 都是自增運算符,但它們在操作上有細微的差異,主要體現在操作的 ...
  • 上次發佈了:Taurus.MVC 性能壓力測試(ap 壓測 和 linux 下wrk 壓測):.NET Core 版本,今天計劃準備壓測一下 .NET 版本,來測試並記錄一下 Taurus.MVC 框架在 .NET 版本的性能,以便後續持續優化改進。 為了方便對比,本文章的電腦環境和測試思路,儘量和... ...
  • .NET WebAPI作為一種構建RESTful服務的強大工具,為開發者提供了便捷的方式來定義、處理HTTP請求並返迴響應。在設計API介面時,正確地接收和解析客戶端發送的數據至關重要。.NET WebAPI提供了一系列特性,如[FromRoute]、[FromQuery]和[FromBody],用 ...
  • 原因:我之所以想做這個項目,是因為在之前查找關於C#/WPF相關資料時,我發現講解圖像濾鏡的資源非常稀缺。此外,我註意到許多現有的開源庫主要基於CPU進行圖像渲染。這種方式在處理大量圖像時,會導致CPU的渲染負擔過重。因此,我將在下文中介紹如何通過GPU渲染來有效實現圖像的各種濾鏡效果。 生成的效果 ...
  • 引言 上一章我們介紹了在xUnit單元測試中用xUnit.DependencyInject來使用依賴註入,上一章我們的Sample.Repository倉儲層有一個批量註入的介面沒有做單元測試,今天用這個示例來演示一下如何用Bogus創建模擬數據 ,和 EFCore 的種子數據生成 Bogus 的優 ...
  • 一、前言 在自己的項目中,涉及到實時心率曲線的繪製,項目上的曲線繪製,一般很難找到能直接用的第三方庫,而且有些還是定製化的功能,所以還是自己繪製比較方便。很多人一聽到自己畫就害怕,感覺很難,今天就分享一個完整的實時心率數據繪製心率曲線圖的例子;之前的博客也分享給DrawingVisual繪製曲線的方 ...
  • 如果你在自定義的 Main 方法中直接使用 App 類並啟動應用程式,但發現 App.xaml 中定義的資源沒有被正確載入,那麼問題可能在於如何正確配置 App.xaml 與你的 App 類的交互。 確保 App.xaml 文件中的 x:Class 屬性正確指向你的 App 類。這樣,當你創建 Ap ...
  • 一:背景 1. 講故事 上個月有個朋友在微信上找到我,說他們的軟體在客戶那邊隔幾天就要崩潰一次,一直都沒有找到原因,讓我幫忙看下怎麼回事,確實工控類的軟體環境複雜難搞,朋友手上有一個崩潰的dump,剛好丟給我來分析一下。 二:WinDbg分析 1. 程式為什麼會崩潰 windbg 有一個厲害之處在於 ...
  • 前言 .NET生態中有許多依賴註入容器。在大多數情況下,微軟提供的內置容器在易用性和性能方面都非常優秀。外加ASP.NET Core預設使用內置容器,使用很方便。 但是筆者在使用中一直有一個頭疼的問題:服務工廠無法提供請求的服務類型相關的信息。這在一般情況下並沒有影響,但是內置容器支持註冊開放泛型服 ...
  • 一、前言 在項目開發過程中,DataGrid是經常使用到的一個數據展示控制項,而通常表格的最後一列是作為操作列存在,比如會有編輯、刪除等功能按鈕。但WPF的原始DataGrid中,預設只支持固定左側列,這跟大家習慣性操作列放最後不符,今天就來介紹一種簡單的方式實現固定右側列。(這裡的實現方式參考的大佬 ...