MySQL鎖與事務隔離級別

来源:https://www.cnblogs.com/ZekiChen/archive/2020/02/16/12311915.html
-Advertisement-
Play Games

1、概述 (1)鎖的定義 鎖是電腦協調多個進程或線程併發訪問某一資源的機制。 在資料庫中,除了傳統的計算資源(如CPU、RAM、IO等)的爭用以外,數據也是一種供需要用戶共用的資源。如何保證數據併發訪問的一致性、有效性是所有資料庫必須解決的一個問題,鎖衝突也是影響資料庫併發訪問性能的一個重要因素。 ...


1、概述

(1)鎖的定義

鎖是電腦協調多個進程或線程併發訪問某一資源的機制。

在資料庫中,除了傳統的計算資源(如CPU、RAM、IO等)的爭用以外,數據也是一種供需要用戶共用的資源。如何保證數據併發訪問的一致性、有效性是所有資料庫必須解決的一個問題,鎖衝突也是影響資料庫併發訪問性能的一個重要因素。從這個角度來說,鎖對資料庫而言顯得尤其重要,也更加複雜。

(2)鎖的分類

  • 從性能上分為樂觀鎖悲觀鎖

樂觀鎖:每次去拿數據的時候都認為別人不會修改,所以不會上鎖,但是在更新的時候會判斷一下在此期間別人有沒有去更新這個數據。

例子:① 在資料庫的表中加一個version欄位,用來記錄每次修改數據的版本號,防止併發修改數據出錯;② CAS原子類。

悲觀鎖:每次去拿數據的時候都認為別人會修改,所以每次在拿數據的時候都會上鎖,這樣別人想拿這個數據就會阻塞直到它拿到鎖。

例子:synchronized關鍵字。

  • 從對資料庫操作的類型分為讀鎖寫鎖(都屬於悲觀鎖)

讀鎖(共用鎖):針對同一份數據,多個讀操作可以同時進行而不會互相影響。

寫鎖(排它鎖):當前寫操作沒有完成前,它會阻斷其他session的寫鎖和讀鎖。(session:資料庫連接)

  • 從對數據操作的粒度分為表鎖行鎖

2、表鎖與行鎖

(1)表鎖(偏讀

表鎖偏向MyISAM存儲引擎,開銷小,加鎖快,無死鎖,鎖定粒度大,發生鎖衝突的概率最高,併發度最低。

1)基本操作

  • 建表SQL

CREATE TABLE `mylock` (
  `id` int(11) NOT NULL AUTO_INCREMENT COMMENT '主鍵id',
  `name` varchar(20) DEFAULT NULL COMMENT '名稱',
  PRIMARY KEY (`id`)
) ENGINE=MyISAM DEFAULT CHARSET=utf8

  • 插入數據

insert into `mylock` (`id`, `name`) values('1','a');
insert into `mylock` (`id`, `name`) values('2','b');
insert into `mylock` (`id`, `name`) values('3','c');
insert into `mylock` (`id`, `name`) values('4','d');

  • 手動增加表鎖

lock table 表名稱 read(write), 表名稱2 read(write)

  • 查看表上過的鎖

show open tables

  • 刪除表鎖

unlock tables

2)案例分析(加讀鎖)

當前session和其他session都可以讀該表。

當前session中插入或者更新鎖定的表都會報錯,其他session插入或更新則會等待。

3)案例分析(加寫鎖)

當前session對該表的增刪改查都沒問題,其他session對該表的索引操作被阻塞。

4)案例結論

MyISAM在執行查詢語句前,會自動給涉及的所有表加讀鎖,在執行增刪改操作前,會自動給涉及的表加寫鎖

① 對MyISAM表的讀操作(加讀鎖),不會阻塞其他進程對同一表的讀請求,但會阻塞對同一表的寫請求。只有當讀鎖釋放後,才會執行其他進程的寫操作。

② 對MyISAM表的寫操作(加寫鎖),會阻塞其他進程對同一表的讀和寫操作,只有當寫鎖釋放後,才會執行其他進程的讀寫操作。

總結讀鎖會阻塞寫,但不會阻塞讀。而寫鎖會阻塞讀和寫

(2)行鎖(偏寫

行鎖偏向InnoDB存儲引擎,開銷大,加鎖慢,會出現死鎖,鎖定粒度最小,發生鎖衝突的概率最低,併發度也最高。InnoDB和MYISAM的最大不同有兩點:① 支持事務;② 採用了行級鎖

1)行鎖支持事務

  • 事務(Transaction)及其ACID屬性

事務是由一組SQL語句組成的邏輯處理單元,事務具有以下4個屬性,通常簡稱為事務的ACID屬性。

原子性(Atomicity):事務是一個原子操作單元,其對數據的修改,要麼全部執都執行,要麼全都不執行。

一致性(Consistent):在事務開始和完成時,數據都必須保持一致狀態。這意味著所有相關的數據規則都必須應用於事務的修改,以保持數據的完整性;事務結束時,所有的內部數據結構(如B樹索引或雙向鏈表)也都必須是正確的。

隔離性(Isolation):資料庫系統提供一定的隔離機制,保證事務在不受外部併發操作影響的“獨立”環境執行。這意味著事務處理過程中的中間狀態對外部是不可見的,反之亦然。

持久性(Durable):事務完成之後,它對於數據的修改是永久性的,即使出現系統故障也能夠保持。

  • 併發事務處理帶來的問題

(溫馨提示:以下部分理論解釋看不懂沒關係,接著往下看,有例子)

更新丟失(Lost Update):當兩個或多個事務選擇同一行,然後基於最初選定的值更新該行時,由於每個事務都不知道其他事務的存在,就會發生丟失更新問題-最後的更新覆蓋了由其他事務所做的更新。(可以用類似樂觀鎖的方案解決)

臟讀(Dirty Reads):一個事務正在對一條記錄做修改,在這個事務完成並提交前,這條記錄的數據就處於不一致的狀態;這時,另一個事務也來讀取同一條記錄,如果不加控制,第二個事務讀取了這些“臟”數據,並據此做進一步的處理,就會產生未提交的數據依賴關係。這種現象被形象的叫做“臟讀”。

一句話:事務A讀取到了事務B已經修改但尚未提交的數據,還在這個數據基礎上做了操作。此時,如果B事務回滾,A讀取的數據無效,不符合一致性的要求。

不可重覆讀(Non-Repeatable Reads):一個事務在讀取某些數據後的某個時間,再次讀取以前讀過的數據,卻發現其讀出的數據已經發生了改變、或某些記錄已經被刪除了!這種現象就叫做“不可重覆讀”。

一句話:事務A讀取到了事務B已經提交的修改數據,不符合隔離性。

幻讀(Phantom Reads):一個事務按相同的查詢條件重新讀取以前檢索過的數據,卻發現其他事務插入了滿足其查詢條件的新數據,這種現象就稱為“幻讀”。

一句話:事務A讀取到了事務B已經提交的新增數據,不符合隔離性。

  • 事務的隔離級別

“臟讀”、“不可重覆讀”、“幻讀”,其實都是資料庫讀一致性問題,必須由資料庫提供一定的事務隔離機制來解決

資料庫的事務隔離級別越嚴格,併發副作用越小,但付出的性能代價也就越大,因為事務隔離實質上就是使事務在一定程度上“串列化”進行,這顯然與“併發”是矛盾的。

查看當前數據的事務隔離級別:show variables like 'tx_isolation'

設置事務隔離級別:set tx_isolation='REPEATABLE-READ'

MySQL預設的隔離級別是可重覆讀

2)行鎖案例分析

  • 用下麵的表演示,需要開啟事務,session_1更新某一行,session_2同時更新某一行將被阻塞,但是更新其他行正常

3)隔離級別案例分析

CREATE TABLE `account` (
  `id` int(11) NOT NULL AUTO_INCREMENT COMMENT '主鍵id',
  `name` varchar(255) DEFAULT NULL COMMENT '名稱',
  `balance` int(11) DEFAULT NULL COMMENT '金額',
  PRIMARY KEY (`id`)
) ENGINE=InnoDB AUTO_INCREMENT=4 DEFAULT CHARSET=utf8

insert into `account` (`id`, `name`, `balance`) values('1','lilei','450');
insert into `account` (`id`, `name`, `balance`) values('2','hanmei','16000');
insert into `account` (`id`, `name`, `balance`) values('3','lucy','2400');

① 讀未提交:

a. 打開一個客戶端A,並設置當前事務隔離級別為read uncommitted(讀未提交),set tx_isolation='read-uncommitted',查詢account表的初始值:

b. 在客戶端A的事務提交之前,打開另一個客戶端B,並設置當前事務隔離級別為read uncommitted,更新account表:

c. 這時,雖然客戶端B的事務還沒提交,但是客戶端A就可以查詢到B已經更新的數據:

d. 一旦客戶端B的事務因為某種原因回滾,所有的操作都將會被撤銷,那客戶端A查詢到的數據其實就是臟數據:

e. 臟數據展現:在客戶端A執行更新語句update account set balance=balance-50 where id=1,lilei的balance沒有變成350,而是400,數據不一致,因為在這過程中,並不知道客戶端B會話回滾了,行數據實際上是450,450-50=400,可以採用讀已提交的隔離級別。

② 讀已提交:

a. 打開一個客戶端A,並設置當前事務隔離級別為read committed(讀已提交),set tx_isolation='read-committed',查詢account表的初始值:

b. 在客戶端A的事務提交之前,打開另一個客戶端B,並設置當前事務隔離級別為read committed,更新account表:

c. 這時,客戶端B的事務還沒提交,客戶端A不能查詢到B已經更新的數據,解決了臟讀的問題:

d. 客戶端B的事務提交:

e. 客戶端A執行與上一步相同的查詢,結果與上一步不一致,即產生了不可重覆讀的問題。

③ 可重覆讀

a. 打開一個客戶端A,並設置當前事務隔離級別為repeatable read(可重覆讀),set tx_isolation='repeatable-read',查詢account表的初始值:

b. 在客戶端A的事務提交之前,打開另一個客戶端B,並設置當前事務隔離級別為repeatable read,更新account表:

c. 在客戶端A查詢account表的所有記錄,與步驟a的查詢結果一致,沒有出現不可重覆讀的問題。

d. 在客戶端A執行update account set balance=balance-50 where id=1,balance沒有變成350-50=300,lilei的balance值用的是步驟b中的300來算的,所以是250,數據的一致性倒是沒有被破壞。可重覆讀的隔離級別下使用了MVCC機制,select操作不會更新版本號,是快照讀(歷史版本);insert、update和delete會更新版本號,是當前讀(當前版本)

e. 重新打開客戶端B,插入一條新數據後提交:

f. 在客戶端A查詢account表的所有記錄,沒有查出新增數據,所以沒有出現幻讀:

g. 驗證幻讀:在客戶端A執行update account set balance=666 where id=4;能更新成功,再次查詢能查到客戶端B新增的數據:

 ④ 串列化

a. 打開一個客戶端A,並設置當前事務隔離級別為serializable(串列化),set tx_isolation='serializable',查詢account表的初始值:

b. 打開一個客戶端B,並設置當前事務隔離級別為serializable,插入一條記錄報錯,表被鎖了插入失敗,MySQL中事務隔離級別為serializable時會鎖表,因此不會出現幻讀的情況,但這種隔離級別併發性能極低,開發中很少會用到

提問:MySQL預設級別是repeatable-read,有辦法解決幻讀問題嗎?

間隙鎖在某些情況下可以解決幻讀問題。要避免幻讀可以用間隙鎖在session_1下麵執行update account set name='Zeki' where id>3 and id<=20,則其他session沒法插入這個範圍內的數據。

InnoDB的行鎖是針對索引加的鎖,不是針對記錄加的鎖。並且該索引不能失效,否則都會從行鎖升級為表鎖

無索引行鎖升級為表鎖:varchar如果不加 ' ',將導致系統自動轉換類型,行鎖變表鎖,例如:update table set name=Zeki where id=1,這個語句會導致行鎖變表鎖,其他session無法對這個表做操作,5.7之後的版本這樣寫SQL會報錯。

鎖定某一行還可以用lock in share mode(共用鎖)和for update(排他鎖),例如:select * from table where id=1 for update,這樣其他session只能讀這行數據,修改則會被阻塞,直到鎖定行的session提交。

4)案例結論

InnoDB存儲引擎由於實現了行級鎖定,雖然在鎖定機制的實現方面所帶來的性能損耗可能比表級鎖定會要更高一下,但是在整體併發處理能力方面要遠遠優於MyISAM的表級鎖定的。當系統併發量高的時候,InnoDB的整體性能和MyISAM相比就會有比較明顯的優勢了。但是,InnoDB的行級鎖同樣也有其脆弱的一面,當我們使用不當的時候,可能會讓InnoDB的整體性能表現不僅不能比MyISAM高,甚至可能會更差。

5)行鎖分析

通過檢查InnoDB_row_lock狀態變數來分析系統上的行鎖的爭奪情況:show status like 'innodb_row_lock%'

6)死鎖

set tx_isolation='repeatable-read';

session_1執行:select * from account where id=1 for update;

session_2執行:select * from account where id=2 for update;

session_1執行:select * from account where id=2 for update;

session_2執行:select * from account where id=1 for update;

查看近期死鎖日誌信息:show engine innodb status\G

大多數情況MySQL可以自動檢查死鎖並回滾產生死鎖的那個事務,但是有些情況MySQL無法自動檢測死鎖。

7)優化建議

  • 儘可能讓所有數據檢索都通過索引來完成,避免無索引行鎖升級為表鎖
  • 合理設計索引,儘量縮小鎖的範圍
  • 儘可能減少檢索條件,避免間隙鎖
  • 儘量控制事務大小,減少鎖定資源量和時間長度
  • 儘可能降低事務隔離級別

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 1 #!/bin/bash 2 # @Author: HanWei 3 # @Date: 2020-02-14 18:51:37 4 # @Last Modified by: HanWei 5 # @Last Modified time: 2020-02-14 18:51:37 6 # @E-mai ...
  • 一、環境 VMWare+Centos7 二、寫在前面的話 安裝GCC最簡單的方式當然是【yum -y install gcc】但是我的機器上安裝下來後,其版本是4.8.5,感覺有點低,所以想升級一下(7.2.0, 8.2.0之類的版本)。於是需要手動安裝。 三、吃過的坑 1. 本地沒有GCC導致編譯 ...
  • rpm可以實現程式的快速,簡單安裝(跟編譯安裝比),但是rpm自己不能解決依賴,所以很多工具為了自動解決依賴應運而生,其中yum就是其中之一。 yum解決依賴的辦法: 必須有個文件伺服器,裡面放置所以的rpm包,以及包的相關元數據( qi, qR得到的數據)。元數據可以使用 來創建。並放置在repo ...
  • 1 DHCP伺服器簡介 DHCP(Dynamic Host Configuration Protocol),動態主機配置協議,DHCP 協議主要是用來自動為區域網中的客戶機分配TCP/IP 信息的網路協議,並完成每台客戶機的TCP/IP 協議配置。當我們將區域網中客戶機IP地址設置為動態獲取方式時, ...
  • 實驗環境:centos7 註:因為本次實驗在同一臺伺服器上,Apache與Nginx同為80埠,所以改Apache埠為60 1 配置Nginx伺服器: 編輯Nginx配置文件,寫入以下內容 location ~ \.php$ { 所有以.php結尾的文件,前面\代表轉義 proxy_pass h ...
  • 很多人都有寫博客的習慣,奈何國內的博客網站正在一家家地關閉與重整,部分博客網站也充斥著太多的廣告,使用體驗非常不好。對於愛寫博客的朋友來說,其實還有一個更好的選擇,那就是自己搭建一個博客。 ...
  • 前言 年過30惶惶不安,又逢疫情,還是不斷學習,強化自己的能力。hadoop的視頻和書籍在15年的時候就看過,但是一直沒動手實踐過,要知道技術不經過實戰,一點提升也沒有。因此下定決心邊學邊做,希望能有所收穫。 軟體版本介紹 virtualbox 6.1 centos7 hadoop 3.2.1 jd ...
  • 1 查詢指定欄位 在 employee 表找出所有員工的姓名、性別和電子郵箱。 SELECT 表示查詢,隨後列出需要返回的欄位,欄位間逗號分隔 FROM 表示要從哪個表中進行查詢 分號為語句結束符 這種查詢表中指定欄位的操作在關係運算中被稱為投影(Projection) 使用 SELECT 子句進行 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...