MySQL性能優化盲區(高併發情況下,事務內的數據先更新還是先查詢?)

来源:https://www.cnblogs.com/phpphp/p/18074957
-Advertisement-
Play Games

近期看到了一個前阿裡資深開發的學術分析視頻: 高併發情況下,一個事務內有更新操作還有查詢操作,那是先更新好,還是先無鎖查詢好? 僅70秒的視頻,深感學問太深,但是海哥講的有待補充,於是寫下了這篇文章,作為補充。 鳴謝:前阿裡資深開發極海Channel的技術分享。 先說答案 這是個開放性的問題,必須看 ...


近期看到了一個前阿裡資深開發的學術分析視頻:
高併發情況下,一個事務內有更新操作還有查詢操作,那是先更新好,還是先無鎖查詢好?
僅70秒的視頻,深感學問太深,但是海哥講的有待補充,於是寫下了這篇文章,作為補充。

鳴謝:前阿裡資深開發極海Channel的技術分享。

先說答案

這是個開放性的問題,必須看業務場景,拋開業務場景談架構設計,都是耍流氓。

  • 場景1:如果update語句的參數操作依賴於查詢操作,那麼必須先查詢,再更新,否則update語句的參數都湊不齊。
  • 場景2:如果update語句的參數操作不依賴於查詢操作,但兩個操作的是一張表,業務強制要求select獲取的數據必須是最新的,則也需要先更新再讀取。
  • 場景3:以上兩種情況除外,則優先考慮先查詢再更新。

場景1受參數限制,順序毋庸置疑。
場景2受業務限制,順序毋庸置疑。
場景3是為了性能優化,才去選擇的方案。

測試表

CREATE TABLE `cs` (
  `id` int(10) unsigned NOT NULL AUTO_INCREMENT,
  `num` int(10) unsigned NOT NULL DEFAULT '0' COMMENT '數字列',
  PRIMARY KEY (`id`)
) ENGINE=InnoDB AUTO_INCREMENT=4 DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci;

INSERT INTO `temp`.`cs` (`id`, `num`) VALUES (1, 1);
INSERT INTO `temp`.`cs` (`id`, `num`) VALUES (2, 2);
INSERT INTO `temp`.`cs` (`id`, `num`) VALUES (3, 3);


假設場景2的代碼如下:
start transaction;
update cs set num = 13 where id = 1;
SELECT * FROM `cs`;
commit;


場景3的代碼如下:
start transaction;
SELECT * FROM `cs`;
update cs set num = 13 where id = 1;
commit;

對場景2,同一個事務內,先執行update,事務沒提交,能讀取到最新的數據嗎?

能。

步驟 SQL 補充
1 start transaction; 開啟事務
2 select num from cs where id = 1; num值是1
3 update cs set num = 12 where id = 1; 更新num值為12
4 select num from cs where id = 1; num值是12
5 rollback; 回滾事務

都說不加鎖的select是快照讀,為什麼select還能讀取當前事務的最新數據?

根據現象反推,個人認為:
不加鎖的select是快照讀,針對的是事務之外的不加鎖的select,MySQL RR的隔離級別,只要更新的事務未提交,其它事務就讀取不到更改的新數據。
當前事務內的select,就是不加鎖的當前讀(個人稱謂)。當然,真正的當前讀概念是為了保證讀的最新數據,必須加鎖。

對場景3的性能優化原理分析

得知道4個前提:

  1. 場景3的實現,不會影響業務和開發。
  2. 因為select沒有加S或X鎖,所以不會阻塞。
  3. update語句會上X鎖,可能是行鎖、間隙鎖,或者表鎖(受索引、where條件的影響),所以併發請求過來後,其它事務的update有被阻塞的可能。
  4. 用事務,就需要InnoDB引擎,InnoDB引擎支持行級鎖,如果確定update的X鎖,在併發情況下鎖定的範圍沒有交集,這種優化方式起不到作用,這意味著不會阻塞。
  • 如果先更新再查詢:
    分析原理:
    事務A的update語句會上鎖,併發情況下阻塞事務B的update操作,如果事務A的select是個慢查詢,事務A的X鎖釋放需要等到事務提交,而不是update語句本身執行完畢,這就意味著事務A select的環節,X鎖也未釋放,從而阻塞其它事務的update,降低性能。
    實操模擬:
步驟 事務A 事務B 補充
1 start transaction; start transaction; 雙方開啟事務,模擬併發請求
2 update cs set num = 1234 where id = 1; update cs set num = 1234; 兩個不同where範圍的update,模擬線上的場景
3 / 阻塞 事務A的行X鎖,阻塞了事務B的表X鎖
4 select * from cs where id = 1; 阻塞 這一步很重要,優化就是為了避免這一步的阻塞耗時,特別是慢查詢
5 commit; 阻塞 事務A提交
6 / select * from cs where id = 1; 事務A完成,事務B不會再阻塞了
7 / commit; 結束事務B
  • 如果先查詢再更新:
    分析原理:事務A的select語句不會上鎖,此時事務不會導致事務B阻塞,如果執行到事務A執行到update,才回去上X鎖,直到事務提交鎖資源釋放,即使事務A的select是一個慢查詢,也不會加大事務A釋放鎖資源的事件,進而減少事務B的阻塞時間。
    實操模擬:
步驟 事務A 事務B 補充
1 start transaction; start transaction; 雙方開啟事務,模擬併發請求
2 select * from cs where id = 1; select * from cs where id = 1; 兩個事務不加鎖不阻塞,這一步的阻塞時間省了
3 update cs set num = 1234 where id = 1; update cs set num = 1234; 兩個事務更新
4 / 阻塞 兩個X鎖範圍有衝突,阻塞
5 commit; 阻塞 事務A提交
6 / commit; 事務B提交

所以說,只要業務允許,調整SQL語句的執行順序,高併發情況下,就能得到不小的性能提升,但是這一點很容易忽略。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • ASP.NET Core 中的框架中發出大量診斷事件,包括當前請求進入請求完成事件,HttpClient發出收到與響應,EFCore查詢等等。 我們可以利用DiagnosticListener來選擇性地監聽這些事件,然後通過自己的方式組織這些日誌,實現無侵入的分散式跟蹤。 下麵我們通過Diagnos ...
  • 概述:C#中的Attribute(特性)為程式元素提供了靈活的元數據機制。除基礎應用外,可高級應用於自定義代碼生成、AOP等領域。通過示例展示了Attribute在AOP中的實際用途,以及如何通過反射機制獲取並執行與Attribute相關的邏輯。 在C#中,Attribute(特性)是一種用於為程式 ...
  • 概述:.NET中實現數字轉大寫金額可通過現有庫或自定義方法。自定義方法示例使用遞歸將數字分段轉換為中文大寫金額,處理了千、百、十、個位數。實際應用中可根據需求進一步擴展,例如處理小數部分或負數。 在.NET中,你可以使用以下方案之一來實現將數字轉成大寫金額: 使用現有庫: .NET框架中有一些庫已經 ...
  • (適用於.NET/.NET Core/.NET Framework)【目錄】0.前言1.第一個AOP程式2.Aspect橫切麵編程3.一個橫切麵程式攔截多個主程式4.多個橫切麵程式攔截一個主程式5.優勢總結6.展望 0.前言AOP(Aspect Oriented Programming)是“面向橫切 ...
  • 前幾天,點開自己的博客,看了一下 CYQ.Data V5系列 都有哪些文章,發現了一篇2019年寫的:CYQ.Data 對於分散式緩存Redis、MemCache高可用的改進及性能測試,於是點進去看了看。感覺文章中有些表述存有問題,,不過不是重點。 重點,看了裡面的測試結論,如果四五年過去了,CYQ... ...
  • 之前的“性能優化的一般策略及方法”一文中介紹了多種性能優化的方法。根據以往的項目經驗,開啟編譯器優化選項可能是立竿見影、成本最低、效果最好的方式了。 這麼說可能還不夠直觀,舉個真實的例子:我所參與的自動駕駛的項目中,無需修改任何代碼,僅僅增加一個 -O2 選項,進程整體的 CPU loading 可 ...
  • 伺服器部署項目總結 yzh 24/3/15 歡迎查看CSDN的博文https://blog.csdn.net/AN_NI_112/article/details/136749033?spm=1001.2014.3001.5501 前言 本著一定成功的信心去部署前後端分離的項目,結果卻“路遇坎坷” ...
  • IndexedDB是一種在瀏覽器端存儲數據的方式,它豐富了客戶端的查詢方式,由於是本地存儲,可以有效減少網路對頁面數據的影響。這使得瀏覽器可以存儲更多的數據,從而豐富了瀏覽器端的應用類型。 IndexedDB與傳統的關係型資料庫不同,它是一個key-value型的資料庫。其中,value可以是複雜的 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...