MySql 學習之 一條查詢sql的執行過程

来源:https://www.cnblogs.com/gusluo/archive/2019/08/15/11250863.html
-Advertisement-
Play Games

相信大家都接觸過Mysql資料庫,而且也肯定都會寫sql。我不知道大家有沒有這樣的感受,反正我是有過這樣的想法。就是當我把一條sql語句寫完了,並且執行完得到想要的結果。這時我就在想為什麼我寫這樣的一條sql語句,就能給我查詢出我想要的結果,為什麼我寫了update就能更新一條語句?它們的執行過程是 ...


  相信大家都接觸過Mysql資料庫,而且也肯定都會寫sql。我不知道大家有沒有這樣的感受,反正我是有過這樣的想法。就是當我把一條sql語句寫完了,並且執行完得到想要的結果。這時我就在想為什麼我寫這樣的一條sql語句,就能給我查詢出我想要的結果,為什麼我寫了update就能更新一條語句?它們的執行過程是什麼樣的?它們的原理是什麼?那麼接下來我就來談談這個。

select * from user where id=6

上面這條查詢語句非常簡單,就是查詢一個id為6的用戶信息。那麼它的執行流程是怎麼樣的?別急,咱們先看一張圖,

根據上面的圖,咱們一步一步來分析。從圖中可以看出整個執行過程大致可以分為兩部分,分別是server層和引擎層。

server層中又分為連接器、分析器、查詢緩存、優化器以及執行器幾部分。

引擎層則是主要負責存儲數據,提供讀寫介面。

那麼接下來從頭開始分析。

1、連接器

首先要操作資料庫,那麼必須得連接上資料庫,所以這時候就用到了連接器。當你輸入 “mysql -h$ip -P$埠 -u$登錄名 -p ” 時就表示要進行連接資料庫了,然後輸入密碼進行連接。如果密碼或者用戶名錯了,則會報如下錯誤:

ERROR 1045 (28000): Access denied for user 'root'@'localhost' (using password: YES)

如果輸入用戶名和密碼正確,那麼連接器接下來就去許可權表中查詢你登錄用戶所擁有的許可權,之後此用戶操作數據的許可權判斷邏輯都將依賴查詢到的許可權。哪怕你修改了此用戶的許可權也還是沒用,必須重新新建連接,修改的許可權才會生效。

另外說到這裡就順便提一下,客戶端連接mysql伺服器時,如果連接一直處於空閑狀態,那麼到了一定的時候就會斷開連接,多長時間是由 wait_timeout 控制的,其預設是8個小時。如果超過8個小時,你執行操作資料庫時就回提示 “Lost connection to MySQL server during query”,這時只有重新連接資料庫方能進行操作。

說到連接器,咱們得說一下長連接和短鏈接。長連接就是如果客戶端一直都有請求操作資料庫,那麼就會一直使用這個連接進行操作。短鏈接就是每次執行完很少的資料庫操作就斷開連接了,如果再有請求就必須重新連接。

所以這裡建議減少資料庫的連接操作,儘量使用長連接。但是長時間使用長連接會導致一個問題,那就是mysql的占用的記憶體會越來越大,甚至到最後可能會出現OOM情況,導致mysql異常重啟,那麼這就尷尬了。

針對上面的情況有兩種解決辦法:

(1)、定期斷開長連接,或者斷開一些查詢占用記憶體比較大的操作的連接,釋放資源。

(2)、如果是5.7及以上版本,可以使用 mysql_reset_connection 來重置連接,但是需要註意以下幾點

  • 活躍事務會被回滾,自動提交模式也會被重置;
  • 釋放所有表鎖;
  • 關閉&刪除所有臨時表;
  • 會話變數(選項)被重置成和全局變數一致;
  • 用戶級變數丟失;
  • PREPARE語句會被釋放(其相應的HANDLER也會被關閉);
  • LAST_INSERT_ID值重置為0;
  • 利用GET_LOCK獲取的鎖會被釋放。

以上是mysql官微給出的解釋,所以重置連接的時候以上因素,以免對資料庫中的數據產生影響。

 

2、查詢緩存

客戶端連接成功mysql伺服器後,執行上面的一條sql時,首先會去緩存中查詢是否有數據,如果有數據,那麼直接把數據返回給客戶端,後面的步驟都省略了。它的原理怎樣的呢?請接著往下看,一條查詢sql的首次執行完成後,會把sql語句作為key,把查詢出來的數據作為value放入到緩存中,如果後面再有相同的查詢,那麼直接從緩存中取值便可。

看到這裡也許你們會想緩存這麼好用,那以後要多用緩存。別急,請接著往下看。查詢緩存用起來確實好用,但是它有一個弊端,那就是當這個表做了更新操作時,那麼此表的緩存將會全部清空。也許當你辛辛苦苦緩存起來的數據,還沒來得及用時就可能被一條update語句給全部幹掉。

所以如果更新比較頻繁的表是不適合使用緩存的,如果是某些配置表倒是比較適合緩存的使用。

在mysql中的查詢語句使不使用緩存時看query_cache_type的值,當為0時關閉緩存,當為1時表示開啟緩存,當為2(DEMAND)時表示只有在sql語句中帶有 SQL_CACHE  關鍵字才會使用緩存,如下sql

select SQL_CACHE * from user where id=6

不過需要註意的一點是 mysql 8.0 版本已經把緩存功能完全移除,所以這一塊需要註意一下。

3、分析器

當執行一條查詢sql時,會優先取查詢緩存,如果緩存中沒有數據,那麼便會開始sql的真正的執行流程。首先是分析器,其主要就是對sql語句進行 “詞法分析” 和 “語法分析”。

詞法分析 就是對sql中的單詞進行逐個的分析,比如 從 select 可以識別出要執行查詢操作,user則是識別成表user,id則識別成user表中欄位id。

語法分析就是分析整條sql是否符合mysql的語句,比如 你故意把sql中的 where 後面不跟條件,那麼語法就肯定會問題,那麼此時就會給你提示 “You have an error in your SQL syntax; check the manual that corresponds to your MySQL server version for the right syntax to use near '' at line 1” 。如果給出類似的提示,那麼基本就是語法錯了,那就得仔細檢查一下寫的sql語句了。

4、優化器

經過了分析器這一層,那麼接下來就要進入優化器了。從分析器中我們已經知道這條sql是要執行更新還是查詢操作。那麼優化器便是要對這條sq執行之前l進行優化處理,有哪些優化處理呢?例如 某表有多個索引的時候 決定用哪一個索引;或者多關聯(join)查詢的時候,決定關聯的順序。比如下麵一條sql

select * from user u join  score s using(ID)  where u.id=10 and s.scores=60;

上面一條 sql 可以分為兩種情況

  • 既可以先從表user裡面取出id=10的記錄的ID值,再根據ID值關聯到表socre,再判斷score表裡scores的值是否等於20。
  • 也可以先從表score裡面取出scores=20的記錄的ID值,再根據ID值關聯到user,再判斷user表裡面id的值是否等於10。

這兩種方案得出的結果是一樣的,但是執行的效率是不一樣的,而優化器作用便是從中選擇一個方案。

5、執行器

當優化器選擇好了方案,那麼便進入執行器階段,這時候就要開始執行sql了。執行sql前要查詢一下你對需要操作的表是否有對應的操作許可權,如果沒有操作許可權,則會給出提示 “ERROR 1142 (42000): SELECT command denied to user 'b'@'localhost' for table 'XXX‘ “ 。

如果有對應表的操作許可權,那麼便打開表繼續執行,執行器會根據定義的表的引擎,來執行引擎提供的對應讀寫的介面,mysql 5.5版本之後 預設的引擎為 InnoDB。

其大致流程如下:(假如 id 是沒有索引的)

  1. 調用InnoDB引擎介面取這個表的第一行,判斷ID值是不是6,如果不是則跳過,如果是則將這行存在結果集中;

  2. 調用引擎介面取“下一行”,重覆相同的判斷邏輯,直到取到這個表的最後一行。

  3. 執行器將上述遍歷過程中所有滿足條件的行組成的記錄集作為結果集返回給客戶端。

如果是 id 是有索引的,第一次調用的是“取滿足條件的第一行”這個介面,之後迴圈取“滿足條件的下一行”這個介面,基本和上面差不多。這些介面都是引擎中已經定義好的。

至此 一條 sql 便執行完成。

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 請使用0.9以後的版本: 示例代碼 1、只需要配置kafka的server groupid autocommit 序列化 autooffsetreset(其中 bootstrap.server group.id key.deserializer value.deserializer 必須指定); 2 ...
  • https://www.cnblogs.com/wanglg/p/3740129.html 來自此文 僅做備忘 感謝提供信息讓我處理好此問題 sqlserver mdf向上相容附加資料庫(無法打開資料庫 'xxxxx' 版本 611。請將該資料庫升級為最新版本。) 最近工作中有一個sqlserver ...
  • mysql MySQL語法MySQL採用結構化查詢語言SQL (Structured Query Language)語言來操作資料庫SQL語句必須以 ; 結束SQL語句分類DDL(數據定義語言): create、drop、alter、truncateDQL(數據查詢語言): select、showD ...
  • 安裝參考 https://www.cnblogs.com/onezg/p/8768597.html 安裝參考 https://www.cnblogs.com/onezg/p/8768597.html 我當時安裝的是Oracle 12c Release 1(Version 12.1.0.1.0,64位 ...
  • 既然程式最終都被變成了一條條機器碼去執行,那為什麼同一個程式,在同一臺電腦上,在Linux下可以運行,而在Windows下卻不行呢? 反過來,Windows上的程式在Linux上也是一樣不能執行的 可是我們的CPU並沒有換掉,它應該可以識別同樣的指令呀!!! 如果你和我有同樣的疑問,那這一節,我們 ...
  • 一、相關文檔老規矩,為了避免我的解釋誤導大家,請大家務必通過官網瞭解一波SQL SERVER的相關功能。文檔地址:整體介紹文檔:https://docs.microsoft.com/en-us/sql/relational-databases/track-changes/about-change-t... ...
  • 用Google搜異常信息,肯定都訪問過 "Stack Overflow網站" 全球最大的程式員問答網站,名字來自於一個常見的報錯,就是棧溢出(stack overflow) 從函數調用開始,在電腦指令層面函數間的相互調用是怎麼實現的,以及什麼情況下會發生棧溢出 1 棧的意義 先看一個簡單的C程式 ...
  • 1、關閉防火牆 systemctl stop firewalld.service 停止firewall systemctl disable firewalld.service 禁止firewall開機啟動 2、切換用戶 3、編輯靜默安裝文件 4、修改配置文件 以下參數不要更改 [GENERAL] R ...
一周排行
    -Advertisement-
    Play Games
  • 前言 在我們開發過程中基本上不可或缺的用到一些敏感機密數據,比如SQL伺服器的連接串或者是OAuth2的Secret等,這些敏感數據在代碼中是不太安全的,我們不應該在源代碼中存儲密碼和其他的敏感數據,一種推薦的方式是通過Asp.Net Core的機密管理器。 機密管理器 在 ASP.NET Core ...
  • 新改進提供的Taurus Rpc 功能,可以簡化微服務間的調用,同時可以不用再手動輸出模塊名稱,或調用路徑,包括負載均衡,這一切,由框架實現並提供了。新的Taurus Rpc 功能,將使得服務間的調用,更加輕鬆、簡約、高效。 ...
  • 順序棧的介面程式 目錄順序棧的介面程式頭文件創建順序棧入棧出棧利用棧將10進位轉16進位數驗證 頭文件 #include <stdio.h> #include <stdbool.h> #include <stdlib.h> 創建順序棧 // 指的是順序棧中的元素的數據類型,用戶可以根據需要進行修改 ...
  • 前言 整理這個官方翻譯的系列,原因是網上大部分的 tomcat 版本比較舊,此版本為 v11 最新的版本。 開源項目 從零手寫實現 tomcat minicat 別稱【嗅虎】心有猛虎,輕嗅薔薇。 系列文章 web server apache tomcat11-01-官方文檔入門介紹 web serv ...
  • C總結與剖析:關鍵字篇 -- <<C語言深度解剖>> 目錄C總結與剖析:關鍵字篇 -- <<C語言深度解剖>>程式的本質:二進位文件變數1.變數:記憶體上的某個位置開闢的空間2.變數的初始化3.為什麼要有變數4.局部變數與全局變數5.變數的大小由類型決定6.任何一個變數,記憶體賦值都是從低地址開始往高地 ...
  • 如果讓你來做一個有狀態流式應用的故障恢復,你會如何來做呢? 單機和多機會遇到什麼不同的問題? Flink Checkpoint 是做什麼用的?原理是什麼? ...
  • C++ 多級繼承 多級繼承是一種面向對象編程(OOP)特性,允許一個類從多個基類繼承屬性和方法。它使代碼更易於組織和維護,並促進代碼重用。 多級繼承的語法 在 C++ 中,使用 : 符號來指定繼承關係。多級繼承的語法如下: class DerivedClass : public BaseClass1 ...
  • 前言 什麼是SpringCloud? Spring Cloud 是一系列框架的有序集合,它利用 Spring Boot 的開發便利性簡化了分散式系統的開發,比如服務註冊、服務發現、網關、路由、鏈路追蹤等。Spring Cloud 並不是重覆造輪子,而是將市面上開發得比較好的模塊集成進去,進行封裝,從 ...
  • class_template 類模板和函數模板的定義和使用類似,我們已經進行了介紹。有時,有兩個或多個類,其功能是相同的,僅僅是數據類型不同。類模板用於實現類所需數據的類型參數化 template<class NameType, class AgeType> class Person { publi ...
  • 目錄system v IPC簡介共用記憶體需要用到的函數介面shmget函數--獲取對象IDshmat函數--獲得映射空間shmctl函數--釋放資源共用記憶體實現思路註意 system v IPC簡介 消息隊列、共用記憶體和信號量統稱為system v IPC(進程間通信機制),V是羅馬數字5,是UNI ...