系統隱形殺手——阻塞與等待

来源:http://www.cnblogs.com/zhuancloud/archive/2017/01/11/6270711.html
-Advertisement-
Play Games

前言 應用系統承載著大量的業務,隨之而來的是複雜的業務邏輯,在資料庫上的表現就是有著大量的不同種類的SQL語句。 SQL語句執行的快慢又與阻塞等待有著密不可分的原因。 系統慢可能有很多種原因,硬體資源不足,語句不優化,結構設計不合理,缺少必要的運維方式。所有的這些問題都可以在阻塞與等待中看出端倪,發 ...


前言

  應用系統承載著大量的業務,隨之而來的是複雜的業務邏輯,在資料庫上的表現就是有著大量的不同種類的SQL語句。

  SQL語句執行的快慢又與阻塞等待有著密不可分的原因。

  系統慢可能有很多種原因,硬體資源不足,語句不優化,結構設計不合理,缺少必要的運維方式。所有的這些問題都可以在阻塞與等待中看出端倪,發現並解決問題。

  今天這篇我們主要講述怎麼樣發現並解決系統的阻塞和等待。

場景描述

  您的系統是否有這樣的問題?

  1. 系統運行緩慢,很多功能需要幾十秒才能呈現結果,用戶體驗極差,領導們不斷施壓,作為系統的負責人,只知道系統慢又不知道慢在哪裡?我們遲遲不能解決問題,領導已經對我們怨聲載道了或者已經慢習慣了,不再反饋了。
  2. 系統的功能運行緩慢,在生產環境中語句運行時間很長,但是在測試環境或者單獨拿出這條語句運行的卻很快?這好像不科學呀?
  3. 我對數據有較多的瞭解,我能查出系統的等待,但是我不知道這些等待意味著什麼,百度的答案五花八門解決不了我的問題。
  4. 我能找到等待,也能解決這部分等待,但只是通過一些腳本,不能全面瞭解現狀,只能東一錘子西一棒子的游擊戰。
  5. 我是專家問題我都能解決,但不能給領導一個直觀的展現。

系統等待簡介

  一個好的SQL語句就好比一輛時速180的好車,好的系統硬體(CPU,記憶體,磁碟)就好比平坦寬闊的馬路。看似好車配好路,一定可以開的很快了!其實還忽略了一點!當你駕駛一輛法拉利跑在北京寬闊的三環上,就算你是老炮中的“三環十二少“,早高峰你能開到多少? 北京的早高峰!北京的早高峰!

  這個例子就引出了系統阻塞和等待的概念,紅燈(硬體等待,如IO等待),這就是正常的等待。另外一輛車在你前面不走了或開的很慢,那麼你也只能等待(也可以說成你被他阻塞了)!

  一張圖告訴你系統的主要等待類型及解決思路:

  

問題診斷

  任何問題的診斷都要從全局的角度考慮,最忌諱的就是看到一個指標高就冒然定位問題,然後以偏概全的去分析問題。

  一個問題點可能涉及到很多部分,所以我們首先要從全局的角度定位系統問題,阻塞也是一樣,到底系統中存在哪些類型的阻塞,哪些是主因,哪些是關聯原因,哪些是次要的。

  全局定位阻塞與等待  

  首先我們要關心資料庫中有哪些等待類型

  

  註:這部分呈現的是系統中的等待情況,和使用腳本類似,已經排除了不必要關心的類型,同時對等待情況進行歸類統計。

  橫坐標:等待類型

  縱坐標:收集時間段內出現的次數

  

  知道了等到類型,我們要瞭解這些類型中,哪種占用了大量的時間:

  

  註:各種等待類型所等待的時間也是排查的主要方向,結合等待類型與等待時間,我們能瞭解到:系統中有哪些等待,哪些等待比較嚴重,哪個最嚴重。

  橫坐標:等待類型

  縱坐標:平均等待時間

  

  瞭解了主要的等待類型和時間,我們還要分析一下:什麼資料庫來的?哪些程式來的?什麼用戶請求導致的?什麼時間阻塞最嚴重?

  

  

  

  

 

  

  具體語句看等待 

  系統的整體等待情況瞭然於心,下麵我們改看看具體哪些語句造成的等待,這也是解決問題的重要分析步驟。

  哪些語類句等待最頻繁

 

  註:這裡我們可以根據等待次數、等待時間、消耗的各種資源排序,來多維度分析阻塞的語句類型

  

  語句具體的等待情況時怎樣的呢?我們可以通過【原始視圖】查看具體語句在執行過程中的真實阻塞情況

  註:在阻塞的詳細視圖中我們可以清晰的看到語句的阻塞樹,並且可以看到阻塞的語句、時間、資源已經阻塞等待的類型

  阻塞樹:本例中【會話68】被【會話66】阻塞,而【會話66】又被【會話104】阻塞,這樣3個會話就構成了一個阻塞鏈也叫阻塞樹

  

  診斷結論

  通過全局定位,語句類型分析,到具體的語句執行阻塞狀態,根據阻塞類型、次數、時間、連接程式、資源消耗等多種維度綜合分析,我們可以清楚的看出資料庫中的阻塞問題。

  本例中系統主要的阻塞類型為CXPACKET和LCK_M_U,阻塞時間很長,主要的阻塞產生時間為上午十一點左右,主要的阻塞語句是一條update 和一個複雜的select查詢等信息。

問題解決

  首先下麵的這張圖已經簡單的說明瞭系統對應的等待需要怎麼樣的解決思路。  

  

  註:根據不同的情況降低阻塞的辦法主要有:調整伺服器、實例、資料庫配置參數(如:調整並行度),更改隔離級別(如:快照讀,nolock等),優化語句(如:添加索引,優化寫法等)

 

  本例中主要的CXPACKET是因為實例並行度參數配置不佳而導致,LCK_M_U主要是一條update被一個批處理的另一條update阻塞鎖導致,優化update這類更新語句主要是保證update語句最優化,執行時間儘量縮短,另外高併發下的update比較常見的解決辦法是使用索引利用key鎖取代表鎖以提高併發,可能被更新的表只有幾十條記錄,添加索引與不加索引的併發效率差別也會很大。另外程式的設計也是非常重要的,各種奧秘各位看官只能在實際環境中慢慢體會了,而使用SQL專家雲工具的主要目的在於全面的定位問題,圖表統計等形式清晰的展現問題,並根據工具提供的解決方案快速解決問題。

  如果是想學習的看官也可以在體檢的【檢查項】及平臺的幫助中瞭解更多的知識和更完善的思路,同時也可以拿著這份“電子病歷”和更多人交流學習。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 開發環境是OS X系統下的Xcode Xcode的兩個快捷鍵以及打開Xcode項目的正確方式 Xcode的兩個快捷鍵以及打開Xcode項目的正確方式 代碼的實時檢測和手動編譯鏈接的區別(command + B) 代碼實時檢測: 不是對代碼的編譯,是xcode的一個智能的功能,有時候不准確 手動編譯鏈 ...
  • 最近項目設計到App抓包,所以採用Fiddler工具來採集獲取APP數據包,但是fiddler對有些app是無法捕獲到數據包的,以下是我的處理方法: 1. 我預設代理埠使用的是自定義的埠而不是預設的8888埠; 2. 手機端安裝Fiddler證書,電腦端關閉防火牆 對我採集的app來說親測有效 ...
  • Your project path contains non-ASCII characters 錯誤原因:引用項目的路徑中包含中文 解決方法:重新新建一個項目,項目的路徑為英文。2:把現有的項目的路徑修改為不包含英文的。 ...
  • DDProgressHUD的介紹 提供了四種類型的展示: 顯示無限旋轉的載入圖(比如小菊花,可以自定義),顯示文字信息。網路刷新時經常用到。 顯示載入進度的動畫,也可以顯示文字。網路下載時用的比較多,載入網頁時也可以用。 與用戶彈窗交互的彈窗,告知用戶當前操作的狀態,成功還是失敗,顯示一張圖片和文字 ...
  • 這個效果的完成主要分為兩個部分 1. 自定義view作為listview的列表項 一個view裡面包括 顯示頭像,名字,消息內容等的contentView和滑動才能顯示出來的刪除,置頂的右邊菜單menuView 在手指移動的時候同時改變這兩個視圖的位置 2. 重寫listview 判斷item向左還 ...
  • 概述 VS自2015把Xamarin集成進去後搞Android開發就爽了,不過這安裝VS2015完成的時候卻是長了不知道多少。廢話少說進正題,VS2015安裝時註意把Android相關的組件勾選安裝,別組件都沒安裝就來用VS搞Android開發。 VS2015的Android組件安裝完成後並不是什麼 ...
  • 數據稽核及處理技術方案 數據稽核及處理技術方案 編寫與審核人 編寫 審核 日期 備註 劉嘉勁、韋譽、溫智勇 陶心萬 2016-12-28 修改歷史 日期 版本 作者 修改內容 更改請求號 註釋:“更改請求號”為文檔正式發佈後需要變更時的編號。 編寫與審核人 編寫 審核 日期 備註 劉嘉勁、韋譽、溫智 ...
  • 一、數據備份(導出) 1、exp命令導出dmp文件(exp -help查看幫助信息) 命令:exp username/[email protected]/orcl file=C:\jds.dmp log=C:\jds.log tables=tablename...;(不寫tables ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...