SQL性能優化:如何定位網路性能問題

来源:http://www.cnblogs.com/kerrycode/archive/2016/04/13/5386626.html
-Advertisement-
Play Games

一同事跟我反饋他遇到了一個SQL性能問題,他說全表只有69條記錄,客戶端執行耗費了兩分多鐘,這不科學呀。要我分析一下原因並解決。我按照類似表結構,構造了一個案例,測試截圖如下所示 這個表有13800KB(也就是13M多大小),因為該表將圖片保存到資料庫(Item_Photo欄位為iamge類型),這... ...


一同事跟我反饋他遇到了一個SQL性能問題,他說全表只有69條記錄,客戶端執行耗費了兩分多鐘,這不科學呀。要我分析一下原因並解決。我按照類似表結構,構造了一個案例,測試截圖如下所示

clipboard

 

這個表有13800KB(也就是13M多大小),因為該表將圖片保存到資料庫(Item_Photo欄位為iamge類型),這個是歷史原因,暫且不噴這種的設計。看來這個SQL執行時間長的性能問題不在於IO和SQL本身執行計劃是否有問題,而是在網路數據傳時間上(伺服器與客戶端位於異地,兩地專線帶寬6M,不過很多應用、郵件、系統都依賴此專線)

sp_spaceused 'Item_Test'
 
name               rows     reserved        data        index_size      unused
-----------  -------------  ----------  -------------- ----------- -------------
Item_Test          69      13864 KB      13800 KB           16 KB        48 KB

為了驗證我的想法,我在伺服器本機測試時間為2秒,如下截圖所示

clipboard[1]

從上面我們知道在客戶端執行完該SQL語句,總共耗費了2分23秒。那麼客戶端的到底獲取了多少位元組數據,數據傳輸耗費了多長時間呢? 能否查看這些DETAIL信息呢? 答案是可以。在SSMS工具欄,勾選“Include Client Statistics”或使用快捷鍵SHIFT+ALT+S,然後執行SQL語句,就能得到如下截圖的相關信息。

clipboard[2]

 

clipboard[3]

Client Statistics(客戶端統計信息)包含三大塊:  Query Profile Statistics, Network Statistics, Time Statistics。

這些部分的內容很容易理解,無需多說,那麼我們來看看吧

 

Network Statistics(網路統計信息)
 
 
Number of server roundtrips:        伺服器往返的次數
 
TDS packets sent from client:       從客戶端發送的TDS數據包(個數)
 
TDS packets received from server:   從服務端接收的TDS數據包(個數)
 
Bytes sent from client:             從客戶端發送的位元組數
 
Bytes received from server:         從伺服器接收的位元組數
 
 
 
Time Stattistics:(時間統計信息)
 
 
Client processing time:              客戶端處理時間
 
Total execution time:                總執行時間
 
Wait time on server replies:         伺服器應答等待時間

 

從客戶端發送的位元組和從服務端接收的數據大小都很清晰、明瞭,那麼數據從伺服器端發送給客戶端所需的時間這裡沒有,其實它基本上接近客戶端處理時間(Client processing time),我們也可以將客戶端處理時間權當網路數據傳輸時間,從上面案例,我們可以看到這個時間耗費了140秒(140132 ms),可以肯定這個SQL性能慢在網路數據傳輸上,而不是慢在資料庫那一塊(Server Processing Time).

我們來看看下圖,這個是SQL SERVER的請求接收和數據輸出的一個大致流程圖,當客戶端發送請求開始,當伺服器接收客戶端發來的最後一個TDS包,資料庫引擎開始處理請求,請求完成後,將數據發送給客戶端,從圖中可以看出,客戶端接收伺服器端返回的數據也是需要一個過程的(或者說時間)

clipboard[4]

 

我們在SQL優化過程中,如果一個SQL出現性能問題時,我們應該站在一個全局的角度來分析問題,從CPU資源、網路帶寬、磁碟IO、執行計劃等多方面來分析,這樣才能有助於你分析、定位問題根源,而不要只要SQL響應很慢時,就一味條件反射式先入為主:這是資料庫問題。資料庫也不能老背這個黑鍋。

 

在資料庫等待事件中,ASYNC_NETWORK_IO可以從另外一個側面反映網路性能問題。關於ASYNC_NETWORK_IO等待類型:

This waittype indicates that the SPID is waiting for the client application to fetch the data before the SPID can send more results to the client application.

 

那麼回到如何優化這個SQL的問題上來,我們可以從下麵幾個方面來進行優化。

   1: SQL只取必須的欄位數據

        像這個案例,其實它根本不需要Item_Photo欄位數據,那麼我們可以修改SQL,只取我們需要的欄位數據,就可以避免這個問題,提高SQL性能,另外根據我的經驗,開發人員習慣性使用SELECT *,從不管那些數據是需要還是不需要的,先全部取過來再說,這種習慣性行為確實不是一個好習慣。

 

   2:避免這種腦殘設計

      圖片應該以文件形式保存在應用伺服器上,資料庫只保存其路徑信息,這種將圖片保存到資料庫的設計純屬腦殘行為。

 

 

參考資料:

https://www.simple-talk.com/sql/database-administration/how-come-the-hourglass-why-database-applications-slow-down.-/


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 首先,簡單的說一下,這個底部框架的實現步驟。 1,自定義一個類,繼承LinearLayout就好了 ,因為我喜歡用LinearLayout, 當然你也可以繼承RelativeLayout。 2,重寫它兩個帶參數的構造方法。 3,進入內容的編寫,佈局文件的處理,數據的處理。 4,給底部容器添加view ...
  • 利用Intent實現有返回結果的頁面跳轉 主要用的方法: (1)Intent的構造方法:intent(當前界面對象,要跳轉的界面.class); (2)接受結果的方法onActivityResult(int requestCode, int resultCode, Intent data) (3)調 ...
  • 恢復內容開始 //需要的效果 1.設置window的根視圖控制器為一個UITableViewController #import "AppDelegate.h"#import "YCTableViewController.h"@interface AppDelegate ()@end@impleme ...
  • 當使用閉包時,類本身持有self,然後又在閉包中訪問了self或者self的屬性,就會導致噁心額迴圈引用。swift提供的解決方法是在閉包中定義捕獲列表,捕獲列表是閉包想怎麼引用捕獲來的變數。例如下麵定義了一個捕獲列表,引用self為unowned引用,這樣在賓傲中用self就不會導致迴圈引用 去掉 ...
  • 一,效果圖。 二,工程圖。 三,代碼。 RootViewController.h #import <UIKit/UIKit.h> @interface RootViewController : UIViewController <UITextViewDelegate> @end RootViewCo ...
  • 如圖 添加如下代碼 sTableView.separatorInset = UIEdgeInsetsZero; sTableView.layoutMargins = UIEdgeInsetsZero; cell.layoutMargins = UIEdgeInsetsZero; 第二種方法如下圖 - ...
  • 為了實現在ios系統上抓包,如下步驟: 1,設備越獄 2,在cydia-軟體源-設置中改為開發者,否則有些deb搜索不到 安裝如下軟體:OpenSSH,OpenSSL,wget (下載工具) Aptitude 及 APT 0.6 Transitional (deb包工具) unzip 及 zip ( ...
  • MYSQL啟動報1067錯誤,系統日誌中是“服務 mysql 意外停止” Mysql日誌中則是:“Plugin 'FEDERATED' is disabled” 網我在網上找到解決方案:1、在MY.INI文件中的 [mysqld] 中增加一行tmpdir="D:/MySQL/data/"修改後,還是 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...