生產庫中遇到mysql的子查詢

来源:http://www.cnblogs.com/zhulin516114/archive/2017/08/12/7351077.html
-Advertisement-
Play Games

使用過oracle或者其他關係資料庫的DBA或者開發人員都有這樣的經驗,在子查詢上都認為資料庫已經做過優化,能夠很好的選擇驅動表執行,然後在把該經驗移植到mysql資料庫上,但是不幸的是,mysql在子查詢的處理上有可能會讓你大失所望,在我們的生產系統上就由於碰到了這個問題: select i_id ...


使用過oracle或者其他關係資料庫的DBA或者開發人員都有這樣的經驗,在子查詢上都認為資料庫已經做過優化,能夠很好的選擇驅動表執行,然後在把該經驗移植到mysql資料庫上,但是不幸的是,mysql在子查詢的處理上有可能會讓你大失所望,在我們的生產系統上就由於碰到了這個問題:

select  i_id, sum(i_sell) as i_sell

from table_data

where i_id in (select i_id from table_data where Gmt_create >= ‘2011-10-07 00:00:00’)

group by i_id;

(備註:sql的業務邏輯可以打個比方:先查詢出10-07號新賣出的100本書,然後在查詢這新賣出的100本書在全年的銷量情況)。

這條sql之所以出現的性能問題在於mysql優化器在處理子查詢的弱點,mysql優化器在處理子查詢的時候,會將將子查詢改寫。通常情況下,我們希望由內到外,先完成子查詢的結果,然後在用子查詢來驅動外查詢的表,完成查詢;但是mysql處理為將會先掃描外面表中的所有數據,每條數據將會傳到子查詢中與子查詢關聯,如果外表很大的話,那麼性能上將會出現問題;

針對上面的查詢,由於table_data這張表的數據有70W的數據,同時子查詢中的數據較多,有大量是重覆的,這樣就需要關聯近70W次,大量的關聯導致這條sql執行了幾個小時也沒有執行完成,所以我們需要改寫sql:

SELECT t2.i_id, SUM(t2.i_sell) AS sold

FROM (SELECT distinct i_id FROM table_data

WHERE gmt_create >= ‘2011-10-07 00:00:00’) t1,  table_data t2

WHERE t1.i_id = t2.i_id GROUP BY t2.i_id;

我們將子查詢改為了關聯,同時在子查詢中加上distinct,減少t1關聯t2的次數;

改造後,sql的執行時間降到100ms以內。

轉:http://hidba.org/?p=412 

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 不知道用過MySQL workbench資料庫的朋友或站長有沒有都遇到過這樣的問題? 就是用ssh的連接方式連接資料庫的時候,第一次可以連接的上,但是第二次就不行了,以後再用workbench就再也連接不上了。 小編就遇到這個問題後去網上下載了一個Navicat,再連資料庫就沒這個問題了。 Navi ...
  • 選取了10個文檔,其中4個來自於一篇論文,3篇來自於一篇新聞,3篇來自於另一篇新聞。 main函數: 運行結果: ...
  • ...
  • 1.前提是linux系統已經安裝了上一篇講的Zookeeper和jdk[1.7及以上版本]還有python[centos已經自帶,2.6及以上版本] 2.解壓storm壓縮包 3.配置storm.yaml文件 配置zookeeper(建議配置偶數個,貌似配奇數個會報錯) 配置nimbus 配置sup ...
  • 1 概述 1 概述 本篇文章主要講解SqlServer中類型轉換涉及的兩個函數:CAST和CONVERT。 2 具體內容 2 具體內容 2.1 CAST (1)作用:將一種數據類型的表達式轉換為另一種數據類型的表達式。 (2)定義: Parameters: expression:任何可轉換為 dat ...
  • 如何避免索引失效 1、全值匹配我最愛 建立幾個複合索引欄位,最好就用上幾個欄位。且按照順序來用。 2、最佳左首碼法則 如果索引了多列,要遵守最左首碼法則,指的是查詢從索引的最左前列開始,不跳過索引中間的列。 3、不再索引列上做任何操作(計算、函數、(自動or手動)類型轉換),會導致索引失效而轉向全表 ...
  • MySQL創建: 1.創建資料庫create database test2; 2.刪除資料庫drop database test2;3.創建表create table ceshi( ids int auto_increment primary key, uid varchar(20), name v ...
  • 1 概述 1 概述 本篇文章簡要分析,在SQL SERVER中,AS的基本用法。 2 具體分析 2 具體分析 2.1 定義變數類型 2.2 取別名 2.2.1 為結果集列取別名 code: result: code: result: 2.2.2 為表取別名 2.2.3 為子查詢取別名 2.3 轉換類 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...