一次磁碟IO過高分析過程

来源:https://www.cnblogs.com/konghezi/archive/2018/08/30/9561136.html
-Advertisement-
Play Games

1、查看監控，發現整點時間有寫IO過高情況 2、iotop 分析確認io高峰是由mysql導致的 3、開啟general log，分析SQL set global general_log = on ; 4、觀察binlog 與 general log 發現 文件增長量不大，懷疑不是有Insert 與 ...


1、查看監控，發現整點時間有寫IO過高情況   2、iotop 分析確認io高峰是由mysql導致的

 

3、開啟general log，分析SQL set global general_log = on ;   4、觀察binlog 與 general log 發現 文件增長量不大，懷疑不是有Insert 與 update 與 delete 導致的 寫IO過高   5、show full processlist ;發現有慢SQL *************************** 6. row ***************************      Id: 337153    User: user_car_bill    Host: 192.168.3.10:63018      db: yoolifin Command: Query    Time: 295   State: Creating sort index    Info: SELECT 1 AS `Number of Records`,   `自定義 SQL 查詢`.`實還金額` AS `實還金額`,   `自定義 SQL 查詢`.`應還客戶數` AS `應還客戶數`,   `自定義 SQL 查詢`.`應還金額` AS `應還金額`,   `自定義 SQL 查詢`.`累計發過代扣客戶數` AS `累計發過代扣客戶數`,   `自定義 SQL 查詢`.`累計客戶覆蓋率` AS `累計客戶覆蓋率`,   `自定義 SQL 查詢`.`累計還款收回率` AS `累計還款收回率`,   `自定義 SQL 查詢`.`還款日發過代扣客戶數` AS `還款日發過代扣客戶數`,   `自定義 SQL 查詢`.`還款日客戶覆蓋率` AS `還款日客戶覆蓋率`,   `自定義 SQL 查詢`.`還款日期` AS `還款日期`,   `自定義 SQL 查詢`.`還款日還款收回率` AS `還款日還款收回率` FROM (   select a.dt 還款日期,a.c 應還客戶數,a.totle_repayment 應還金額,a.fact_repayment 實還金額, a.fact_repayment/a.totle_repayment 累計還款收回率, a.very_fact_repayment/a.totle_repayment 還款日還款收回率,t.c 還款日發過代扣客戶數,t.c/a.c 還款日客戶覆蓋率,tt.c 累計發過代扣客戶數,tt.c/a.c 累計客戶覆蓋率   FROM(   select date(payment_date) dt,count(DISTINCT APP_NO) c,sum(totle_repayment) totle_repayment,sum(fact_repayment) fact_repayment ,sum(if(payment_date=fact_payment_date,fact_repayment,0)) very_fact_repayment   from fin_repayment m   where   date(payment_date)>'2017-06-01' and date(payment_date)<=date(curdate() + INTERVAL 20 DAY) and DATE_FORMAT(payment_date,'%d') in ('05','20')   and m.`status` in ('1','2','5')   and ifnull(cut_chanl,0)<>3   group by date(payment_date)   ) a   left join (   select date(n.SUBMIT_TIME) dt,count(DISTINCT APP_NO) c   from fin_back_info n   where date(n.SUBMIT_TIME)>'2017-06-01' and DATE_FORMAT(n.SUBMIT_TIME,'%d') in ('05','20') and n.PAYMENT_DATE=DATE(n.SUBMIT_TIME)   group by date(n.SUBMIT_TIME)   ) t   on a.dt=t.dt   left join (   select date(n.PAYMENT_DATE) dt,count(DISTINCT APP_NO) c from fin_back_info n   where date(n.SUBMIT_TIME)>'2017-06-01'   group by date(n.PAYMENT_DATE)   ) tt   on a.dt=tt.dt ) `自定義 SQL 查詢` *************************** 6. row ***************************   6、分析慢SQL，產生大量的派生表，可能是由於記憶體不夠，寫入磁碟導致的IO過高 7、執行該SQL，觀看監控，產生IO高峰，確認為該SQL導致的IO瓶頸過高

 

 
您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 資料庫小結1
    一、基礎 1、創建資料庫 CREATE DATABASE database-name 2、刪除資料庫 drop database dbname 3、備份sql server 創建 備份數據的 device USE master EXEC sp_addumpdevice 'disk',’testBac ...
  • 08-Mysql資料庫----完整性約束
    總結: 1,not null 不能插入空,不設置可空 2,unique 單列唯一 create table department(name char(10) unique); 創建方式一 create table department( unique(name)); 創建方式二 聯合唯一: uniq ...
  • 07-Mysql資料庫----數據類型
    介紹 存儲引擎決定了表的類型，而表記憶體放的數據也要有不同的類型，每種數據類型都有自己的寬度，但寬度是可選的 詳細參考鏈接：http://www.runoob.com/mysql/mysql-data-types.html mysql常用數據類型概括： 一、數值類型 整數類型：TINYINT SMAL ...
  • mysql查詢最近7天的數據，沒有數據自動補0
    問題描述 查詢資料庫表中最近7天的記錄 但是發現某一天沒有數據，結果中沒有顯示當天(2017-08-28)的數據 解決思路 思路一： 可以在自己的程式中做額外的補零處理 思路二： 構建一個最近七天的結果集，然後和查詢的結果集合做left join(本文采用第二種方式) 當天2017-08-28結果顯 ...
  • 06-Mysql資料庫----表的操作
    06-表的操作 本節掌握 存儲引擎介紹（瞭解） 表的增刪改查 一、存儲引擎（瞭解） 前幾節我們知道mysql中建立的庫 》文件夾，庫中的表 》文件 現實生活中我們用來存儲數據的文件有不同的類型，每種文件類型對應各自不同的處理機制：比如處理文本用txt類型，處理表格用excel，處理圖片用png等 數 ...
  • 【 PostgreSQL】查詢某模式下所有表的分佈鍵信息
    想看下某模式下所有表創建的分佈鍵是否合理，查找系統表文檔拼出如下sql，親們如果有更好的sql或者意見歡迎留言！ ​運行結果： ​​​ ...
  • mysql 開發進階篇系列 33 工具篇(mysqlbinlog日誌管理工具)
    一.概述 由於伺服器生成的二進位日誌文件以二進位格式保存，所以如果要想檢查這些文件的文本格式，就會用到mysqlbinlog日誌管理工具。 mysqlbinlog的語法如下: mysqlbinlog [options] log-files log-files2... 其中options有很多選項，常 ...
  • sql中的left join以及on、where關鍵字的區別
    創建兩張表並插入一些數據 查看表中的數據 比較下麵幾組查詢結果--如果你對left join足夠熟悉的話，先不要看結果，是否可以直接說出下麵查詢的結果 如果on後面的條件是左表中的列(and leftTable.colName='***'),左表中滿足條件的行和右表中的行進行匹配(根據on left ...
一周排行
    -Advertisement-
    Play Games
  • C# + WPF 音頻播放器 界面優雅，體驗良好
    前言 本文介紹一款使用 C# 與 WPF 開發的音頻播放器，其界面簡潔大方，操作體驗流暢。該播放器支持多種音頻格式（如 MP4、WMA、OGG、FLAC 等），並具備標記、實時歌詞顯示等功能。 另外，還支持換膚及多語言（中英文）切換。核心音頻處理採用 FFmpeg 組件，獲得了廣泛認可，目前 Git ...
  • OAuth2.0授權-gitee授權碼模式
    OAuth2.0授權驗證-gitee授權碼模式 本文主要介紹如何筆者自己是如何使用gitee提供的OAuth2.0協議完成授權驗證並登錄到自己的系統，完整模式如圖 1、創建應用 打開gitee個人中心->第三方應用->創建應用 創建應用後在我的應用界面，查看已創建應用的Client ID和Clien ...
  • FastReport.OpenSource .Net下開源免費報表列印組件
    解決了這個問題：《winForm下，fastReport.net 從.net framework 升級到.net5遇到的錯誤“Operation is not supported on this platform.”》 本文內容轉載自：https://www.fcnsoft.com/Home/Sho ...
  • 如何在 ASP.NET Core Web API 方法執行前後 “偷偷“ 作一些 “壞“ 事？初識 ActionFilterAttribute
    國內文章 WPF 從裸 Win 32 的 WM_Pointer 消息獲取觸摸點繪製筆跡 https://www.cnblogs.com/lindexi/p/18390983 本文將告訴大家如何在 WPF 裡面，接收裸 Win 32 的 WM_Pointer 消息，從消息裡面獲取觸摸點信息，使用觸摸點 ...
  • 在 ASP.NET Core Web API 中使用異常篩選器捕獲和統一處理異常
    前言 給大家推薦一個專為新零售快消行業打造了一套高效的進銷存管理系統。 系統不僅具備強大的庫存管理功能，還集成了高性能的輕量級 POS 解決方案，確保頁面載入速度極快，提供良好的用戶體驗。 項目介紹 Dorisoy.POS 是一款基於 .NET 7 和 Angular 4 開發的新零售快消進銷存管理 ...
  • AbpHelper CLI積累與實戰分享
    ABP CLI常用的代碼分享 一、確保環境配置正確 安裝.NET CLI： ABP CLI是基於.NET Core或.NET 5/6/7等更高版本構建的，因此首先需要在你的開發環境中安裝.NET CLI。這可以通過訪問Microsoft官網下載並安裝相應版本的.NET SDK來實現。 安裝ABP ...
  • 記一次HttpClient使用問題分析
    問題 問題是這樣的：第三方的webapi，需要先調用登陸介面獲取Cookie，訪問其它介面時攜帶Cookie信息。 但使用HttpClient類調用登陸介面，返回的Headers中沒有找到Cookie信息。 分析 首先，使用Postman測試該登陸介面，正常返回Cookie信息，說明是HttpCli ...
  • .NET周刊【9月第3期 2024-09-15】
    國內文章 關於.NET在中國為什麼工資低的分析 https://www.cnblogs.com/thinkingmore/p/18406244 .NET在中國開發者的薪資偏低，主要因市場需求、技術棧選擇和企業文化等因素所致。歷史上，.NET曾因微軟的閉源策略發展受限，儘管後來推出了跨平臺的.NET ...
  • 我的網站集成ElasticSearch初體驗
    在WPF開發應用中，動畫不僅可以引起用戶的註意與興趣，而且還使軟體更加便於使用。前面幾篇文章講解了畫筆（Brush），形狀（Shape），幾何圖形（Geometry），變換（Transform）等相關內容，今天繼續講解動畫相關內容和知識點，僅供學習分享使用，如有不足之處，還請指正。 ...
  • 第23篇 委托的概述
    什麼是委托？ 委托可以說是把一個方法代入另一個方法執行，相當於指向函數的指針；事件就相當於保存委托的數組； 1.實例化委托的方式： 方式1：通過new創建實例： public delegate void ShowDelegate(); 或者 public delegate string ShowDe ...
所有分類