MySQL資料庫開發常見問題及幾點優化!

来源:https://www.cnblogs.com/zhuzhen/archive/2018/04/09/8759328.html
-Advertisement-
Play Games

從一下三個方面考慮: 庫表設計 慢 SQL 問題 誤操作、程式 bug 時怎麼辦 一、庫表設計 1.1、引擎選擇 在 MySQL5.1 中,引入了新的插件式存儲引擎體繫結構,允許將存儲引擎載入到正在運新的 MySQL伺服器中。使用 MySQL插件式存儲引擎體繫結構,允許資料庫專業人員或者設計庫表的軟 ...


從一下三個方面考慮:

  • 庫表設計
  •  慢 SQL 問題
  • 誤操作、程式 bug 時怎麼辦

一、庫表設計

1.1、引擎選擇

在 MySQL5.1 中,引入了新的插件式存儲引擎體繫結構,允許將存儲引擎載入到正在運新的 MySQL伺服器中。使用 MySQL插件式存儲引擎體繫結構,允許資料庫專業人員或者設計庫表的軟體開發人員為特定的應用需求選擇專門的存儲引擎,完全不需要管理任何特殊的應用編碼要求,也無需考慮所有的底層實施細節。因此,儘管不同的存儲引擎具有不同的能力,應用程式是與之分離的。此外,使用者可以在伺服器、資料庫和表格三個層級中存儲引擎,提供了極大的靈活性。

MySQL常用的存儲引擎包括 MyISAM、InnoDB 和 Memory,其中各自的特點如下:

  1. MyISAM: 全表鎖,擁有較高的執行速度,一個寫請求請阻塞另外相同表格的所有讀寫請求,併發性能差,占用空間相對較小,MySQL5.5 及以下僅 MyISAM支持全文索引,不支持事務。

  2. InnoDB :行級鎖(SQL 都走索引查詢),併發能力相對強,占用空間是 MyISAM的 2.5 倍,不支持全文索引(5.6 開始支持),支持事務。

  3. Memory : 全表鎖,存儲在記憶體當中,速度快,但會占用和數據量成正比的記憶體空間且數據在MySQL重啟時會丟失。

1.2、分表方法

在資料庫表使用過程中,為了減小資料庫伺服器的負擔、縮短查詢時間,常常會考慮做分表設計。分表分兩種,一種是縱向分表(將本來可以在同一個表的內容,人為劃分存儲在為多個不同結構的表)和橫向分表(把大的表結構,橫向切割為同樣結構的不同表)。

其中,縱向分表常見的方式有根據活躍度分表、根據重要性分表等。其主要解決問題如下:

  • 表與表之間資源爭用問題;

  • 鎖爭用機率小;

  • 實現核心與非核心的分級存儲,如UDB登陸庫拆分成一級二級三級庫;

  • 解決了資料庫同步壓力問題。

橫向分表是指根據某些特定的規則來劃分大數據量表,如根據時間分表。其主要解決問題如下:

 

  • 單表過大造成的性能問題;

  • 單表過大造成的單伺服器空間問題。

 

 

1.3、索引問題

索引是對資料庫表中一個或多個列的值進行排序的結構,建立索引有助於更快地獲取信息。 mysql 有四種不同的索引類型:

 

  • 主鍵索此 ( PRIMARY )

  • 唯一索引 ( UNIQUE )

  • 普通索引 ( INDEX )

  • 全文索引(FULLTEXT , MyISAM 及 MySQL5.6 以上的 InnoDB 

 

建立索引的目的是加快對錶中記錄的查找或排序,索引也並非越多越好,因為創建索引是要付出代價的:一是增加了資料庫的存儲空間,二是在插入和修改數據時要花費較多的時間維護索引。

在設計表或索引時,常出現以下幾個問題

 

  • 少建索引或不建索引。這個問題最突出,建議建表時 DBA 可以一起協助把關。

  • 索引濫用。濫用索引將導致寫請求變慢,拖慢整體資料庫的響應速度(5.5 以下的 MySQL只能用到一個索引)。

  • 從不考慮聯合索引。實際上聯合索引的效率往往要比單列索引的效率更高。

  • 非最優列選擇。低選擇性的欄位不適合建單列索引,如 status 類型的欄位。

 

二、慢 SQL 問題

 

2.1、導致慢 SQL 的原因

在遇到慢 SQL 情況時,不能簡單的把原因歸結為 SQL 編寫問題(雖然這是最常見的因素),實際上導致慢 SQL 有很多因素,甚至包括硬體和 MySQL本身的Bug。根據出現的概率從大到小,羅列如下:

  • SQL編寫問題

  • 業務實例相互乾繞對 IO/CPU 資源爭用

  • 伺服器硬體

  • MySQL Bug

 

2.2、由 SQL 編寫導致的慢 SQL 優化

正確的使用索引能加快查詢速度,那麼我們在編寫 SQL 時就需要註意與索引相關的規則:

 

  • 欄位類型轉換導致不用索引,如字元串類型的不用引號,數字類型的用引號等,這有可能會用不到索引導致全表掃描;

  • MySQL不支持函數轉換,所以欄位前面不能加函數,否則這將用不到索引;

  • 不要在欄位前面加減運算

  • 字元串比較長的可以考慮索引一部份減少索引文件大小,提高寫入效率;

  • like % 在前面用不到索引

  • 根據聯合索引的第二個及以後的欄位單獨查詢用不到索引;

  • 不要使用 select *

  • 排序請儘量使用升序 ;

  • or 的查詢儘量用 union 代替 (Innodb);

  • 複合索引高選擇性的欄位排在前面;

  • order by / group by 欄位包括在索引當中減少排序,效率會更高。

除了上述索引使用規則外,SQL 編寫時還需要特別註意一下幾點:

  • 儘量規避大事務的 SQL,大事務的 SQL 會影響資料庫的併發性能及主從同步;

  • 分頁語句 limit 的問題;

  • 刪除表所有記錄請用 truncate,不要用 delete;

  • 不讓 mysql 乾多餘的事情,如計算;

  • 輸寫 SQL 帶欄位,以防止後面表變更帶來的問題,性能也是比較優的 ( 涉及到數據字典解析,請自行查詢資料);

  • 在 Innodb上用 select count(*),因為 Innodb 會存儲統計信息;

  • 慎用 Oder by rand()。

 

三、分析診斷工具

我們可以做一些工作達到預防慢 SQL 問題,比如在上線前預先用診斷工具對 SQL 進行分析。常用的工具有:

 

  • mysql dumpslow

  • mysql profile

  • mysql explain

四、誤操作、程式 bug 時怎麼辦

一個成熟的企業往往會有完善的數據管理規範和較豐富的數據恢復方案(初創公司除外),會進行數據備份和數據容災。當你發現誤操作或程式 bug 導致線上數據被誤刪或誤改動時,一定不能慌亂,應及時與 DBA 聯繫,第一時間進行數據恢復(嚴重時直接停止服務),儘可能減少影響和損失。對於重要數據(如資金)的操作,在開發時一定要反覆進行測試,確保沒有問題後再上線。

作者:cyfonly;原文地址:http://www.cnblogs.com/cyfonly/p/5616536.html

 

庫表使用過程中,為了減小資料庫伺服器的負擔、縮短查詢時間,常常會考慮做分表設計。分表分兩種,一種是縱向分表(將本來可以在同一個表的內容,人為劃分存儲在為多個不同結構的表)和橫向分表(把大的表結構,橫向切割為同樣結構的不同表)。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • oracle數據字典 數據字典是由oracle伺服器創建和維護的一組只讀的系統表。數據字典分為兩類:一是基表,二是數據字典視圖。 數據字典視圖包括用戶名、用戶許可權、對象名、約束和審計等信息,是通過運行catalog.sql腳本文件來產生的。 數據字典存儲瞭如下信息: ü 資料庫的邏輯結構和物理結構, ...
  • 我們要從MySQL當中導出數據到Greenplum當中,按照以下步驟就可以 以schema_name.table_name為例 導的時候需要註意,一些字元的轉換,對於這張表來說,主要就是在MySQL當中一些時間格式存儲的為INT類型,我們需要進行轉化後然後導出,而且在Greenplum當中建表的時候 ...
  • 摘要: 數據集編輯功能界面介紹以及常見問題總結。 在數據集編輯界面可以進行數據建模來更好的展示數據,創建數據集預設將數值類型欄位作為度量,日期、字元串等類型作為維度,度量可以根據維度分組展示。下麵來介紹一下常見功能: 維度編輯: 如下圖為維度編輯功能: 1.編輯: 修改維度顯示名以及備註信息 2.克 ...
  • 摘要: 數據集編輯功能界面介紹以及常見問題總結。 在數據集編輯界面可以進行數據建模來更好的展示數據,創建數據集預設將數值類型欄位作為度量,日期、字元串等類型作為維度,度量可以根據維度分組展示。下麵來介紹一下常見功能: 維度編輯: 如下圖為維度編輯功能: 1.編輯: 修改維度顯示名以及備註信息 2.克 ...
  • --查看用戶所在的表空間 SELECT USERNAME,DEFAULT_TABLESPACE FROM USER_USERS; --查詢用戶密碼到期期限 SELECT * FROM DBA_PROFILES S WHERE S.PROFILE='DEFAULT' AND RESOURCE_NAME... ...
  • --導入用戶表結構和數據 --Sql文件導入:(需要在PLSQL的命令行視窗中執行當前用戶為要導入數據的用戶) 在命令視窗中用語句 @D:\1\krcs_userobj.sql --Dmp文件導入: 在cmd視窗中運行 imp krcs/krcs@orcl file=E:\11\krcs.dmp f ...
  • 另外說明:extent management ...
  • 1、left(name,4)截取左邊的4個字元 列: 結果:2018 2、right(name,2)截取右邊的2個字元 結果:09 3、SUBSTRING(name,5,3) 截取name這個欄位 從第五個字元開始 只截取之後的3個字元 結果:事業部 4、SUBSTRING(name,3) 截取na ...
一周排行
    -Advertisement-
    Play Games
  • 前言 本文介紹一款使用 C# 與 WPF 開發的音頻播放器,其界面簡潔大方,操作體驗流暢。該播放器支持多種音頻格式(如 MP4、WMA、OGG、FLAC 等),並具備標記、實時歌詞顯示等功能。 另外,還支持換膚及多語言(中英文)切換。核心音頻處理採用 FFmpeg 組件,獲得了廣泛認可,目前 Git ...
  • OAuth2.0授權驗證-gitee授權碼模式 本文主要介紹如何筆者自己是如何使用gitee提供的OAuth2.0協議完成授權驗證並登錄到自己的系統,完整模式如圖 1、創建應用 打開gitee個人中心->第三方應用->創建應用 創建應用後在我的應用界面,查看已創建應用的Client ID和Clien ...
  • 解決了這個問題:《winForm下,fastReport.net 從.net framework 升級到.net5遇到的錯誤“Operation is not supported on this platform.”》 本文內容轉載自:https://www.fcnsoft.com/Home/Sho ...
  • 國內文章 WPF 從裸 Win 32 的 WM_Pointer 消息獲取觸摸點繪製筆跡 https://www.cnblogs.com/lindexi/p/18390983 本文將告訴大家如何在 WPF 裡面,接收裸 Win 32 的 WM_Pointer 消息,從消息裡面獲取觸摸點信息,使用觸摸點 ...
  • 前言 給大家推薦一個專為新零售快消行業打造了一套高效的進銷存管理系統。 系統不僅具備強大的庫存管理功能,還集成了高性能的輕量級 POS 解決方案,確保頁面載入速度極快,提供良好的用戶體驗。 項目介紹 Dorisoy.POS 是一款基於 .NET 7 和 Angular 4 開發的新零售快消進銷存管理 ...
  • ABP CLI常用的代碼分享 一、確保環境配置正確 安裝.NET CLI: ABP CLI是基於.NET Core或.NET 5/6/7等更高版本構建的,因此首先需要在你的開發環境中安裝.NET CLI。這可以通過訪問Microsoft官網下載並安裝相應版本的.NET SDK來實現。 安裝ABP ...
  • 問題 問題是這樣的:第三方的webapi,需要先調用登陸介面獲取Cookie,訪問其它介面時攜帶Cookie信息。 但使用HttpClient類調用登陸介面,返回的Headers中沒有找到Cookie信息。 分析 首先,使用Postman測試該登陸介面,正常返回Cookie信息,說明是HttpCli ...
  • 國內文章 關於.NET在中國為什麼工資低的分析 https://www.cnblogs.com/thinkingmore/p/18406244 .NET在中國開發者的薪資偏低,主要因市場需求、技術棧選擇和企業文化等因素所致。歷史上,.NET曾因微軟的閉源策略發展受限,儘管後來推出了跨平臺的.NET ...
  • 在WPF開發應用中,動畫不僅可以引起用戶的註意與興趣,而且還使軟體更加便於使用。前面幾篇文章講解了畫筆(Brush),形狀(Shape),幾何圖形(Geometry),變換(Transform)等相關內容,今天繼續講解動畫相關內容和知識點,僅供學習分享使用,如有不足之處,還請指正。 ...
  • 什麼是委托? 委托可以說是把一個方法代入另一個方法執行,相當於指向函數的指針;事件就相當於保存委托的數組; 1.實例化委托的方式: 方式1:通過new創建實例: public delegate void ShowDelegate(); 或者 public delegate string ShowDe ...