InnoDB的WAL方式學習

来源:http://www.cnblogs.com/wingsless/archive/2016/02/20/5203064.html
-Advertisement-
Play Games

之前寫過一篇博文,《不好的MySQL過程編寫習慣》(http://www.cnblogs.com/wingsless/p/5041838.html)。這篇博文里強調了不要迴圈的提交事務,儘量將可以放在一起的SQL同一個事務提交,會快很多很多。博文中提到了redo的問題,因此,結合最近編寫新員工培訓材


    之前寫過一篇博文,《不好的MySQL過程編寫習慣》(http://www.cnblogs.com/wingsless/p/5041838.html)。這篇博文里強調了不要迴圈的提交事務,儘量將可以放在一起的SQL同一個事務提交,會快很多很多。博文中提到了redo的問題,因此,結合最近編寫新員工培訓材料的感悟,簡單的介紹一些InnoDB和Redo的事情。

    InnoDB的記憶體中有redo log buffer,磁碟上還有redo log file,redo用於在宕機之後恢複數據,保證數據的持久性。

    一般來講,最符合ACID的redo工作方式應該是這樣的:事務提交時,記憶體中的redo buffer內容寫入文件中,並刷回磁碟(flush,官方文檔中解釋該動作是將磁碟緩存的數據flush迴文件中)。此時buffer pool中的數據塊被修改成為臟頁,但是並不寫回磁碟中,而是在master thread的迴圈中慢慢寫回去,這樣實際上日誌的寫入和數據文件的寫入不是同步進行的,兩者之間會有一定的時間差,這種方式就叫做預寫日誌(WAL)。一旦系統宕機,記憶體中的數據立刻丟失,下次啟動資料庫時,沒有來得及寫回數據文件的數據可以從redo log中恢復。

    因此在上篇博文中的過程,會在每一個事務提交時寫一次日誌,這樣會帶來很多的磁碟IO,因此效率非常低下,而單個事務提交只會造成一次IO,所以效率提升非常顯著。但是,InnoDB還支持另外的一種模式,這個模式由innodb_flush_log_at_trx_commit參數控制,預設情況下是1,代表上面說的那種方式,每次事務提交都會寫redo日誌。

    在一次試驗中,我仍然保持存儲過程迴圈提交事務,但是我將參數調整到了2,這樣的效率提升也很明顯,稍微慢於單事務提交。參數為2的意義是,每次提交事務的時候,也會寫日誌文件,但是並不調用fsync函數(刷盤的函數)將日誌刷回磁碟,而是一秒一次的調度fsync函數。因此也會帶來不少的效率提升。這樣做的問題很明顯,如果遇到宕機,會丟失一秒左右的數據。

    當然這個參數還能調整成0,代表事務提交時不作任何操作,每隔一秒才會將redo buffer的數據寫入日誌並刷回磁碟中。這種方式看起來就明顯快的多了,但是卻是最不符合ACID原則的做法。

    當然了,刷磁碟這個事情還會牽扯一些別的參數,那就不在本文的討論範圍之內了,未來如果有學習心得我會寫下來的。

    實際上,如果不在乎一秒的數據丟失(一秒的數據有時候真的很多很多),可以將該參數選擇為2,但是最好還是選擇為1。程式在寫資料庫的時候,可以採用批量提交的方式,速度非常快。這是程式設計的問題了,也不在討論範圍內了。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • Myeclipse 環境下Freemarker Editor
  • 在討論jquery對象和DOM對象的相互轉換之前,先約定好定義變數的風格如果獲取的是jquery對象,那麼在變數前面加上$,例如 var $varible = jquery對象; 如果獲取的是DOM對象,則定義如下: var varible = DOM對象; 1.jquery對象轉成DOM對象: j
  • 1.動態載入腳本 <script type="text/javascript"> function loadScript(url){ var script=document.createElement("script"); script.type="text/javascript"; script.
  • 代碼: 輸出結果 補充: reg.lastIndex:下一次正則捕獲的開始查找的索引位置 ->正則的懶惰性就是因為預設情況下lastIndex值都是0,我們不管執行幾次exec,都是從字元串的開始位置查找,那麼每一次捕獲到的都是第一個符合的內容
  • 今天看了關於js閉包方面的文章,還是有些雲里霧裡,對於一個菜鳥來說,學習閉包確實有一定的難度,不說別的,能夠在網上找到一篇優秀的是那樣的不易。 當然之所以閉包難理解,個人覺得是基礎知識掌握的不牢,因為閉包牽扯到一些前面的東西,比如作用域\等等,如果連基本的作用域都沒有弄清楚,自然不可能搞懂閉包,還有
  • [1]基本術語 [2]構造行框 [3]行內非替換元素 [4]行內替換元素
  • 這裡講的不會太多, 因為所有的語言都是一樣的, 一些基本的東西, 所以就隨便寫寫. 變數 變數就是可變的量, 編程角度理解就是用於存儲某種/某些數值的存儲器. 我們可以把變數具象理解為一個盒子, 而我們給的值就是盒子裡面的東西, 這個盒子在那裡不動, 而我們是可以改變盒子裡面的東西的. 變數的命名規
  • var BrowserMatch = { init: function () { this.browser = this.getBrowser().browser || "An Unknown Browser"; this.version = this.getBrowser().version ||
一周排行
    -Advertisement-
    Play Games
  • 示例項目結構 在 Visual Studio 中創建一個 WinForms 應用程式後,項目結構如下所示: MyWinFormsApp/ │ ├───Properties/ │ └───Settings.settings │ ├───bin/ │ ├───Debug/ │ └───Release/ ...
  • [STAThread] 特性用於需要與 COM 組件交互的應用程式,尤其是依賴單線程模型(如 Windows Forms 應用程式)的組件。在 STA 模式下,線程擁有自己的消息迴圈,這對於處理用戶界面和某些 COM 組件是必要的。 [STAThread] static void Main(stri ...
  • 在WinForm中使用全局異常捕獲處理 在WinForm應用程式中,全局異常捕獲是確保程式穩定性的關鍵。通過在Program類的Main方法中設置全局異常處理,可以有效地捕獲並處理未預見的異常,從而避免程式崩潰。 註冊全局異常事件 [STAThread] static void Main() { / ...
  • 前言 給大家推薦一款開源的 Winform 控制項庫,可以幫助我們開發更加美觀、漂亮的 WinForm 界面。 項目介紹 SunnyUI.NET 是一個基於 .NET Framework 4.0+、.NET 6、.NET 7 和 .NET 8 的 WinForm 開源控制項庫,同時也提供了工具類庫、擴展 ...
  • 說明 該文章是屬於OverallAuth2.0系列文章,每周更新一篇該系列文章(從0到1完成系統開發)。 該系統文章,我會儘量說的非常詳細,做到不管新手、老手都能看懂。 說明:OverallAuth2.0 是一個簡單、易懂、功能強大的許可權+可視化流程管理系統。 有興趣的朋友,請關註我吧(*^▽^*) ...
  • 一、下載安裝 1.下載git 必須先下載並安裝git,再TortoiseGit下載安裝 git安裝參考教程:https://blog.csdn.net/mukes/article/details/115693833 2.TortoiseGit下載與安裝 TortoiseGit,Git客戶端,32/6 ...
  • 前言 在項目開發過程中,理解數據結構和演算法如同掌握蓋房子的秘訣。演算法不僅能幫助我們編寫高效、優質的代碼,還能解決項目中遇到的各種難題。 給大家推薦一個支持C#的開源免費、新手友好的數據結構與演算法入門教程:Hello演算法。 項目介紹 《Hello Algo》是一本開源免費、新手友好的數據結構與演算法入門 ...
  • 1.生成單個Proto.bat內容 @rem Copyright 2016, Google Inc. @rem All rights reserved. @rem @rem Redistribution and use in source and binary forms, with or with ...
  • 一:背景 1. 講故事 前段時間有位朋友找到我,說他的窗體程式在客戶這邊出現了卡死,讓我幫忙看下怎麼回事?dump也生成了,既然有dump了那就上 windbg 分析吧。 二:WinDbg 分析 1. 為什麼會卡死 窗體程式的卡死,入口門檻很低,後續往下分析就不一定了,不管怎麼說先用 !clrsta ...
  • 前言 人工智慧時代,人臉識別技術已成為安全驗證、身份識別和用戶交互的關鍵工具。 給大家推薦一款.NET 開源提供了強大的人臉識別 API,工具不僅易於集成,還具備高效處理能力。 本文將介紹一款如何利用這些API,為我們的項目添加智能識別的亮點。 項目介紹 GitHub 上擁有 1.2k 星標的 C# ...