MySQL 8.0 Dynamic Redo Log Sizing翻譯

来源:https://www.cnblogs.com/kerrycode/archive/2023/07/12/17546528.html
-Advertisement-
Play Games

本文是MySQL 8.0 Dynamic Redo Log Sizing[1]這篇文章的翻譯。如有翻譯不當的地方,敬請諒解,請尊重原創和翻譯勞動成果,轉載的時候請註明出處。謝謝! 這篇博文將討論MySQL 8.0.30中引入的最新功能/特性:重做日誌動態調整大小(dynamic redo log s ...


本文是MySQL 8.0 Dynamic Redo Log Sizing[1]這篇文章的翻譯。如有翻譯不當的地方,敬請諒解,請尊重原創和翻譯勞動成果,轉載的時候請註明出處。謝謝!

這篇博文將討論MySQL 8.0.30中引入的最新功能/特性:重做日誌動態調整大小(dynamic redo log sizing)。除了InnoDB 緩衝池(buffer pool)大小之外,我們可以說合適的重做日誌大小對於MySQL性能至關重要。有許多關於如何計算合適的重做日誌大小的博客文章。其中最經典的博客文章之一來自 Baron:How to calculate a good InnoDB log file size[2](這篇博客文章是2008年發佈的,但文中計算redo log大小的公式仍然是一個有效的公式)

現在,這個功能/特性試圖解決哪個問題呢?

在MySQL中,緩衝池(buffer pool)和重做日誌大小是不經常更改的參數設置。通常,這些參數是在資料庫安裝期間設置的;之後,它們就會被遺忘,直到一些問題出現為止。問題是過去它們是靜態的,這意味著您必須重新啟動MySQL才能使參數變更生效。

MySQL在MySQL 5.7中通過動態調整緩衝池(buffer bool)大小解決了緩衝池問題。現在,MySQL 8.0.30解決了重做日誌的這個問題。調整重做日誌大小非常簡單明瞭:

mysql> SET GLOBAL innodb_redo_log_capacity = 2*1024*1024*1024;

此參數設置可將重做日誌大小調整為比當前定義的值更大或更小的值。為了實現此目的,重做日誌文件現在駐留在datadir指定的新目錄中#innodb_redo中,除非你通過變數innodb_log_group_home_dir指定了不同的目錄。這個目錄下的重做日誌文件有兩種類型:普通重做日誌文件和備用重做日誌文件。普通重做日誌文件是正在使用的重做日誌文件。備用重做日誌文件是那些等待使用的重做日誌文件。InnoDB總共維護了32個重做日誌文件,每個文件大小等於1/32 * innodb_redo_log_capacity;但是,修改innodb_redo_log_capacity參數後,重做日誌文件大小可能會暫時有所不同。

重做日誌文件使用#ib_redoN命名約定,其中N是重做日誌文件編號。備用重做日誌文件由尾碼表示_tmp。以下示例顯示#innodb_redo 目錄中的重做日誌文件,其中 18 個活動重做日誌文件和 14 個備用重做日誌文件按順序編號。

$ ls
#ib_redo31  #ib_redo33 #ib_redo35  #ib_redo37 #ib_redo39  #ib_redo41 #ib_redo43  #ib_redo45 #ib_redo47  #ib_redo49_tmp  #ib_redo51_tmp  #ib_redo53_tmp  #ib_redo55_tmp  #ib_redo57_tmp  #ib_redo59_tmp  #ib_redo61_tmp
#ib_redo32  #ib_redo34 #ib_redo36  #ib_redo38 #ib_redo40  #ib_redo42 #ib_redo44  #ib_redo46 #ib_redo48  #ib_redo50_tmp  #ib_redo52_tmp  #ib_redo54_tmp  #ib_redo56_tmp  #ib_redo58_tmp  #ib_redo60_tmp  #ib_redo62_tmp

MySQL提供了幾個狀態變數用於監視重做日誌和重做日誌容量調整操作;例如,您可以通過查詢Innodb_redo_log_resize_status以查看調整大小操作的狀態:

mysql> SHOW GLOBAL STATUS LIKE 'Innodb_redo_log_resize_status';
+-------------------------------+-------+
| Variable_name                 | Value |
+-------------------------------+-------+
| Innodb_redo_log_resize_status |  OK   |
+-------------------------------+-------+

狀態變數Innodb_redo_log_capacity_resized顯示當前重做日誌的容量限制:

mysql> SHOW GLOBAL STATUS LIKE 'Innodb_redo_log_capacity_resized';
+----------------------------------+------------+
| Variable_name                    | Value      |
+----------------------------------+------------+
| Innodb_redo_log_capacity_resized | 3221225472 |
+----------------------------------+------------+

其他狀態變數包括:

Innodb_redo_log_checkpoint_lsn
Innodb_redo_log_current_lsn
Innodb_redo_log_flushed_to_disk_lsn
Innodb_redo_log_logic_size
Innodb_redo_log_physical_size
Innodb_redo_log_read_only
Innodb_redo_log_uuid

MySQL 8.0.30 還引入了一些與此問題相關的新錯誤消息。其中一些包括:

ER_IB_MSG_LOG_WRITER_OUT_OF_SPACE
ER_IB_MSG_LOG_WRITER_ABORTS_LOG_ARCHIVER
ER_IB_MSG_LOG_WRITER_WAITING_FOR_ARCHIVER
ER_IB_MSG_LOG_WRITER_WAIT_ON_NEW_LOG_FILE
ER_IB_MSG_LOG_WRITER_ENTERED_EXTRA_MARGIN
ER_IB_MSG_LOG_WRITER_WAIT_ON_CONSUMER

如果您想查看更多信息,可以使用此鏈接[3]。所有與重做日誌錯誤相關的消息都使用ER_IB_MSG_LOG_WRITER_ 命名約定。

估計重做日誌容量

有了這些新的狀態變數,我們可以使用以下查詢來估計重做日誌大小:

mysql> SHOW GLOBAL STATUS LIKE 'Innodb_redo_log_current_lsn'SELECT SLEEP(60); SHOW GLOBAL STATUS LIKE 'Innodb_redo_log_current_lsn';

根據上一個查詢提供的輸出,我們運行以下命令:

mysql > SELECT ABS(20641693317 - 20903377487) / 1024 / 1024 AS MB_per_min;
+--------------+
| MB_per_min   |
+--------------+
| 249.56147194 |
+--------------+
1 row in set (0.00 sec)

因此,在這種情況下,在重做日誌文件中寫入大約為250MB/分鐘,那麼一小時恰好是 250*60(1 小時),相當於 15GB。

已棄用的參數

為了實現這個新功能,MySQL 棄用了兩個參數:innodb_log_files_in_group和innodb_log_file_size 。

如果您嘗試在文件中設置它們my.cnf,它們將被忽略,並且錯誤日誌中將列印警告:

2022-08-07T20:23:39.898370Z 0 [Warning] [MY-013869] [InnoDB] Ignored deprecated configuration parameter innodb_log_file_size. Used innodb_redo_log_capacity instead.
2022-08-07T20:23:39.898441Z 0 [Warning] [MY-013870] [InnoDB] Ignored deprecated configuration parameter innodb_log_files_in_group. Used innodb_redo_log_capacity instead.

結論

重做日誌動態調整大小為 DBA 提供了更大的靈活性,以防萬一需要調整重做日誌大小,應用程式不能因MySQL重新啟動而停止對外服務的情況。截至撰寫本文時,還沒有與此功能相關的錯誤報告。建議之一是檢查您的備份工具是否與 MySQL 8.0.30 及其新功能相容。最後,由於一些參數已經棄用,請務必檢查現有的my.cnf配置文件。

參考資料

[1]

1: https://www.percona.com/blog/mysql-8-0-dynamic-redo-log-sizing/

[2]

2: https://www.percona.com/blog/2008/11/21/how-to-calculate-a-good-innodb-log-file-size/

[3]

3: https://github.com/mysql/mysql-server/blob/8.0/share/messages_to_error_log.txt

掃描上面二維碼關註我 如果你真心覺得文章寫得不錯,而且對你有所幫助,那就不妨幫忙“推薦"一下,您的“推薦”和”打賞“將是我最大的寫作動力! 本文版權歸作者所有,歡迎轉載,但未經作者同意必須保留此段聲明,且在文章頁面明顯位置給出原文連接.
您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 作者:Bright-Ho 聯繫方式:[email protected] input輸入子系統框架分析(純軟體方面): 上一節,我們簡單的描述的什麼是輸入子系統;什麼是字元設備;以及其作用;重點是我們講到分析輸入子系統必須結合硬體設備來分析;那麼這一節,我們主要講解輸入子系統的軟體框架;接下來,我們就進 ...
  • 作者:Bright-Ho 聯繫方式:[email protected] 前言背景描述: 雖然在網上看了很多有關輸入子系統的資料和視頻,但是真正的,系統的,全面的,來弄清輸入子系統,還是要花些時間和精力的!現在我以一個初學者的角度來分析input輸入子系統; 那麼分析input輸入子系統之前,得先弄清楚 ...
  • # FRP使用方法 # 流程圖如下 >建議查看流程圖哦 ![image](https://img2023.cnblogs.com/blog/2368840/202307/2368840-20230712150836502-1824122109.png) ## 訪問FRP官方項目 ### [https ...
  • ![](https://img2023.cnblogs.com/blog/3076680/202307/3076680-20230711160327907-1137777359.png) # 1. 計算一年有多少天 ## 1.1. 方案 ### 1.1.1. 找到當前年份的第一天 ### 1.1.2 ...
  • 博客推行版本更新,成果積累制度,已經寫過的博客還會再次更新,不斷地琢磨,高質量高數量都是要追求的,工匠精神是學習必不可少的精神。因此,大家有何建議歡迎在評論區踴躍發言,你們的支持是我最大的動力,你們敢投,我就敢肝 ...
  • 本文介紹了分庫分表的概念及優勢,以及sharding-jdbc分庫分表中間件,探究了sharding-jdbc的路由規則的執行流程 ...
  • 摘要:本文通過5個部分內容幫助開發者快速瞭解GaussDB(DWS) 資源管理機制,讓數倉過載煩惱不再,把“爛”SQL牢牢關進籠子里。 本文分享自華為雲社區《直播回顧 | 掌握把“爛”SQL牢牢關進籠子里的密鑰》,作者: 華為雲社區精選 。 混合負載場景下,怎樣避免“爛”語句對資料庫系統的衝擊?如何 ...
  • 當前,全球數字經濟加速發展,數據正在成為重組全球要素資源、重塑全球經濟結構、改變全球競爭格局的關鍵力量。**資料庫作為存儲與處理數據的關鍵技術,在數字經濟浪潮下,不斷涌現新技術、新業態、新模式。** 7月4-5日,**由中國通信標準化協會和中國信息通信研究院主辦**,大數據技術標準推進委員會承辦,I ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...