MySQL--當mysqldump --single-transaction遇到alter table(1)

来源:http://www.cnblogs.com/TeyGao/archive/2017/07/05/7121232.html
-Advertisement-
Play Games

部分生產環境採用mysqldump --single-transaction的方式在夜間進行資料庫備份,而同事恰好在備份期間執行了alter table操作,操作部分成功部分失敗,為啥呢? ## ## 以下測試在MySQL 5.6.36上執行,該問題存在版本差異! MySQL 5.5 版本測試結果: ...


部分生產環境採用mysqldump --single-transaction的方式在夜間進行資料庫備份,而同事恰好在備份期間執行了alter table操作,操作部分成功部分失敗,為啥呢?

##========================================================================##

以下測試在MySQL 5.6.36上執行,該問題存在版本差異!

MySQL 5.5 版本測試結果:《MySQL--當mysqldump --single-transaction遇到alter table(2)

##========================================================================##

在mysqldump對single-transaction參數的解釋為:

Creates a consistent snapshot by dumping all tables in a
single transaction. Works ONLY for tables stored in
storage engines which support multiversioning (currently
only InnoDB does); the dump is NOT guaranteed to be
consistent for other storage engines. While a
--single-transaction dump is in process, to ensure a
valid dump file (correct table contents and binary log
position), no other connection should use the following
statements: ALTER TABLE, DROP TABLE, RENAME TABLE,
TRUNCATE TABLE, as consistent snapshot is not isolated
from them. Option automatically turns off --lock-tables.

紅色字體部分是重點,但是看得有些迷糊,還是動手測試下。

根據《mysqldump的幾個主要選項探究》的介紹,我們備份執行的命令mysqldump --single-transaction --master-data相當於執行下麵代碼:

FLUSH TABLES;
FLUSH TABLES WITH READ LOCK;
SET SESSION TRANSACTION ISOLATION LEVEL REPEATABLE READ;
START TRANSACTION WITH CONSISTENT SNAPSHOT;
SHOW MASTER STATUS;
UNLOCK TABLES;

SHOW TABLES LIKE 'xxx'
SET OPTION SQL_QUOTE_SHOW_CREATE=1
SHWO CREATE TABLE 'xxx'
SHOW FIELDS FROM 'xxx'
SHOW TABLE STATUS LIKE 'xxx'
SELECT /*!40001 SQL_NO_CACHE */ * FROM  xxx

QUIT

 

 

場景1:mysqldump開始但尚未備份到表tb001時,另外回話對錶tb001進行alter操作,然後mysqldump對錶tb001進行導出

alter操作順利完成,但是mysqldump操作失敗。

 

場景2:mysqldump開始備份並完成tb001的導出,在對其他表進行導出過程中,其他回話對錶進行alter操作

alter table操作被阻塞直至mysqldump完成或失敗後退出。

 

使用mysqldump備份時,模擬場景2的環境,報錯信息為:

mysqldump: Error 1412: Table definition has changed, please retry transaction when dumping table `tb1002` at row: 0

查看導出文件,最後內容為:

--
-- Dumping data for table `tb1002`
--

LOCK TABLES `tb1002` WRITE;
/*!40000 ALTER TABLE `tb1002` DISABLE KEYS */;

 

##========================================================================##

總結: 

single-transaction參數通過Innodb的多版本來獲得數據一致性,而ALTER TABLE, DROP TABLE, RENAME TABLE,TRUNCATE TABLE等操作會破壞數據一致性,兩種操作不能併發執行。

如果修改表操作在 ”mysqldump開啟後但還未導出修改表數據前“ 的時間段內開始,則修改表操作成功完成,而mysqldump會執行失敗;

如果修改表操作在 “mysqldum已導出修改表數據但還未結束mysqldump操作前”的時間段內開始,則修改表操作被阻塞,mysqldum能成功完成,在mysqldump操作完成後修改表操作方可正常執行。

##========================================================================##


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • jdbc.driverClassName=com.mysql.jdbc.Driverjdbc.url=jdbc:mysql://localhost:3306/database?useUnicode=true&characterEncoding=utf8&autoReconnect=true&rewr ...
  • 在傳遞數據時,XML和JSON是最常用的數據格式,SQL Server從很早的版本就開始支持XML格式,而對於JSON格式,SQL Server從2016版本開始支持。大多數資料庫系統並沒有升級到SQL Server 2016版本,因此在傳遞格式化的數據時,通常還是使用XML格式。對我而言,查詢和解 ...
  • 1、確認mysql是否已安裝,有下麵的代碼可知 2、卸載已安裝的mysql,建議使用yum命令,因為yum命令可以自動刪除與mysql相關的依賴;如果使用rpm命令,則還需要手動去刪除和mysql相關的文件,比較麻煩 3、用whereis命令查找mysql相關的文件,因為步驟2用yum來卸載,所以m ...
  • 1. SVM基本知識 SVM(Support Vector Machine)是一個類分類器,能夠將不同類的樣本在樣本空間中進行分隔,分隔使用的面叫做分隔超平面。 比如對於二維樣本,分佈在二維平面上,此時超平面實際上是一條直線,直線上面是一類,下麵是另一類。定義超平面為: f(x)=w0+wTx 可以 ...
  • 先看一下實驗的兩張表: 表comments,總行數28856 表comments_for,總行數57,comments_id是有索引的,ID列為主鍵。 以上兩張表是我們測試的基礎,然後看一下索引,comments_for這個表comments_id是有索引的,ID為主鍵。 最近被公司某一開發問道JO ...
  • 在上篇《MySQL--當mysqldump --single-transaction遇到alter table》中測試發現,在MySQL 5.6版本中,如果在mysqldump期間修改表,可能會導致mysqldump報錯,而該結論與同事的執行現象不符,因此在MySQL 5.5版本中進行下測試。 測試 ...
  • 一 概述 1.物理分頁 物理分頁依賴的是某一物理實體,這個物理實體就是資料庫,比如MySQL資料庫提供了limit關鍵字,程式員只需要編寫帶有limit關鍵字的SQL語句,資料庫返回的就是分頁結果。 2.邏輯分頁 邏輯分頁依賴的是程式員編寫的代碼。資料庫返回的不是分頁結果,而是全部數據,然後再由程式 ...
  • 1. 問題表現 消息 102,級別 15,狀態 1,過程 wx_kaliushui,第 8 行'GO' 附近有語法錯誤。 為了說明問題,我把代碼精簡到極致,如下: 2. 排查過程 2.1. 去掉註釋部分,問題解決 2.2. 去掉GO,問題解決 2.3. 註釋掉GO,問題解決 2.4. 將代碼全選複製 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...