MySQL flashback 功能

来源:http://www.cnblogs.com/waynechou/archive/2017/04/06/mysql_flashback_intro.html
-Advertisement-
Play Games

簡要介紹MySQL Flashback 的原理,安裝和使用。 ...


1. 簡介

mysqlbinlog flashback(閃回)用於快速恢復由於誤操作丟失的數據。在DBA誤操作時,可以把資料庫恢復到以前某個時間點(或者說某個binlog的某個pos)。比如忘了帶where條件的update、delete操作,傳統的恢復方式是利用全備+二進位日誌前滾進行恢復,相比於傳統的全備+增備,flashback顯然更為快速、簡單。

目前MySQL的flashback功能是利用binlog完成的,第一個實現該功能的是阿裡雲的彭立勛, 他在MySQL 5.5版本上就已實現,並將其提交給MariaDB。

 

2. 閃回原理

原理:flashback工具(-B 參數)可對rows格式的binlog可以進行逆向操作,delete反向生成insert、update生成反向的update、insert反向生成delete。

MySQL的binlog以event的形式,記錄了MySQL中所有的變更情況,利用binlog我們就能夠重現所記錄的所有操作。

MySQL引入binlog主要有兩個用途/目的:一是為了主從複製;二是用於備份恢復後需要重新應用部分binlog,從而達到全備+增備的效果。

MySQL的binlog有三種格式:

  • statement,基於SQL語句的模式,一般來說生成的binlog尺寸較小,但是某些不確定性SQL語句或函數在複製過程可能導致數據不一致甚至出錯;
  • row,基於數據行的模式,記錄的是數據行的完整變化。相對更安全,推薦使用(但通常生成的binlog會比其他兩種模式大很多);
  • mixed,混合模式,可以根據情況自動選用statement抑或row模式;這個模式下也可能造成主從數據不一致。它屬於MySQL 5.1版本時期的過渡方案,已不推薦使用了。

註意:使用mysqlbinlog flashback 工具必須設置:binlog_format = row

 

3. flashback安裝

下載flashback工具 mysqlbinlog : https://pan.baidu.com/s/1c1Ub1x2,並將mysqlbinlog文件移至mysql安裝路徑的bin目錄下(可備份原來的mysqlbinlog為mysqlbinlog_bak),執行mysqlbinlog --help命令,可能會報錯(系統版本為 CentOS 6.4_x64):

[root@centos64-slave1 bin]# mysqlbinlog --help
mysqlbinlog: /usr/lib64/libstdc++.so.6: version `GLIBCXX_3.4.15' not found (required by mysqlbinlog)

需要安裝新版本的libstdc++.so.6,下載鏈接:https://pan.baidu.com/s/1gfIarCn 

[root@centos64-slave1 ~]# cp libstdc++.so.6.0.20  /usr/lib64/
[root@centos64-slave1 ~]# cd /usr/lib64/
[root@centos64-slave1 lib64]# mv libstdc++.so.6 libstdc++.so.6_bak
[root@centos64-slave1 lib64]# ln -s libstdc++.so.6.0.20 libstdc++.so.6
[root@centos64-slave1 lib64]# ll libstdc*
lrwxrwxrwx  1 root root      19 4月   6 09:30 libstdc++.so.6 -> libstdc++.so.6.0.20
-rwxr-xr-x. 1 root root  987096 7月  19 2013 libstdc++.so.6.0.13
-rw-r--r--  1 root root 1011824 4月   6 09:28 libstdc++.so.6.0.20
lrwxrwxrwx. 1 root root      19 1月  14 12:25 libstdc++.so.6_bak -> libstdc++.so.6.0.13

安裝完後執行mysqlbinlog --help,若報錯:mysqlbinlog: /lib64/libc.so.6: version `GLIBC_2.14' not found (required by /usr/lib64/libstdc++.so.6),需要更新/lib64庫文件。下載鏈接:https://pan.baidu.com/s/1kViGrIZ

# tar zxvf  glibc-2.14.tar.gz
# cd glibc-2.14
# mkdir build
# cd build
# ../configure  --prefix=/opt/glibc-2.14
 ## 檢查是否有問題。
# make  ## (4核可加-j4 ,8核可加-j8)
# make install
# strings libc.so | grep GLIBC   ## 這是我們需要的lib了,然後去更新系統的庫
# cp libc.so  /lib64/libc-2.14.so
# mv /lib64/libc.so.6   /lib64/libc.so.6_bak
# LD_PRELOAD=/lib64/libc-2.14.so ln -s  /lib64/libc-2.14.so  /lib64/libc.so.6  
# strings /lib64/libc.so.6 | grep GLIBC 

安裝完成後執行:

[root@centos64-slave1 ~]# mysqlbinlog -V
mysqlbinlog Ver 3.4-InnoSQL for Linux at x86_64
[root@centos64-slave1 ~]# mysqlbinlog --help |grep flashback
  -B, --flashback     Flashback data to start_postition or start_datetime.
  -E, --fb-event=name only flashback this type of
flashback                         FALSE

發現mysqlbinlog版本已變為3.4-InnoSQL(之前的版本為3.4),且多了一個 -B 參數,此參數即用於實現flashback功能。到此,mysqlbinlog已安裝完成!

 

4. 使用簡介

先創建一張表user,向user表中插入一條數據,查看binlog日誌內容,可以找到剛纔插入的記錄:

# mysqlbinlog -vv mysql-bin.000004 

### INSERT INTO `test`.`user`
### SET
###   @1=30 /* SHORTINT meta=0 nullable=1 is_null=0 */
###   @2='Stephen Curry' /* VARSTRING(80) meta=80 nullable=1 is_null=0 */

然後使用flashback工具(-B參數)查看binlog內容,可以找到剛纔插入記錄的逆向操作:

# mysqlbinlog -vv mysql-bin.000004 -B

### DELETE FROM `test`.`user`
### WHERE
###   @1=30 /* SHORTINT meta=0 nullable=1 is_null=0 */
###   @2='Stephen Curry' /* VARSTRING(80) meta=80 nullable=1 is_null=0 */

同理,delete操作將會被轉換為insert,update被轉換為反向的update;若在一個事務中既有insert、update、delete語句,通過使用-B參數後,不僅三種DML語句完成了逆向轉換,並且語句順序也會發生顛倒。

在binlog中找到誤操作的pos變化區間後,使用mysqlbinlog -B 恢復:

# mysqlbinlog -B --start-position=296 --stop-position=429 mysql-bin.000004 | mysql -uroot -p

 

5. Flashback工具使用註意點

  • binlog日誌格式必須是ROW格式:binlog_format = row ;
  • 一個事務中的DML語句不僅會逆向轉換,並且語句順序也會發生顛倒;
  • 只支持 insert、update、delete , 不支持drop 、truncate、alter等DDL語句。

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 在和sever後臺交互的過程中、有時候、他們需要我們iOS開發者以“application/json”形式上傳。 ...
  • Paint 畫筆 ,即用來繪製圖形的"筆" 前面我們知道了Paint的一些基本用法: 不過我們會發現,這樣畫出的線條都是筆筆直直的,能滿足需求,但是美觀上並不好看。 這就需要使用到Paint類 更多的一些方法了 首先,看下最簡單設置的線條 一、線條路徑樣式 設置路徑樣式;取值類型是所有派生自Path ...
  • 安裝 Android Development Environment http://www.cnblogs.com/youchihwang/p/6645880.html 2. answer : no 3. Installing Repo 4. ARM Compiler Tools 5.01 upda ...
  • 由OpenDigg 出品的安卓開源項目周報第十五期來啦。我們的安卓開源周報集合了OpenDigg一周來新收錄的優質的安卓開源項目,方便安卓開發人員便捷的找到自己需要的項目工具。 ...
  • 圖片載入涉及到圖片的緩存、圖片的處理、圖片的顯示等。四種常用的圖片載入框架,分別是Fresco、ImageLoader、 Picasso、 Glide... ...
  • 為了ios開發中tableview讀取數據的方便,先弄了一個只有字母的json表,再將未處理的數據添加到上面。僅用於將首字母作為section head。 [{"initial":"A","list":[]},{"initial":"B","list":[]},{"initial":"C","lis ...
  • 安裝rz工具和wget工具:分別如下: sudo yum install lrzsz;yum install wget 安裝cmake編譯工具:rz -y 選擇下載的cmake工具上傳到伺服器中 安裝c、c++:yum -y install gcc-c++ 環境參數:Linux:Centos6.5, ...
  • 需求場景 項目中有這麼個需求:統計集群中各個節點的數據量存儲大小,不是記錄數。 一開始有點無頭緒,後面查看cassandra官方文檔看到Monitoring章節,裡面說到:Cassandra中的指標使用Dropwizard Metrics庫進行管理。 這些指標可以通過JMX查詢,也可以使用多個內置和 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...