Mysql主從同步的實現原理與配置實戰

来源:https://www.cnblogs.com/a609251438/archive/2019/11/06/11805160.html
-Advertisement-
Play Games

1、什麼是mysql主從同步? 當master(主)庫的數據發生變化的時候,變化會實時的同步到slave(從)庫。 2、主從同步有什麼好處? 水平擴展資料庫的負載能力。 容錯,高可用。Failover(失敗切換)/High Availability 數據備份。 3、主從同步的原理是什麼? 首先我們來 ...


1、什麼是mysql主從同步?

當master(主)庫的數據發生變化的時候,變化會實時的同步到slave(從)庫。

2、主從同步有什麼好處?

  • 水平擴展資料庫的負載能力。
  • 容錯,高可用。Failover(失敗切換)/High Availability
  • 數據備份。

3、主從同步的原理是什麼?

首先我們來瞭解master-slave的體繫結構。如下圖:



不管是delete、update、insert,還是創建函數、存儲過程,所有的操作都在master上。當master有操作的時候,slave會快速的接收到這些操作,從而做同步。

 

但是,這個機制是怎麼實現的呢?在master機器上,主從同步事件會被寫到特殊的log文件中(binary-log);在slave機器上,slave讀取主從同步事件,並根據讀取的事件變化,在slave庫上做相應的更改。

如此,就實現了主從同步了!

下麵我們來詳細的瞭解。3.1主從同步事件有哪些上面說到:在master機器上,主從同步事件會被寫到特殊的log文件中(binary-log);

主從同步事件有3種形式:statement、row、mixed。

  1. statement:會將對資料庫操作的sql語句寫入到binlog中。
  2. row:會將每一條數據的變化寫入到binlog中。
  3. mixed:statement與row的混合。Mysql決定什麼時候寫statement格式的,什麼時候寫row格式的binlog。


3.2在master機器上的操作

當master上的數據發生改變的時候,該事件(insert、update、delete)變化會按照順序寫入到binlog中。binlog dump線程當slave連接到master的時候,master機器會為slave開啟binlog dump線程。當master 的 binlog發生變化的時候,binlog dump線程會通知slave,並將相應的binlog內容發送給slave。

 

3.3在slave機器上的操作

當主從同步開啟的時候,slave上會創建2個線程。

  • I/O線程。該線程連接到master機器,master機器上的binlog dump線程會將binlog的內容發送給該I/O線程。該I/O線程接收到binlog內容後,再將內容寫入到本地的relay log。
  • SQL線程。該線程讀取I/O線程寫入的relay log。並且根據relay log的內容對slave資料庫做相應的操作。

3.4如何在master、slave上查看上述的線程?

使用SHOW PROCESSLIST命令可以查看。如圖,在master機器上查看binlog dump線程

如圖,在slave機器上查看I/O、SQL線程。


接下來給大家講解mysql主從同步實戰系統環境:系統的話大同小異,都差不多,我這裡用的是ubuntu16.04+mysql5.7,用到兩台伺服器:其中master IP:192.168.33.22,另一個slave IP:192.168.33.33

 

master機器上的操作

1、更改配置文件我們找到文件/etc/mysql/mysql.conf.d/mysqld.cnf

配置如下:

bind-address = 192.168.33.22 #your master ip
server-id = 1 #在master-slave架構中,每台機器節點都需要有唯一的server-id
log_bin = /var/log/mysql/mysql-bin.log #開啟binlog

 

2、重啟mysql,以使配置文件生效。

sudo systemctl restart mysql

 

3、創建主從同步的mysql user。

$ mysql -u root -p
Password:

##創建slave1用戶,並指定該用戶只能在主機192.168.33.33上登錄。
mysql> CREATE USER 'slave1'@'192.168.33.33' IDENTIFIED BY 'slavepass';
Query OK, 0 rows affected (0.00 sec)

##為slave1賦予REPLICATION SLAVE許可權。
mysql> GRANT REPLICATION SLAVE ON *.* TO 'slave1'@'192.168.33.33';
Query OK, 0 rows affected (0.00 sec)

 

4、為MYSQL加讀鎖為了主庫與從庫的數據保持一致,我們先為mysql加入讀鎖,使其變為只讀。

mysql> FLUSH TABLES WITH READ LOCK;
Query OK, 0 rows affected (0.00 sec)

 

5、記錄下來MASTER REPLICATION LOG 的位置該信息稍後會用到。

mysql> SHOW MASTER STATUS;
+------------------+----------+--------------+------------------+-------------------+
| File    | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+----------+--------------+------------------+-------------------+
| mysql-bin.000001 |  613 |    |     |     |
+------------------+----------+--------------+------------------+-------------------+
1 row in set (0.00 sec)
 
 

6、將master DB中現有的數據信息導出

$ mysqldump -u root -p --all-databases --master-data > dbdump.sql

 

7、接觸master DB的讀鎖

mysql> UNLOCK TABLES;

 

8、將步驟6中的dbdump.sql文件copy到slave

scp dbdump.sql [email protected]:/home/ubuntu

 

 

slave機器上的操作

1、更改配置文件我們找到文件/etc/mysql/mysql.conf.d/mysqld.cnf

更改配置如下:

bind-address = 192.168.33.33 #your slave ip
server-id = 2 #master-slave結構中,唯一的server-id
log_bin = /var/log/mysql/mysql-bin.log #開啟binlog

 

2、重啟mysql,以使配置文件生效

sudo systemctl restart mysql

 

 

3、導入從master DB。導出的dbdump.sql文件,以使master-slave數據一致

$ mysql -u root -p < /home/ubuntu/dbdump.sql

 

4、使slave與master建立連接,從而同步

$ mysql -u root -p
Password:

mysql> STOP SLAVE;
Query OK, 0 rows affected, 1 warning (0.00 sec)

mysql> CHANGE MASTER TO
 -> MASTER_HOST='192.168.33.22',
 -> MASTER_USER='slave1',
 -> MASTER_PASSWORD='slavepass',
 -> MASTER_LOG_FILE='mysql-bin.000001',
 -> MASTER_LOG_POS=613;
Query OK, 0 rows affected, 2 warnings (0.01 sec)

mysql> START SLAVE;
Query OK, 0 rows affected (0.00 sec)

MASTER_LOG_FILE='mysql-bin.000001'與MASTER_LOG_POS=613的值,是從上面的SHOW MASTER STATUS得到的。經過如此設置之後,就可以進行master-slave同步了

 

~

您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 之前寫過一篇博客“深入理解Linux修改hostname”,裡面總結了RHEL 5.7下麵如何修改hostname,當然這篇博客的內容其實也適用於CentOS 6,但是自CentOS 7開始,已經跟CentOS 6已經有很大不同了,一直沒有總結CentOS 7下修改hostname的相關知識點,今天... ...
  • [20191106]善用column格式化輸出.txt# man columnDESCRIPTION The column utility formats its input into multiple columns. Rows are filled before columns. Input i ...
  • Listener refused the connection with the following error: ORA-12514, TNS:listener does not currently know of service requested in connect descriptor. ...
  • elastic search 集群新增node 同一臺物理機 ...
  • [Err] 1064 - You have an error in your SQL syntax; check the manual that corresponds to your MySQL server version for the right syntax to use near '(0... ...
  • 說來和MySQL倒是有緣,畢業的第一份工作就被分配到了RDS團隊,主要負責把MySQL弄到雲上做成資料庫服務。雖說整天和MySQL打交道,但說實話那段時間並沒有很深入的理解MySQL內核,做的事情基本都是圍繞著MySQL做管控系統,比較上層。好在周邊都是MySQL內核神級人物,在他們的熏陶下多多少少 ...
  • 初次使用redis時,在鏈接Redis後,運行報錯“No module named redis”。 具體代碼如下: import redis r = redis.Redis(host='192.168.2.22',port=6379,db=2) r.set('name','Delia') print ...
  • mysql不支持全連接,但可以通過左外連接+ union+右外連接實現 ...
一周排行
    -Advertisement-
    Play Games
  • 概述:在C#中,++i和i++都是自增運算符,其中++i先增加值再返回,而i++先返回值再增加。應用場景根據需求選擇,首碼適合先增後用,尾碼適合先用後增。詳細示例提供清晰的代碼演示這兩者的操作時機和實際應用。 在C#中,++i 和 i++ 都是自增運算符,但它們在操作上有細微的差異,主要體現在操作的 ...
  • 上次發佈了:Taurus.MVC 性能壓力測試(ap 壓測 和 linux 下wrk 壓測):.NET Core 版本,今天計劃準備壓測一下 .NET 版本,來測試並記錄一下 Taurus.MVC 框架在 .NET 版本的性能,以便後續持續優化改進。 為了方便對比,本文章的電腦環境和測試思路,儘量和... ...
  • .NET WebAPI作為一種構建RESTful服務的強大工具,為開發者提供了便捷的方式來定義、處理HTTP請求並返迴響應。在設計API介面時,正確地接收和解析客戶端發送的數據至關重要。.NET WebAPI提供了一系列特性,如[FromRoute]、[FromQuery]和[FromBody],用 ...
  • 原因:我之所以想做這個項目,是因為在之前查找關於C#/WPF相關資料時,我發現講解圖像濾鏡的資源非常稀缺。此外,我註意到許多現有的開源庫主要基於CPU進行圖像渲染。這種方式在處理大量圖像時,會導致CPU的渲染負擔過重。因此,我將在下文中介紹如何通過GPU渲染來有效實現圖像的各種濾鏡效果。 生成的效果 ...
  • 引言 上一章我們介紹了在xUnit單元測試中用xUnit.DependencyInject來使用依賴註入,上一章我們的Sample.Repository倉儲層有一個批量註入的介面沒有做單元測試,今天用這個示例來演示一下如何用Bogus創建模擬數據 ,和 EFCore 的種子數據生成 Bogus 的優 ...
  • 一、前言 在自己的項目中,涉及到實時心率曲線的繪製,項目上的曲線繪製,一般很難找到能直接用的第三方庫,而且有些還是定製化的功能,所以還是自己繪製比較方便。很多人一聽到自己畫就害怕,感覺很難,今天就分享一個完整的實時心率數據繪製心率曲線圖的例子;之前的博客也分享給DrawingVisual繪製曲線的方 ...
  • 如果你在自定義的 Main 方法中直接使用 App 類並啟動應用程式,但發現 App.xaml 中定義的資源沒有被正確載入,那麼問題可能在於如何正確配置 App.xaml 與你的 App 類的交互。 確保 App.xaml 文件中的 x:Class 屬性正確指向你的 App 類。這樣,當你創建 Ap ...
  • 一:背景 1. 講故事 上個月有個朋友在微信上找到我,說他們的軟體在客戶那邊隔幾天就要崩潰一次,一直都沒有找到原因,讓我幫忙看下怎麼回事,確實工控類的軟體環境複雜難搞,朋友手上有一個崩潰的dump,剛好丟給我來分析一下。 二:WinDbg分析 1. 程式為什麼會崩潰 windbg 有一個厲害之處在於 ...
  • 前言 .NET生態中有許多依賴註入容器。在大多數情況下,微軟提供的內置容器在易用性和性能方面都非常優秀。外加ASP.NET Core預設使用內置容器,使用很方便。 但是筆者在使用中一直有一個頭疼的問題:服務工廠無法提供請求的服務類型相關的信息。這在一般情況下並沒有影響,但是內置容器支持註冊開放泛型服 ...
  • 一、前言 在項目開發過程中,DataGrid是經常使用到的一個數據展示控制項,而通常表格的最後一列是作為操作列存在,比如會有編輯、刪除等功能按鈕。但WPF的原始DataGrid中,預設只支持固定左側列,這跟大家習慣性操作列放最後不符,今天就來介紹一種簡單的方式實現固定右側列。(這裡的實現方式參考的大佬 ...