深入理解Mysql資料庫主從延遲

来源:http://www.cnblogs.com/java-maowei/archive/2017/12/14/8037686.html
-Advertisement-
Play Games

1什麼會增加主從延遲? 1 網路不好 2 從庫硬體差 3 索引沒做好,從庫執行慢 4 從庫鎖等待,多見於myisam 5 主庫寫頻繁,從庫單線程執行慢 6 使用row複製,或mix使用行複製 2如何優化,減少延遲時間? 1 如何寫頻繁,水平拆分,減少單片寫數量 2 避免複雜DML操作 3幾個因為主從 ...


1什麼會增加主從延遲?

1 網路不好
2 從庫硬體差
3 索引沒做好,從庫執行慢
4 從庫鎖等待,多見於myisam
5 主庫寫頻繁,從庫單線程執行慢
6 使用row複製,或mix使用行複製

2如何優化,減少延遲時間?

1 如何寫頻繁,水平拆分,減少單片寫數量
2 避免複雜DML操作

3幾個因為主從延遲發送異常的場景

1 一個事務內有讀和寫操作
2 修改後緊接著介面訪問

4業務上如何解決主從延遲?

解決這個問題有以下幾個思路:

1. 流程優化避免寫後立即讀取
    a 業務流程上:寫完成後介面返回,客戶端再次調用介面獲取數據,在這個過程中同步已經完成;
    b 代碼上:寫完成後緩存結果到局部變數,記憶體或緩存中,下次讀取直接走緩存;


2. 避免主從延遲,保證讀寫強一致性
     a  如果是一主一從,可以使用資料庫提供的半同步複製,寫完成時會等待從庫同步完成後返回;但是強一致性會降低寫吞吐量
     b  mysql5.6以後可以使用semi-sync功能,實現強一致性;
     c  線上讀寫都是使用主庫,從庫只做線下運營,分析使用;為了緩解資料庫讀寫壓力,在資料庫上架構緩衝層;

3. 強制讀走主庫

4. 配置經驗延遲時間,延遲時間範圍內的查詢走主庫;
      a 中間件實現。很多中間件提供這種配置
      b 應用層實現。架構一個緩存層,對數據修改後將key保存在cache總,設置生存時間為經驗延遲時間。查詢時首先查詢cache,如果找到key則強制走主庫;

另外,通過show slave status 欄位‘Second_Behind_Master’可以檢測主從延遲時間,在延遲較大時,將讀切到讀庫,如果是使用中間件,可以配置強制讀主庫的延遲:slaveThreshold;這種方式不能保證讀到臟數據,對一致性要求不高時可以使用;


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 由於資料庫伺服器崩潰,造成了無法進入系統進行資料庫備份,只能把oracle相關文件拷貝出來。對於拷貝出來的文件在測試機上進行一次不完全恢復,具體流程如下所示: 1、安裝oracle 10g服務端並創建一個與要進行恢復的資料庫相同名稱的實例(db_name,sid,字元集一樣,因為在創建控制文件時,會 ...
  • 簡介 資料庫快照,正如其名稱所示那樣,是資料庫在某一時間點的視圖。快照設計最開始的目的是為了報表服務。比如我需要出2011的資產負債表,這需要數據保持在2011年12月31日零點時的狀態,則利用快照可以實現這一點。快照還可以和鏡像結合來達到讀寫分離的目的。下麵我們來看什麼是快照。 什麼是快照 資料庫 ...
  • Oracle 9i 開始支持閃回,Oracle10g開始全面支持閃回功能,Oracle11g有所完善,為大家快速的恢複數據,查詢歷史數據提供了很大的便捷方法。 本文主要對Oracle常用閃回使用做些詳細介紹,其中對於不常用的事務和版本閃回,這裡就不做介紹 一、Oracle閃回概述 二、Oracle閃 ...
  • 引言 在上一篇中 "大數據學習系列之二 HBase環境搭建(單機)" 中,成功搭建了Hadoop+HBase的環境,本文則主要講述使用Java 對HBase的一些操作。 一、事前準備 1.確認hadoop和hbase成功啟動 2.確認防火牆是否關閉 3.maven所需要的依賴架包 4.修改hosts ...
  • 資料庫簡介、資料庫相關產品、Mysql簡介、mysql資料庫的安裝、客戶端與伺服器端模型、客戶端與伺服器端模型、MySQL管理、mysql多實例配置、mysql忘記密碼怎麼辦? ...
  • 一、數據更新 示例1:把表名為“aa”的表中欄位"a"的值為“1”的數據更新兩個欄位的數據如下 備註: 只更新第一條記錄: db.col.update( { "count" : { $gt : 1 } } , { $set : { "test2" : "OK"} } ); 全部更新: 只添加第一條: ...
  • 一、什麼是MongoDB? MongoDB 是一個基於分散式文件存儲的資料庫。 MongoDB 是一個介於關係資料庫和非關係資料庫之間的產品,是非關係資料庫當中功能最豐富,最像關係資料庫的。 MongoDB 將數據存儲為一個文檔,數據結構由鍵值(key=>value)對組成。MongoDB 文檔類似 ...
  • 工作中需要創建SQL Job對資料庫進行定期備份,現把腳本記錄如下。 1. 完整備份: 2. 差異備份: 以上兩段可以分別創建兩個SQL Job,比如完整備份的作業可以定在每周天凌晨運行,執行成功後刪掉之前的備份文件(代碼中有刪除的語句),差異備份的作業定在周一到周六每天凌晨運行。 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...