GaussDB(for Redis)雙活容災支持4大應用場景,為業務安全保駕護航

来源:https://www.cnblogs.com/huaweiyun/archive/2022/09/06/16661849.html
-Advertisement-
Play Games

摘要:GaussDB(for Redis)的雙活解決方案,支持同域主備、同域雙主、異地主備、異地雙主四大應用場景,提供了安全可靠的容災能力。 一場火災引發的思考 2021年3月10日,歐洲某雲服務提供商的數據中心發生火災,當地消防部門出動上百名消防員才將大火撲滅,受影響的伺服器共托管了約360萬個網 ...


摘要:GaussDB(for Redis)的雙活解決方案,支持同域主備、同域雙主、異地主備、異地雙主四大應用場景,提供了安全可靠的容災能力。

一場火災引發的思考

2021年3月10日,歐洲某雲服務提供商的數據中心發生火災,當地消防部門出動上百名消防員才將大火撲滅,受影響的伺服器共托管了約360萬個網站,火災過後,這些受影響的網站大多處於關閉狀態。

機房火災、網路異常、電力故障、自然災害等極端場景,對互聯網業務的連續運行有著巨大的威脅。

在安全組、反親和、多可用區部署等能力加持下,如今的雲服務已能夠給客戶業務帶來比“自建”更可靠的保障。在面對上述極端災害場景中,雲服務也能提供更高級的防範方案——雙活容災。

誰說Redis不能雙活容災?

今天我們來聊聊全世界機房裡的主力資料庫服務——Redis。作為業務剛需,Redis有兩大類典型應用場景:

1)緩存

Redis作為資料庫緩存,搭配MySQL或其他關係型資料庫使用。一旦緩存故障失效,高併發的流量請求將對下游資料庫造成嚴重衝擊,無法繼續支撐高併發業務,雪崩甚至可能導致系統完全不可用。

2)主資料庫

Redis獨立存儲核心數據,兼顧持久化與高併發訪問。一旦Redis發生嚴重故障,將造成用戶核心數據丟失以及關鍵業務不可用。

可見Redis的穩定性是企業要考慮的TOP問題。但是由於數據無法可靠存儲、架構不穩定等原因,開源Redis很難像MySQL那樣做出穩定可靠的雙活系統,這也是國內雲廠商很少主推Redis雙活容災的原因。

在華為內部,比如華為商城、流程IT平臺等大型業務,對資料庫(尤其是MySQL、Redis)都有很高的可靠性要求。在與這類企業級項目的聯合演進過程中,雲原生資料庫GaussDB(for Redis)推出了企業級的雙活容災方案,支持四大應用場景,為業務的持續運行保駕護航。

企業級雙活容災,要看GaussDB(for Redis)

GaussDB(for Redis)的雙活容災是基於GaussDB NoSQL存算分離架構,建立可靠的數據傳輸鏈路,實現兩個實例間數據同步。如果實例A遇到突發故障導致不可用,客戶的業務可以快速接入實例B,避免業務長時間受損。

從原理上看,資料庫實例內增加高可靠性的Rsync數據同步服務,實時監控WAL增量日誌,解析後將數據同步到目標實例。

上圖中實線表示實例A向實例B同步數據的路徑,虛線表示實例B向實例A同步數據的路徑,雙活解決方案支持配置為單向同步或雙寫同步。實例A和實例B可以部署在同一個Region,也可以部署在不同的Region。
因此,將兩個GaussDB(for Redis)實例的部署位置和主備角色進行不同組合,能搭建出不同形態的雙活容災組網,客戶可以根據自身的業務規劃和使用場景自由選擇。

GaussDB(for Redis)雙活容災:四大應用場景

接下來我們詳細聊一下GaussDB(for Redis)雙活容災的不同組網形態。

同域雙活部署在同一Region,通過對等連接打通網路,對等連接無帶寬費用,同步時延在毫秒級,又分為同域主備模式和同域雙主模式。

異地雙活部署在不同Region,可以是同一城市的不同Region互通,也可以是全球不同城市互通,通過跨域的雲連接打通網路,需要根據業務的寫流量來配置合適大小的帶寬。

綜上,GaussDB(for Redis)雙活容災共支持四大應用場景:

同域主備模式

在同域主備模式下,主實例可讀可寫,備實例只讀,數據從主實例單向同步到備實例。如果主實例發生故障,可以將備實例角色變更為主實例,業務繼續從新的主實例接入處理讀寫操作。

同域主備模式適合在同Region低成本獲取容災能力、有讀寫分離訴求的業務場景。相比同域雙主模式具備更高的數據一致性,不擔心雙實例寫衝突的問題,相比異地雙活的成本更低。

同域雙主模式

在同域雙主模式下,兩個實例都是可讀可寫,任一實例都可以發起數據同步,雙實例不涉及業務切流。

同域雙主模式適合在同Region低成本獲取容災能力、有雙寫訴求的業務場景。相比同域主備模式,兩個實例的計算節點都在處理讀寫業務,資源利用率更高,但需要在業務層面避免key衝突的問題,相比異地雙活的成本更低。

異地主備模式

在異地主備模式下,主實例可讀可寫,備實例只讀,數據單向同步,主實例故障時由備實例繼續處理業務。

異地主備模式適合期望有跨Region容災能力、有讀寫分離訴求的業務場景,例如金融服務或核心用戶數據等。相比異地雙主模式具備更高的數據一致性,不擔心雙實例寫衝突的問題,相比同域雙活具備跨Region容災能力。

異地雙主模式

在異地雙主模式下,兩個實例都是可讀可寫,數據雙向同步,任一實例發生故障則由另一實例繼續處理業務。

異地雙主模式適合期望有跨Region容災能力、有雙寫訴求、或者異地業務希望在就近Region接入資料庫獲取更低時延的業務場景,例如廣告競價、推薦系統等。相比異地主備模式,資源利用率更高,需要避免key衝突的問題,相比同域雙活具備跨Region容災能力。

雙活容災方案已在超大規格集群上驗證穩定可靠

華為內部某重要業務部門在超大規模集群(1w+個vCPU算力,1000+TB數據量)上,使用了基於GaussDB NoSQL統一架構的雙活解決方案,在故障演練中進行了一系列嚴苛的可靠性測試,其中包括模擬機房斷電、網路故障等場景,最終,GaussDB(for Redis)的雙活容災能力,充分滿足了業務部門對RTO和RPO等指標的嚴格要求。

總結

綜上所述,GaussDB(for Redis)的雙活解決方案,支持同域主備、同域雙主、異地主備、異地雙主四大應用場景,提供了安全可靠的容災能力,具體亮點如下:

  1. 組網靈活,按需搭建雙活容災系統
  2. 支持秒級快照,快速搭建雙活關係
  3. 支持實時同步最新數據,同Region時延毫秒級
  4. 採用多線程非同步併發模式發送數據,按Key保序
  5. 基於WAL單調遞增特性,採用滑窗機制確保可靠傳輸
  6. 採用Reactor事件管理的機制,全流程批量高效發送
  7. 支持異常重傳,解決網路抖動導致的丟包或延遲現象
  8. 支持斷點續傳,每個DB持久化應答過的同步日誌序號,在發生宕機、網路隔離、進程重啟等故障場景,可從該位置進行續傳。

附錄

  • 本文作者:華為雲資料庫GaussDB(for Redis)團隊
  • 更多產品信息,歡迎訪問官方博客:bbs.huaweicloud.com/blogs/248875

 

點擊關註,第一時間瞭解華為雲新鮮技術~


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 巴西ANATEL近日發佈了一項新的5159法案,該法案內容主要是關於行動電話使用的有線和無線電源和充電器。 法案稱為《手機用充電器合格評定技術要求及測試程式》,涵蓋了產品安全性和EMC的要求。新規將於公佈後180天,即今年10月26日起生效,該法案將取代現行的3481法案。 5159法案的新規定確實 ...
  • 1. 前言 筆者在 《從 Linux 內核角度看 IO 模型的演變》一文中曾對 Socket 文件在內核中的相關數據結構為大家做了詳盡的闡述。 又在此基礎之上介紹了針對 socket 文件的相關操作及其對應在內核中的處理流程: 並與 epoll 的工作機制進行了串聯: 通過這些內容的串聯介紹,我想大 ...
  • 前置條件 確認系統版本 win10 19041版本以及更高 查看方式:win + r 輸入winver win11 * 啟用或關閉Windows功能 win + r, 輸入 optionalfeatures,勾選適用於Linux的Windows子系統,和虛擬機平臺選項。然後重啟電腦。 官方文檔提示可 ...
  • 2022-09-06 1、為某個欄位設置別名(as關鍵字) 以“students”為例: students表的欄位有:id,name,age,gender,is_del select name as n,age as a from students; 說明:select 屬性名 as 新名稱,屬性名 ...
  • MVCC全稱是Multi-Version Concurrency Control(多版本併發控制),是一種併發控制的方法,通過維護一個數據的多個版本,減少讀寫操作的衝突。 如果沒有MVCC,想要實現同一條數據的併發讀寫,還要保證數據的安全性,就需要操作數據的時候加讀鎖和寫鎖,這樣就降低了資料庫的併發... ...
  • 數據的分類: 結構化數據:有固定的格式,例如一個表格裡面的信息 非結構化數據:無固定格式,例如圖片、網頁、語音、視頻 半結構化數據:html、xml格式的數據 資料庫:存放數據的一個集合,可以是文件的方式,也可以是其他的方式。 資料庫的發展: 萌芽階段:文件系統 使用磁碟文件來存儲數據,比如一個文檔 ...
  • 1.創建備份目錄: mkdir -p /dcits/sx_xmz/sx_data_bak chown -R oracle18c:oinstall /dcits/sx_xmz/sx_data_bak 2.腳本文件編寫 vi databak.sh 輸入如下內容 #設置環節變數 export ORACLE ...
  • aliases: [Oracle表空間] tags: [資料庫,Oracle,Blog] summary: [Oracle表空間常用操作,包括查詢、分析、擴容、刪除、優化等] date: [2022-09-06] links: 一、表空間查詢 相關表和視圖: dba_data_files dba_t ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...