2024年2月27日,在“2024年世界移動通信大會”(Mobile World Congress 2024,簡稱MWC 2024)上,以“雲原生×AI,躍遷新機遇”為主題的創原會圓桌成功舉辦。會上,全球企業技術精英面對面交流,圍繞雲原生×AI技術變革,分享企業在架構、算力、存儲、數智、應用開發、媒 ...
華為雲GaussDB(for MySQL)首席架構師Chong Chen2024年2月27日,在“2024年世界移動通信大會”(Mobile World Congress 2024,簡稱MWC 2024)上,以“雲原生×AI,躍遷新機遇”為主題的創原會圓桌成功舉辦。會上,全球企業技術精英面對面交流,圍繞雲原生×AI技術變革,分享企業在架構、算力、存儲、數智、應用開發、媒體技術、安全體系方面的七大躍遷。並結合海外五大產品專項行動,共同探討構建資料庫安全、穩定、高質量雲底座等技術話題。
圍繞“數智融合,釋放數據新價值”的圓桌話題,華為雲GaussDB(for MySQL)首席架構師Chong Chen展開了以《雲原生資料庫GaussDB(for MySQL)架構與創新》為主題的演講,通過GaussDB(for MySQL)雲原生資料庫架構演進、新技術引入和極致性能的分享,帶來了破解傳統資料庫上雲後限制企業發展困局的解決方案,助力企業釋放數據新價值。
資料庫從傳統部署向雲原生Serverless化演進
在過去數據中心時代,傳統業務模式下的資料庫架構簡單,對伺服器和存儲系統的依賴度很高,常常面臨資源擴展無彈性、交付時間長、運維複雜化等局限,導致企業業務發展受限。
經過數十年的高速發展,資料庫經歷了從雲化、雲原生化到現在的雲原生Serverless化三個階段的演進,完成了以資源為中心到應用為中心的蛻變。
- 資料庫雲化階段,隨著各項業務模塊的上雲,雲上部署的資料庫擁有數據服務自動化、存儲資源池化的能力,打破了傳統資料庫的局限;
- 資料庫雲原生化階段,雲原生資料庫採用領先的存算分離架構設計,真正實現按需、極致彈性擴展能力,完成了雲化階段的進階;
- 資料庫雲原生Serverless化階段,提供了一種新的商業模式,可以根據用戶業務負載,自動匹配相應資源,用戶無須預估業務規模,也不用考慮底層基礎設施服務,真正實現按需付費,極大提升了資源利用效率。
GaussDB(for MySQL)雲原生設計理念
傳統資料庫架構在上雲後,已經進入性能和容量瓶頸,面臨計算資源浪費、存儲資源浪費、網路資源浪費、添加只讀過程緩慢、只讀數據複製延遲、備份恢復速度慢等挑戰,傳統資料庫架構不再適用於當下的企業互聯網環境。企業急需功能更加強大、性能更加穩定的雲原生資料庫來支撐企業上雲後的業務訴求。
基於此,華為雲GaussDB(for MySQL)應運而生,其設計理念如下:
- 解耦。計算與存儲的分離,存儲中持久化以及存儲可用性分離,按系統的職能可以最大限度地解耦資源,使得各自相對獨立地擴展和管理;
- 近數據計算下推(NDP)。I/O密集型負載下推到存儲節點完成,比如Redo日誌處理,頁重構,複雜查詢的運算元下推等;
- 充分利用雲存儲的能力。讓存儲層實現獨立容錯和自愈服務,還可以共用訪問(一寫多讀);
- 充分發揮SSD的優勢。可以避免隨機寫帶來的寫放大,減少磨損、降低時延;
- 降低網路瓶頸。當性能瓶頸從計算存儲轉到網路時,可以減少網路流量,或利用先進的網路技術和硬體,如RDMA,可編程NIC等。
GaussDB(for MySQL)系統架構及優勢
GaussDB(for MySQL)整體架構基於“日誌即資料庫“以及分層解耦(Disaggregation) 的設計理念,通過日誌的數據流轉來連通和保障所有分散式模塊之間的數據一致性,包括分散式存儲(Log store, Page store)、主節點、多個只讀節點。日誌即資料庫的設計理念極大降低了網路的通信開銷,分層解耦又使得資源儘可能地池化,實現總體資源利用率最大化。
GaussDB(for MySQL)具體優勢如下:
跨AZ部署,高可用
基於華為研發的分散式共用存儲,GaussDB(for MySQL)支持跨AZ (Availability Zone)部署,AZ故障自動檢測並修複,支持0數據丟失(RPO=0),主備倒換時延在10秒內(RTO<10秒),讓企業數據更安全可靠可用性更高。
RegionlessDB,物理複製實現本地訪問和跨區域容災
GaussDB(for MySQL) RegionlessDB支持跨Region容災以及跨Region近數據訪問能力,基於物理複製,完成數據實時同步(平均數據同步時延小於1秒),提升用戶訪問效率。
軟硬協同優化,支持並行、複雜查詢,性能遠超開源資料庫
GaussDB(for MySQL)基於華為研發的分散式共用存儲,軟硬體深度優化,性能相比開源MySQL提升7倍;同時,支持並行查詢,最大化利用計算節點資源,複雜查詢性能提升10倍。
近數據處理NDP
GaussDB(for MySQL)把一部分I/O密集的操作下推到分散式共用存儲,減少存儲網路流量,充分利用存儲CPU資源,提升總體的系統資源利用率以及性能。
自動彈性擴展,分鐘級生效,應對不確定的業務增長
GaussDB(for MySQL)支持根據業務負載變化,自動擴大和縮小實例的規格、自動增加和刪除只讀節點,及時應對業務變化,提高運維效率。
GaussDB(for MySQL)行業應用及未來發展
GaussDB(for MySQL)在金融、互聯網、游戲等領域有著廣泛的應用。在華為雲資料庫的強力保障下,《鎮魂街:天生為王》業務快速上線,1個月內完成游戲內測至上線全流程,流程縮短了50%;游戲上線首日,支撐百萬游戲用戶同時線上,游戲穩定運行不中斷,上線首日榮登華為應用市場游戲熱榜Top1。
隨著GaussDB(for MySQL)產品的演進,GaussDB(for MySQL)的Serverless服務發展勢頭強勁,全棧無感Serverless,帶領雲原生資料庫進入智能時代。
GaussDB(for MySQL) Serverless可以智能決策和智能運維,具有速度快、粒度細、高穩定和算力大等特點,有著廣泛的應用場景,比如IoT邊緣計算、開發測試、無法預估負載等場景。這些場景平均負載比較低,資源大部分時間可能都是閑置的,使用Serverless後,最高可節約計算資源成本達90%。在實際業務中,某工廠考勤系統使用GaussDB(for MySQL) Serverless後,成本降低74%,真正幫助客戶實現降本增效。
技術的車輪滾滾向前,但不管駛向何方,落腳點最終都是為業務服務,只有最貼合客戶需求的技術才能走到最後。華為雲資料庫將攜手數百萬客戶持續業務創新,解決客戶最關心的問題,深耕技術與服務,打造企業數字化轉型最優解。