無懼百萬級併發,GaussDB(for Cassandra)讓華為推送服務更快觸達

来源:https://www.cnblogs.com/huaweiyun/archive/2023/04/23/17346396.html
-Advertisement-
Play Games

摘要:推送服務(Push Kit)是華為提供的消息推送平臺,建立了從雲端到終端的消息推送通道。通過集成推送服務,您可以向客戶端應用實時推送消息,讓應用更精準觸達用戶,是開發者提升用戶感知度和活躍度的一件利器。 本文分享自華為雲社區《無懼百萬級併發,GaussDB(for Cassandra)讓華為P ...


摘要:推送服務(Push Kit)是華為提供的消息推送平臺,建立了從雲端到終端的消息推送通道。通過集成推送服務,您可以向客戶端應用實時推送消息,讓應用更精準觸達用戶,是開發者提升用戶感知度和活躍度的一件利器。

本文分享自華為雲社區《無懼百萬級併發,GaussDB(for Cassandra)讓華為Push推送服務更快觸達》,作者:GaussDB 資料庫。

推送服務(Push Kit)是華為提供的消息推送平臺,建立了從雲端到終端的消息推送通道。通過集成推送服務,您可以向客戶端應用實時推送消息,讓應用更精準觸達用戶,是開發者提升用戶感知度和活躍度的一件利器。

華為雲GaussDB(for Cassandra) 是一款基於計算存儲分離架構的分散式資料庫,致力於提供穩定可靠、超高併發,相容Cassandra生態、彈性伸縮、一鍵部署、快速恢復、監控告警的分散式資料庫服務,在Push業務的高效架構建設中,起到了關鍵的作用。

業務挑戰

Push服務能夠協助開發者快速觸達用戶,其提供的系統級通道推送速度每秒最高可達百萬級,消息量每日百億級,並且支持實時消息回執。如此高到達率的背後,是因為Push使用了大量分散式架構、高性能隊列、大數據分析、資料庫、AI等技術,用來支撐實時推送、精準送達業務的高效開展。

Push的主要業務鏈路是發送上行消息和下行消息,接下來我們從發送下行消息流程來瞭解業務在哪些場景上用到了資料庫,以及對資料庫的要求有哪些?

下行消息交互圖如下所示:

當用戶設備網路條件良好且不擁堵的情況下,華為Push伺服器在收到消息後,會先將消息存入高性能隊列中,然後隊列消費消息發送給用戶設備。但是當用戶設備處於弱網、網路異常,或不線上、熄屏狀態時,消息無法到達設備,或此時發送消息價值較低。Push業務為了保障消息不丟失,以及提升消息的有效率,利用資料庫為底座,來支持離線消息緩存能力。

離線消息緩存是指當消息到達華為Push平臺後,如果設備不線上,華為Push平臺會將消息緩存起來,等到設備上線後,華為Push平臺會將緩存的消息再次推送給用戶。如果用戶很長時間不線上,這些緩存的消息預設保存24小時,最長保存15天,超期的消息會被Push平臺丟棄。

此時,在資料庫的選型上就需要考慮以下幾個問題:

  1. 推送速度每秒百萬級,極端場景下,大部分寫入資料庫,會有每秒百萬寫入請求,資料庫需要具備超高的寫入能力;
  2. 當設備恢復正常狀態時,消息會從資料庫中讀出發送給用戶,消息的實時性會直接影響到消息的價值,此時就要求資料庫的讀時延低且長尾時延穩定;
  3. 推送的消息中,多與時事熱點相關,容易引發流量突增,且不可預知,這就要求資料庫具有快速彈性伸縮的能力;
  4. 為達成AI智能推送的能力,可能需要對資料庫中的數據進行數據挖掘和分析,從而實施智能推送策略,資料庫需支持與主流大數據引擎相容的介面和解決方案。

為什麼選擇GaussDB(for Cassandra)?

基於以上挑戰,Push業務經過一系列技術選型,最終選擇了GaussDB(for Cassandra)資料庫。GaussDB(for Cassandra)憑藉豐富強大的特性,可以幫助Push業務很好地應對消息緩存的挑戰:

  1. 從請求量上看,GaussDB(for Cassandra)輕鬆支持千萬級併發訪問,高併發不在話下;
  2. 從時延上看,GaussDB(for Cassandra)除了本身具備超低時延的能力外,在併發量大的情況下,可通過擴容和規格變更,增加分區和負載均衡保證業務時延基本無變化;
  3. 從彈性伸縮上看,GaussDB(for Cassandra)基於存算分離架構,支持秒級存儲擴容,分鐘級計算擴容,輕鬆應對流量高峰;
  4. 從相容能力看,GaussDB(for Cassandra)支持CQL語法和靈活的數據定義,同時相容主流的批式/流式處理引擎(Spark/Flink等),且提供動態增量+全量的解決方案,供大數據分析引擎接入,充分滿足不同類型數據的接入需求。

如何利用GaussDB(for Cassandra)提升消息緩存體驗

下麵,我們將從具體的幾個技術改進來聊聊,GaussDB(for Cassandra)是如何幫助Push業務獲得更好的消息緩存體驗。

降本增效

  • 降低Push集群對資料庫請求量:
  • 表結構設計時,將同一用戶設備的多條信息存入同一partition中
  • 在讀取時,可使用範圍查詢將同一用戶設備的多條信息批量查出,且時延較低
  • 在寫入時,使用Batch寫入,降低客戶端與資料庫的交互次數
  • 降低存儲使用量:業務科通過TTL、範圍刪除、單行刪除等多種手段,根據業務情況靈活使用達到數據消亡的目的,降低存儲用量。

彈性伸縮,熱點無憂

每當出現重大新聞,各大應用均產生了海量的推送消息,Push業務收到消息後,流量激增,集群規模難以支撐巨大的流量。但依靠GaussDB(for Cassandra)的快速擴容能力,Push業務實現了分鐘級別的計算擴容,業務不受影響,而且當流量回歸正常後,可以進行縮容降低成本。

超強可靠性,底座無憂

GaussDB(for Cassandra)不僅在讀寫性能上表現優異,在數據可靠性上也表現突出。因為採用多節點分散式架構,當任意盤或節點出現故障,讀寫操作會自動切換至其他節點,理論上可以達到N-1個節點故障容忍,即集群任一節點存活即可提供完整服務。同時還支持異地雙活,實現業務恢復和故障恢復解耦,Region級高可用。

綜上所述,GaussDB(for Cassandra) 為Push業務提供了高效、穩定、安全的資料庫底座,助力Push業務實現了離線消息緩存架構。我們相信,藉助GaussDB(for Cassandra), Push業務在消息推送領域,會為開發者提供更優質的服務和工具,助力企業提升業務價值和用戶體驗。

 

點擊關註,第一時間瞭解華為雲新鮮技術~


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 哈嘍大家好,我是鹹魚 不知道大家有沒有看過這麼一部電影: 這部電影講述了男主是一個電腦極客,在電腦方面有著不可思議的天賦,男主所在的黑客組織憑藉著超高的黑客技術去入侵各種國家機構的系統,並引起了德國秘密警察組織、歐洲刑警組織的重視 剛開始看的時候以為是一部講述黑客的電影,到後面才發現其實是講“社會 ...
  • @(文件和目錄操作命令) 前言 這期呢主要說一說Linux中文件與目錄相關的命令,一共包含19個命令 cd 切換目錄 1、簡介 cd 是“change directory” 中每個單詞的首字母,其功能是從當前目錄切換到目標路徑。 2、語法格式 cd [參數選項] [目標路徑] 3、參數說明 這裡呢只 ...
  • @(文章目錄) 前言 從這篇開始,我們正式開始Linux命令了。 上一篇中已經預告,我們這篇主要說一說Linux中怎麼在命令行下查看命令幫助?Linux怎麼關機、重啟? 註意:Linux命令和命令後面的選項至少要有一個空格 一、在命令行下查看命令幫助 man 命令 1、簡介 man是Linux核心命 ...
  • 一.引言 kafka是廣泛使用的流處理組件,我們知道怎麼使用它,也知道它的實現原理。但是更重要的部分是它的設計理念,即kafka設計者當時是如何考量各種方案的,瞭解這些,對提升我們的設計能力非常有幫助。 二.動機 我們將 Kafka 設計為一個統一平臺,來處理大型公司可能擁有的所有實時數據流。 為此 ...
  • Oracle 的exp、imp、expdp、impdp命令用於資料庫邏輯備份與恢復; exp命令用於把數據從遠程資料庫server導出至本地,生成dmp文件。 筆者在實操中遇到: $exp user/pass file=exp.dmp tables = (TABLE1,TABLE3,TABLE3) ...
  • 最近讀了一本書《mysql是怎樣運行的》,讀完後在大體上對mysql的運行有一定的瞭解。在以前,我對mysql有以下的為什麼: InnoDB中的表空間、段、區和頁是什麼? redo log為什麼就能實現事務的持久性? 到底什麼是意向鎖?意向鎖有什麼用? mysql中的外連接、內連接到底是什麼? 事務 ...
  • 《Redis設計與實現》讀書筆記 簡單動態字元串 SDS的定義 結構: buf數組:用於保存字元串 len屬性:記錄SDS中保存字元串的長度 free屬性:記錄buf中未使用位元組數量 遵循C字元串以空字元串結尾的慣例,保存空字元串的位元組不計入長度 SDS與C字元串的區別 常數複雜度獲取字元串長度 因 ...
  • 4月20日,以“數實融合,韌性生長”為主題的袋鼠雲春季生長大會圓滿落幕。 在春季生長大會中,袋鼠雲帶來了數實融合趨勢下的最新行業沉澱、最佳實踐經驗和行業前瞻性的產品發佈。從大數據基礎軟體“數棧”、到低代碼數字孿生世界“易知微”,再到可觀測運維專家“雲掣”,為廣大用戶帶來了一場場精彩內容,共話數字未來 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...