聊聊mq的使用場景

来源:https://www.cnblogs.com/itsoku123/archive/2019/05/05/10811003.html
-Advertisement-
Play Games

mq常用的一些使用場景:1. 通過非同步方式對系統解耦;2. 增加系統的併發處理能力;3.系統日誌的處理;4.事件驅動業務的一些場景 ...


mq的作用

  1. 通過非同步方式對系統解耦
  2. 增加系統的併發處理能力

通過非同步方式對系統解耦

以用戶註冊為例,一般情況下:
在這裡插入圖片描述

分下一下,上面過程存在的一些問題:

  1. 註冊過程會調用4個服務(註冊服務、郵件服務、簡訊服務、積分服務),服務之間依賴性太強,任何一個服務不可用,直接影響整個註冊業務
  2. 介面耗時太長,每個服務耗時100ms,註冊流程耗時400ms
  3. 對用戶來說,用戶信息入庫是主要的業務流程,其他並不是響應用戶過程中直接關註的邏輯,可以非同步進行處理

採用mq的方式實現:
在這裡插入圖片描述

過程:

  • 調用註冊服務,註冊信息入庫,耗時100ms
  • 投遞註冊消息到mq
  • 返回註冊成功
  • 對於用戶來說耗時200ms
  • 其他3個操作(發郵件、發簡訊、增加積分)從消息隊列中拉取消息進行處理,對於主流程來說是非同步操作

將依賴於3個服務轉換為只依賴於mq服務,只需要保證註冊服務、mq服務高可用,即可以保證註冊服務的高可用,相比保證其他3個服務高可用上容易了許多。

增加系統的併發處理能力

以電商中的秒殺場景為例,採用同步處理:

  • 用戶點擊秒殺
  • 調用訂單服務,驗證庫存、鎖定庫存
  • 跳轉到支付頁面進行支付

分析一下,存在的問題:

  • 驗證庫存、鎖定庫存會訪問資料庫
  • 秒殺場景,商品數量有限,請求量非常大,每個請求來了都做以上處理,直接會把資料庫壓垮,導致資料庫無法對外提供服務,資料庫的不可用直接導致整個業務的不可用,秒殺活動打水漂。

  • 大量請求會同時到達,同時去訪問資料庫,資料庫連接有限,導致很多請求會處於等待狀態,導致併發性能急劇下降
  • 大量用戶同時操作庫存,存在爭搶資料庫鎖的情況,容易導致死鎖
  • 秒殺中數量一般是有限,大量用戶搶購,其實最終只有很少的用戶能夠搶購到

大家都有在銀行辦理業務的經驗,銀行處理業務的流程:領號、排隊、等待叫號辦理業務

秒殺中我們也可以參考銀行辦理業務的流程:

  • 用戶點擊描述
  • 系統接受到用戶請求後,生成一個唯一的編號,然後投遞一條消息(秒殺下單)到mq
  • 響應用戶:秒殺正在處理中
  • 秒殺系統從mq中拉取消息進行處理,處理完成之後告知用戶,這步操作對於用戶來說是非同步處理的過程

從上面可以看出,從接受用戶請求到響應用戶請求,未訪問資料庫,只有生成編號和發送消息的操作,這部分處理速度是非常快的,不存在性能的問題,資料庫也不存在壓力的問題了,所有用戶的請求都被作為一條消息投遞到mq進行非同步處理;從而解決了秒殺中同步處理遇到的各種問題。

其他一些使用場景

  1. 系統日誌的處理
    系統手機日誌,非同步發送到mq,日誌服務隊從mq中拉取消息進行各種處理,關於這個以後我們會專門討論。
  2. 通過事件驅動的一些業務,也可以使用mq實現

總結

  1. mq是採用非同步的方式來解決系統耦合性的問題,併發處理的問題;重點是在於非同步,那麼什麼情況下使用非同步呢?當調用方不強依賴於被調用方的結果的時候,可以採用非同步的方式進行處理,此時可以使用mq。
  2. 當調用方強依賴於被調用方的結果的時候,需要使用同步的方式,不能使用mq

mq系列整個內容,我們將討論

  1. mq的使用場景
  2. 業務系統中投遞消息的幾種方式?
  3. 如何確保投遞消息一定成功?
  4. 消息消費的幾種方式
  5. 如何確保消息至少消費一次
  6. 如何保證消息消費的冪等性

路人甲Java,只生產乾貨,公眾號:javacode2018,喜歡的關註一下。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 1. 添加新元素 2.刪除已有元素 ...
  • 針對JS高級程式設計這本書,主要是理解概念,大部分內容源自書內。寫這個主要是當個書中的筆記加總結 存在的問題請大家多多指正! 6.1理解對象 創建對象的兩個方法(暫時) 6.1.1 類型屬性 JS不能訪問的數據屬性 Configurable 能不能用delete刪除 預設true Enumerab ...
  • jq + 面向對象實現拼圖游戲 知識點 拖拽事件 es6面向對象 jquery事件 效果圖 html: css: js: javascript class Game { constructor() { this.boxW = parseInt($('.box').css('width')); thi ...
  • 一、Vue的生命周期 生命周期就是指一個對象的生老病死的過程。 用Vue框架,熟悉它的生命周期可以讓開發更好的進行。 所有的生命周期鉤子自動綁定 this 上下文到實例中,因此你可以訪問數據,對屬性和方法進行運算。這意味著,你不能使用箭頭函數來定義一個生命周期方法 (例如 created: () = ...
  • 什麼是領域驅動設計 領域驅動設計(DDD):DDD的全稱為Domain driven Design,是一套綜合軟體系統分析和設計的面向對象建模方法,是針對複雜系統設計的一套軟體工程方法,是一種思想。 什麼是領域:領域是問題域 + 業務期望 一:問題域:領域中有許多的問題域,領域是有邊界的,要註重核心 ...
  • 文章首發: "結構型模式:外觀模式" 七大結構型模式之五:外觀模式。 簡介 姓名 :外觀模式 英文名 :Facade Pattern 價值觀 :統一口徑、一致對外 個人介紹 : Provide a unified interface to a set of interfaces in a subsy ...
  • fastDSF介紹 FastDFS是用c語言編寫的一款開源的分散式文件系統,它是由淘寶資深架構師餘慶編寫並開源。FastDFS專為互聯網量身定製,充分考慮了冗餘備份、負載均衡、線性擴容等機制,並註重高可用、高性能等指標,使用FastDFS很容易搭建一套高性能的文件伺服器集群提供文件上傳、下載等服務。 ...
  • 物聯網架構_對AWS的Greengrass的認識與理解 一,前言: 這段時間有許多的收穫,分析,還有總結,其中包括新系統的設計與開發,以及其中新技術的踩坑等等等。 但是最近真的很忙,項目的推進,面試工作等,尤其五月份還有考試。所以,趕緊趁著五一假期有些空暇,先發一些東西。之後,有機會再對自己的素材( ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...