MQ收到無序的消息時如何進行業務處理

来源:https://www.cnblogs.com/cjsblog/archive/2023/02/22/17145437.html
-Advertisement-
Play Games

業務背景 跟第三方系統做對接,雙方通過ActiveMQ進行通信,消息之間是有內在關聯的,也就是消息本來應該是有業務順序的,但由於一些原因,現在收到消息是亂序的,這種情況下做業務處理就有一點小問題了 方案一:自己重排序 收到消息後,自己在記憶體排序,然後按順序丟到隊列中,自己控制消息的發送和接收保證收到 ...


業務背景

跟第三方系統做對接,雙方通過ActiveMQ進行通信,消息之間是有內在關聯的,也就是消息本來應該是有業務順序的,但由於一些原因,現在收到消息是亂序的,這種情況下做業務處理就有一點小問題了

方案一:自己重排序

收到消息後,自己在記憶體排序,然後按順序丟到隊列中,自己控制消息的發送和接收保證收到按發送的順序來收到消息。

如果自己排序的話就要對每個消息標記一個順序,同時還要指定預先定義好哪些消息屬於一類並且相互之間有依賴順序。

具體實現的話,可以這樣做:

1、收到一條消息,封裝一下加個序號,放到Redis中,用列表或者有序集合來存儲,同時用字元串類型存一下這個業務單號的當前最小序號(預設是1)

2、如果是用有序集合存的話,用序號當做分數,這樣消息丟進去就已經排好序了,每次用最小分數的那個元素和當前最小序號比較,如果小於或等於,則刪除這個元素,將它發送到MQ,同時最小序號加1

3、如果用列表存的話,可以lpush添加,lrange查最先放進去的那個元素,和當前最小序號比較,小於或等於,則rpop刪除,發MQ,最小序號加1

大概就是這麼個意思,以上是我的思路,沒有實現,感覺應該是可行的

方案二:定時任務掃描

1、收到消息後,先存到資料庫中,這條記錄的狀態為“未消費”

2、進行業務處理

(1)如果處理這條消息不需要依賴其它的消息,或者它依賴的消息已經先於它被處理了,那麼直接做業務處理,完成後更新消息記錄表,將這條記錄的狀態置為“已處理”

(2)如果這條消息依賴的消息還沒有收到(通常表現為可能是某個表的數據狀態不對或者沒有數據,等等),則不處理

3、定時任務掃描消息記錄表,找到那些狀態為“未處理”的數據,調用統一的消息處理介面,依次執行,邏輯同上

舉個例子,

假設某個業務場景會收到5個消息,順序假設為1、2、3、4、5

最極端的情況,假設先收到5,存表,暫不處理

再收到4,存表,暫不處理

3,存表,暫不處理

2,存表,暫不處理

1,存表,立即處理,更新狀態“已處理”

定時任務第一次掃描,2會被處理,更新狀態“已處理”

第二次掃描,3會被處理,更新狀態“已處理”

第三次掃描,4會被處理,更新狀態“已處理”

第四次掃描,5會被處理,更新狀態“已處理”

至此,所有消息都按順序被處理完了

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • /* * @Author: DEFT:[email protected] V:NOTFOUND6O6 * @Date: 2023-02-22 19:02:35 * @LastEditors: Please set LastEditors * @LastEditTime: 2023-02-22 ...
  • 2023-02-22 1、Git常用命令 (1)Git中的初始化 git init (2)查看文件狀態 git status (3)將內容提交到暫存區 git add 文件的名稱 (4)將內容提交到本地倉庫 git commit -m "這裡放置本次提交的說明" (5)複合形式——將內容提交到暫存區 ...
  • 模塊的基本使用 模塊使用步驟 創建模塊(創建模塊,創建包,創建類,定義方法) -創建兩個模塊myOne,myTwo 在模塊的src目錄下創建module-info.java的描述性文件,該文件專門定義模塊名,訪問許可權,模塊依賴等信息 -描述性文件中使用模塊導出和模塊依賴來進行配置並使用 模塊中所有未 ...
  • 迭代器:迭代的工具。迭代是更新換代,如你爺爺生了你爹,你爹生了你,迭代也可以說成是重覆,並且但每一次的重覆都是基於上一次的結果來的。如電腦中的迭代開發,就是基於軟體的上一個版本更新。以下代碼就不是迭代,它只是單純的重覆 while True: print('*'*10) 一、可迭代對象 pytho ...
  • Mybatis介紹與入門 1.官方文檔 Mybatis中文手冊:mybatis – MyBatis 3 或者 MyBatis中文網 Maven倉庫:Maven Repository: org.mybatis » mybatis » 3.5.7 (mvnrepository.com) 2.概述 2.1 ...
  • 原神是由米哈游製作發行的一款開放世界冒險游戲,號稱全球玩家5600W,可以說是非常熱門了,朋友都說好玩,哎,但我就是不玩,就是皮… 但是,今天我就要用python來打開“原神世界”的大門!探索一下游戲角色! 話不多說直接開整! 準備工作 這是本次需要使用到 的工具 nodejs pyexecjs r ...
  • Java ”框架 = 註解 + 反射 + 設計模式“ 之 註解詳解 每博一文案 剎那間我真想令時光停住,好讓我回顧自己,回顧失去的年華,緬懷哪個穿一身短小的連衣裙 和瘦窄的短衫的小女孩。讓我追悔少年時代,我心靈的愚鈍無知,它輕易地錯過了我一生中本來 可以獲得歡樂和幸福。 —————— 《平凡的世界》 ...
  • Ansible 快速入門到放棄 最是人間留不住,朱顏辭鏡花辭樹。 1-Ansible 簡介 Ansible是一個配置管理和配置工具,它使用SSH 連接到伺服器並運行配置好的任務,伺服器上只需要開啟ssh,所有工作都交給client 端的ansible 負責。 當我們有批量部署的需求時,我們可以自己寫 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...