怎麼用消息隊列實現分散式事務?

来源:https://www.cnblogs.com/wing011203/archive/2023/03/08/17190491.html
-Advertisement-
Play Games

這篇文章描述如何使用消息隊列中的事務消息機制實現分散式事務。事務消息適用於需要非同步更新數據,並且對數據實時性要求不太高的場景。 ...


當消息隊列和事務聯繫在一起時,它指的是消息生產者和消息消費者之間如何保持數據一致性。

什麼是分散式事務?

事務是指當我們進行若幹項數據更新操作時,為了保證數據的完整性和一致性,我們希望這些更新操作要麼都成功,要麼都失敗。而更新的數據,並不局限於資料庫中的數據,它可以是磁碟上的文件,也可以是一個遠程服務,或者以其他形式存儲的數據。

事務會有四個特性,俗稱ACID:

  • 原子性(A),一個事務操作不可分割,要麼成功,要麼失敗。
  • 一致性(C),指數據在事務執行完成的時間之前,讀到的一定是更新前的數據,之後讀到的一定是更新後的數據,不存在一個時刻,讓用戶讀到更新過程中的數據。
  • 隔離性(I),一個事務的執行不應該被其他事務干擾。
  • 持久性(D),一個事務一旦完成提交,後續的其他操作和故障都不會對事務的結果產生影響。

對於分散式系統來說,嚴格實現ACID幾乎是不可能的,或者說代價太過,因此,我們在保證可用性和不嚴重犧牲性能的前提下,實現數據一致性已經很困難,因此,出現了很多變種,例如順序一致性、最終一致性等。

目前大家所說的分散式事務,更多情況下,是在分散式系統中事務的不完整實現,在不同的應用場景中,有不同的實現,目的都是通過一些妥協來解決實際問題。

在實際應用中,比較常見的分散式事務有2PC(Two-phase Commit,二階段提交)、TCC(Try-Confirm-Cancel)和事務消息。

事務消息使用的場景主要是那些需要非同步更新數據,並且對數據實時性要求不太高的場景。

消息隊列如何實現分散式事務?

事務消息需要消息隊列提供相應的功能才能實現,Kafka和RocketMQ都提供了事務相關功能。

下麵以下訂單為例,說明一下如何使用消息隊列實現分散式事務。

首先,訂單系統在消息隊列上開啟一個事務,然後訂單系統給消息伺服器發送一個“半消息”,這個半消息不是說消息內容不完整,它包含完整的消息內容。半消息和普通消息的唯一區別,是在事務提交之前,對於消費者來說,這個消息時不可見的。

半消息發送成功後,訂單系統就可以執行本地事務了,在訂單中創建一條訂單記錄,並提交訂單庫的資料庫事務。然後根據本地事務的執行結果決定提交或者回滾事務消息。如果訂單創建成功,那麼就提交事務消息,購物車系統就可以消費到這條消息繼續後續的流程。如果訂單創建失敗,就回滾消息,購物車系統就不會受到這條消息。這樣基本實現了“要麼都成功,要麼都失敗”的一致性要求。

那麼當提交事務消息時失敗了,應該怎麼處理呢?對於這種情況,Kakfa的解決方案比較簡單粗暴,直接拋出異常,讓用戶自行處理。RocketMQ會使用事務反查的機制來解決事務消息提交失敗的問題。訂單系統作為Producer,在提交或者回滾事務消息時發生網路異常,RocketMQ的Broker沒有收到提交或者回滾的請求,Broker會定期去Producer上反查這個事務對應的本地事務的狀態,然後根據反查結果決定提交或者回滾這個事務。

我們的業務代碼中需要實現一個反查本地事務狀態的街口,告知RocketMQ本地事務是成功還是失敗。

下麵是用RocketMQ進行事務處理的流程圖。

    作者:李潘     出處:http://wing011203.cnblogs.com/     本文版權歸作者和博客園共有,歡迎轉載,但未經作者同意必須保留此段聲明,且在文章頁面明顯位置給出原文連接,否則保留追究法律責任的權利。
您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 什麼是單例模式 單例模式 (Singleton Pattern)又稱為單體模式,保證一個類只有一個實例,並提供一個訪問它的全局訪問點。也就是說,第二次使用同一個類創建新對象的時候,應該得到與第一次創建的對象完全相同的對象。 簡單的說就是保證一個類僅有一個實例,並提供一個訪問它的全局訪問點,這樣的模式 ...
  • 前言 最近需要用到多包管理 monorepo 開發新項目,所以提前預研一下項目搭建。 monorepo(monolithic repository)是一種項目架構,就是用一個倉庫管理多個項目(應用,庫),react和babel的源碼倉庫都是用這種方式在管理。 優缺點略過,可以參考:精讀《Monore ...
  • 首先需要明確一點,以往瀏覽器對css的支持是不同的,不同瀏覽器的樣式可能會存在差異,對待這種差異問題,需要寫幾套不同的css來相容(邊框、圓角、顏色等),這樣是非常麻煩的,瀏覽器css顯示差異化屬於瀏覽器自身的問題,跟我們的css是沒有關係的,好的瀏覽器就有好的顯示,糟糕的瀏覽器就只有普通顯示,我們 ...
  • 簡單工廠問題 簡單工廠中我們通過參數來返回不同的產品對象,如果管理的對象過多,這個工廠函數會比較龐大,且當我們需要增加一個新的產品時,需要修改這個工廠方法,違反開閉原則(對拓展開放,對修改關閉)。 為瞭解決簡單工廠模式的問題,出現了工廠方法模式。 解決簡單工廠思路 簡單工廠類圖關係類似如下: 如上圖 ...
  • 本篇文章將介紹如何使用 vite 打包我們的組件庫,同時告訴大家如何使用插件讓打包後的文件自動生成聲明文件(*.d.ts) 打包配置 vite 專門提供了庫模式的打包方式,配置其實非常簡單,首先全局安裝 vite 以及@vitejs/plugin-vue pnpm add vite @vitejs/ ...
  • 在原博主Instagram 上每天都會發佈 JavaScript 的多選問題,並且同時也會在這個倉庫中發佈。 從基礎到進階,測試你有多瞭解 JavaScript,刷新你的知識,或者幫助你的 coding 面試! :muscle: :rocket: 博主每周都會在這個倉庫下更新新的問題。 答案在問題下 ...
  • 單例模式是一種設計模式,它可以確保某個類只有一個實例,並提供一個全局的訪問點來訪問該實例,我們可以使用單例模式來管理全局狀態和共用資源。 在JavaScript中,單例模式可以通過多種方式實現,以下是一些常見的實現方式: 1. 對象字面量 使用對象字面量可以輕鬆地創建單例對象,例如: const s ...
  • 本文將介紹一種基於 CSS 變數技巧,通過合理使用 CSS 變數,實現 CSS 動畫 @keyframes 的復用。 CSS 變數 CSS 變數大家應該都比較熟悉了,已經不能算是新知識了,快速過一遍。 CSS 變數(CSS Variable),在之前也叫做 CSS 自定義屬性,其使用方式如下: // ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...