數據一致性-對賬

来源:https://www.cnblogs.com/xiexj/archive/2019/10/24/11731526.html
-Advertisement-
Play Games

引子 媽媽要我的時候已經40歲了。她一定是下了很大的決定才決定終究還是想要個女孩,希望這個女孩可以解救她的孤獨。上高三的時候,有次又是因為哥哥的事情,媽媽把我從學校接回家。一個勁兒的問我怎麼辦好。在我能和她一起思考前的50多年裡,她該是多麼無助。所以當我不斷看自己的掌紋,上面的起起伏伏。在想這一切解 ...


引子

媽媽要我的時候已經40歲了。她一定是下了很大的決定才決定終究還是想要個女孩,希望這個女孩可以解救她的孤獨。上高三的時候,有次又是因為哥哥的事情,媽媽把我從學校接回家。一個勁兒的問我怎麼辦好。在我能和她一起思考前的50多年裡,她該是多麼無助。所以當我不斷看自己的掌紋,上面的起起伏伏。在想這一切解釋不通的苦難什麼時候過去。在想是不是在天堂的媽媽安排了這一切,因為理解她的痛苦是我的使命。我錯了,她不是在天堂安排了這一切,是在我很小的時候。我為理解她而生,這是我的命運。命運並不是很深奧的東西,只是一個發展脈絡。好比做金融領域,和清算、結算、對賬打交道就是命運。對賬本來用在金融領域,逐漸擴大到數據一致性領域。好比彈性工程,本來是航天領域的術語。逐漸演變為構造高可用工程的方法,方法的核心是通過提出邊界場景(失敗、風險、意外事件)問題,然後從檢測、補救、預防幾個維度去思考答案,最終反哺到系統設計開發與流程改善上,倒逼架構和流程SOP改進,再結合預案演練達到扼殺故障和縮短故障時間的目的。

概念

一致性分為強一致性和弱一致性。
強一致性的協議和手段主要有:二階段提交(2PC)、三階段提交(3PC)、TCC(Try-Confirm-Cancel)補償型。這裡面經常有人把兩階段提交和TCC補償型混淆。二階段提交實際上業務邏輯是在提交之前做的,兩階段只是事務控制的兩個階段。而TCC是將業務邏輯分為try、confirm和cancel三個階段。舉個例子:比如一個人要預售蘋果,有兩種銷售策略。一種讓用戶先付錢,根據用戶需求量準備足夠的蘋果。另一種是讓用戶先付錢同時聲明到時候先到先得,沒搶到的就退款。第一種就是二階段提交,第二種就是TCC。弱一致性在分散式系統中常用的是一種特例:最終一致性。在工作中,最終一致性通常通過補單和對賬來解決。補單主要指在運行時同時檢查返回值,如果返回值為失敗,會重新處理(補單處理)。
對賬主要分為兩個階段:數據核對和差錯處理。數據核對就是對賬中的軋賬。註意「軋」這裡念「ga」二聲。差錯處理就是對賬中的平賬。

 

 

 

應用

以秒殺場景為例說明一下對賬的常用流程。

對賬依據和標準

對賬問題最先解決的問題是對賬依據和標準。比如秒殺場景,對賬依據就是訂單號,整個鏈路採用唯一內部訂單號。對賬標準可以設定為對用戶的承諾。就是說:一次秒殺活動結束,如果給用戶的結果是成功,那麼實際上超賣了,那就自己補貨解決。如果給用戶結果是失敗了,實際上有很多沒賣出去,那就是沒賣出去放著。總之,我承諾給用戶的結果一定要履行。如果數據核對時,各個環節結果不一致,最終結果向用戶的承諾對齊。

對賬梳理

可以從明細和總數兩個方面來做對賬。在秒殺場景中,明細是一條條請求訂單。總數是成功和失敗了多少個請求,買出多少庫存。明細對賬主要用於定位問題。總數對賬是兜底策略,用來解決「怎麼證明自己是對的」的問題。

對賬時機

分為線上對賬和離線對賬。線上對賬又分為實時對賬和準實時對賬。實時對賬就是比如秒殺成功了,那下游的每一步都需要是成功的,其他情況如超時等則採用重試來進行強一致性保證。準實時對賬通常用非同步來實現。在秒殺的場景,如果訂單返回失敗,可以非同步發起一個任務進行退款,如果退款不成功則可以用多次重試進行補單。
離線對賬就是平時所說的定時任務。這個對賬方法就比較多了,自由發揮空間比較大。特別是在軋賬場景中,因為不實際修改數據,風險低,很多新技術試用可以選擇在此模塊進行。  
您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 1、變數聲明且沒有賦值; 2、獲取對象中不存在的屬性時; 3、函數需要實參,但是調用時沒有傳值,形參是undefined; 4、函數調用沒有返回值或者return後沒有數據,接收函數返回的變數是undefined。 ...
  • 1、indexOf( 數組 || 字元串 ); 作用:返回數組中某個指定元素的位置 (下標)。 ('item',['start']) 兩個參數: item: 必選、查找的元素。 start: 可選參數,規定在字元串中開始檢索的位置,它的合法取值是StringObject.legth-1如省略該參數, ...
  • appendChild(): 擴充:使用 insertBefore()方法在指定的現有子節點之前插入新的子節點。 ...
  • canvas :可以理解為一個div,作用是一塊畫板 如果想要使用canvas,需要創建一個“畫家”。生成畫家的方法: Transparency(透明度) globalAlpha = transparencyValue: 這個屬性影響到 canvas 里所有圖形的透明度,有效的值範圍是 0.0 (完 ...
  • 場景 SpringCloud-使用路由網關統一訪問介面(附代碼下載): https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/102733039 在上面已經實現使用路由網關統一訪問介面後,下麵使用路由網關的服務過濾功能。 註: 博客: h ...
  • 場景 SpringCloud-使用熔斷器儀錶盤監控熔斷: https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/102673599 SpringCloud -創建統一的依賴管理: https://blog.csdn.net/BADAO_L ...
  • 之前我們瞭解了一條查詢語句的執行流程,並介紹了執行過程中涉及的處理模塊。一條查詢語句的執行過程一般是經過連接器、分析器、優化器、執行器等功能模塊,最後到達存儲引擎。 那麼,一條 SQL 更新語句的執行流程又是怎樣的呢? 首先我們創建一個表 user_info,主鍵為 id,創建語句如下: CREAT ...
  • 1 工廠模式(Factory) 1.1 簡單工廠模式 1.2 工廠方法模式 1.3 抽象工廠模式 2 單例模式(Singleton) 3 建造模式(Build) 4 原型模式(Proto) 5 適配器模式(Adapter) 將一個類的介面轉換成客戶希望的另外一個介面。Adapter模式使得原本由於接 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...