分散式系統事務隨筆。

来源:http://www.cnblogs.com/xingxueliao/archive/2017/04/14/6706898.html
-Advertisement-
Play Games

剛做後端大概10個月,從游戲前端開發轉向後端,看似熟悉的編程語言,在不同的領域內實際上要考慮的事情也是全然不同的。 當我們談論後端開發,自然而然聯想到,後端是服務於前端的,也是承載、服務於業務的一個重要組成部分。系統的穩定性,正確性以及可用性都是需要考慮的問題。 做後端,說簡單也簡單,說難也很難,簡 ...


剛做後端大概10個月,從游戲前端開發轉向後端,看似熟悉的編程語言,在不同的領域內實際上要考慮的事情也是全然不同的。

當我們談論後端開發,自然而然聯想到,後端是服務於前端的,也是承載、服務於業務的一個重要組成部分。系統的穩定性,正確性以及可用性都是需要考慮的問題。

做後端,說簡單也簡單,說難也很難,簡單是因為你只需要對數據進行增刪查改,聚合統計就完事了,說難是因為一旦涉及到可用性,必然離不開分散式,然而我們知道,由分散式而引出的一系列問題才是最為棘手的,更不用說系統安全、部署、監控等一些列的落地措施。

你需要確保多個系統的業務數據不混亂,在某些跨服務功能的調用鏈中保持一致性,當某一個服務調用失敗之後進行重試或者回滾。

重試需要你的服務具備冪等性,也就是說,當引入重試機制之後,你需要確保一個服務在同一個業務上下文中多次調用而不會產生額外的影響,例如銀行轉賬,如果多扣幾次錢或者多加了幾次錢對於公司的業務以及信譽來說都是無法接受的,解決這個問題的辦法需要引入類似流水號的關聯標識,在不同的服務裡面形成一個標識上下文。

當我們的整個後端系統根據業務領域分割為不同的服務獨立成型時,多個服務之間相互調用往往會因為網路原因而失敗。硬體損壞、宕機、自然災害等一些列不可抗力因素告訴我們,任何事情都有可能失敗,當你的系統規模超過閾值之後,偶然將會轉變為必然。我們要的做的,不應該是想出一個萬全之策強力約束保證我們的系統一定會成功,或者懷著僥幸的心理上線然後惶惶不安的等待系統出現問題。反而更應該思考一下,當系統出現問題之後,如何快速有效的修複失敗所帶來的影響。因為我們知道,既然我們無法保證100%成功,那唯一的出路便想出一個補救措施來預防失敗,這往往會更令人更有安全感。

在討論如何解決分散式一致性之前,我們更應該反過頭來看一下,什麼是事務,它在單機模式下是如何保證業務的原子性的。我們往往將業務事務和資料庫的事務混為一談,通常來說這是沒問題的,因為後端做的不就是數據的存儲麽。但當我們把這兩個進行區分的時候,會發現大多數的時候,我們所說的事務,僅僅是通過資料庫提供的ACID來實現的。當你要對資料庫的多個表進行操作的時候,打開一個事務,並且進行相應的更新,然後提交事務,此時要麼成功,要麼回滾撤銷變更,通過資料庫提供的ACID保證我們的數據不會因為受到中斷的影響而產生混亂。

但如果我們分散式之後呢?每一個業務子系統擁有自己的資料庫,你如何保證一個業務流程,在跨子系統調用時保證原子性呢?

如果我們把希望繼續寄托於資料庫,多個業務子系統使用同一個資料庫,資料庫本身將會成為瓶頸,這樣便失去了一開始設計分散式系統的初衷。

如果某一個子系統失敗之後,造成了數據的不一致,此時,要麼回滾之前的操作,要麼就想辦法讓這個失敗的調用變為成功。

A作為業務發起者調用B和C,B成功,C失敗,A知道C失敗之後該怎麼做呢?是重新調用一次C還是通知B回滾呢?如果通知B回滾的時候也失敗了呢?

答案往往是不統一的,每一個業務領域都有根據自身情況進行處理的方式。有很多分散式事務協議能夠解決些許問題,但是這往往會造成複雜度的提升,導致將來的維護以及拓展變得舉步維艱。

CAP定理相信大家都有瞭解,在任何時候我們要麼取CP要麼取AP,CP的問題在於複雜、可用性以及可維護性差,AP的問題在於一定的時間內,數據會存在不一致性。如果選擇CP,是時候考慮一下業務的分割是否合理,只有極少的情況我們才需要保證強一致性。

我們需要一種更為聰明的方法,一種機制來保證我們的系統能夠達成最終一致性,這才是分散式系統需要解決問題的根本之道,並且已經有很多模式方法來幫助我們達成我們想要的結果。

換一個角度來講,分散式事務,本身就是一個偽命題,因為系統是脆弱的,有太多太多的因素會造成事情不可控。

我們要做對的事情,讓系統能夠根據業務需求變更逐步演進,形成一個良性迴圈,根據業務需求、目標領域來設計系統,合理的進行分割才是王道。

如果你的系統本身不匹配業務領域,而又把不合理、生搬硬套的架構應用於它,就會出現各種各樣的問題,這些問題在某些時候甚至是不可能解決的。

在我看來,有關於解決分散式事務的技術,無非是在為糟糕的設計進行彌補,導致系統到最後臃腫不堪。

一件事情,分散式系統在絕大多數時候,反脆弱、最終一致性才是我們真正需要去解決的問題。

PS:你的系統究竟有多大才會導致最終一致性會被人為的察覺出來?但我們知道數據最終將會一致不是嗎?:)


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 第8章實踐項目之瘋狂填詞 創建一個一個瘋狂填詞(Mad Libs),程式,它將讀入文本文件,並讓用戶在該文本文件中出現 ADJECTIVE,NOUN,VERB等單詞的地方,加上他們自己的文本。 首先準備一個a.txt的文本文件 程式代碼如下: 輸出結果為: cat下b.txt OK 大功告成。 ...
  • 集合框架包含的內容: 集合框架的介面: List介面實現類 ArrayList LinkedList 迭代器Iterator 如何遍歷List集合? 1、通過for迴圈和get()方法配合實現遍歷 2、通過迭代器Iterator實現遍歷 所有集合介面和類都沒有提供相應遍歷的方法,而是由Iterato ...
  • DFS 1 #include<iostream> 2 #include<queue> 3 #include<cstdio> 4 using namespace std; 5 queue<int>q; 6 int map[1001][1001]; 7 int vis[1001]; 8 int n,m; ...
  • 特點: 安全,速度,併發 文件:hello_world.rs 代碼: 執行:rustc hello_world.rs 執行:./hello_world 結果:屏幕上就出現字元串:hello world ...
  • Docker Docker官網:https://cloud.docker.com/ 1. Docker 基礎用法和命令幫助 參考材料基礎: "Docker學習筆記" Docker手冊翻譯: "中文指南" 菜鳥教程: "Docker實例應用" 比較有深度的教程: "Docker入門教程" 1.1 常用 ...
  • 本文以及接下來的兩篇文章會討論一些性能優化相關的知識,分為上、中、下三個部分。第一部分討論性能分析的基礎內容,第二部分討論實際的性能分析、調優及測試,第三部分討論虛擬化環境和雲計算環境下的性能。文章內容來自於閱讀《圖解性能優化》一書的相關筆記和知識整理以及自己的理解。 轉在此處自己對於本書的豆瓣書評 ...
  • http://www.cnblogs.com/MOBIN/p/5597215.html 請先查看這邊博文 此文主要是在上篇博文的基礎之上,巨集觀的理一下思路,因為之前本人看了上篇之後雲里霧裡(是本人技術不到位)。然後研究了一會兒jdk1.8的源碼之後寫了此篇,不是很準確,源碼上篇博文之中已經很多了,我 ...
  • 分散式環境下,對於線上出現問題往往比單體應用要複雜的多,原因是前端的一個請求可能對應後端多個系統的多個請求,錯綜複雜。 對於快速問題定位,我們一般希望是這樣的: 從下到下關鍵節點的日誌,入參,出差,異常等。 關鍵節點的響應時間 關鍵節點依賴關係 而這些需求原來在單體應用中可以比較容易實現,但到了分佈 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...