架構雜談《三》

来源:https://www.cnblogs.com/haoxiaozhang/archive/2019/07/14/11184276.html
-Advertisement-
Play Games

架構雜談《三》 一致性問題 前面的《架構雜談一》和《架構雜談二》 雜談了從服務化到微服務架構的演進,並肯定了服務化和微服務架構是一脈相承的。微服務在服務化架構的基礎上,對服務化的細節和方案進行了優化和細化,重點突出了無中心化管理的微服務架構,通過對服務進行有效的拆分來實現敏捷開發和自動化部署,併在海 ...


架構雜談《三》

一致性問題

  前面的《架構雜談一》和《架構雜談二》 雜談了從服務化到微服務架構的演進,並肯定了服務化和微服務架構是一脈相承的。微服務在服務化架構的基礎上,對服務化的細節和方案進行了優化和細化,重點突出了無中心化管理的微服務架構,通過對服務進行有效的拆分來實現敏捷開發和自動化部署,併在海量用戶的請求下,提高了微服務架構下較細粒度的水平伸縮能力。

  然而,微服務架構並不是萬能的它可以說就是一把雙刃劍,我們在享受它帶來的便利的同時,也會遇到數據和服務之間不一致性的問題,在為服務架構下多個服務通過非可靠的網路通信,如何讓服務之間高效的通信和協作,如何解決系統之間狀態不一致等問題,這可以說是我們在使用微服務架構後不得不面對的問題。

1、什麼是一致性

  一致性是一個抽象的概念,在不同的場景下有不同的含義,在傳統IT時代,一致性通常指強一致性,在雜談互聯網時代的一致性之前,我們先瞭解一下互聯網時代的特點:

  • 互聯網時代信息量大,需要非常強大的計算能力
  • 互聯網時代要求對用戶的響應速度快,還要求吞吐量指標向外擴展(水平伸縮)

  通過這些個互聯網時代的特點分析後,我們發現單節點的伺服器無法滿足人們的需求,服務節點開始池化。但是池化不是越多越好的(常言說,人多不一定能解決所有問題),還得有序、合理的分配任務,並有效的進行管理,於是在互聯網時代討論最多的話題就是拆分。拆分又一般分為水平和垂直,這不單指對資料庫或者緩存的拆分,主要是表達一種分而治之的思想和邏輯

 水平拆分:由於單一節點無法滿足性能的需求,需要擴展成多個節點,多個節點之間具有一致的功能,組成一個服務池,一個節點服務一部分的請求量,所有節點共同處理大規模的高併發的請求量。

 垂直拆分:按照功能進行拆分,把一個複雜的功能拆分成多個單一、簡單的功能,由於每個功能職責單一、簡單,使得維護和變更變的更容易、簡單和安全,所以更易於產品迭代,還能夠快速地進行敏捷發佈和上線。

  在這樣的一個互聯網時代,一致性指分散式服務化之間的弱一致性,包括應用系統的一致性和數據的一致性。

  無論是水平還是垂直拆分,都解決了特定場景下的特定問題,然而,拆分後的系統或者服務化的系統的最大問題就是一致性問題。

2、解決一致性問題的思路

  1、ACID

    如何保證一致性問題呢?我們在學習關係性資料庫時都學習了ACID原理,這裡簡單的對ACID做個介紹。

    A:原子性

    C:一致性

     I:隔離性

    D:持久性

    具有ACID特性的資料庫支持強一致性,強一致性代表資料庫本身不會出現不一致,每個事務都是原子的(要麼成功要麼失敗),事務間是隔離的,互相不受影響。最終狀態是持久的。因此,資料庫會從一個明確的狀態過渡到另外一個明確的狀態,中間的臨時狀態是不會出現的。如果出現也會及時地自動修複,因此是強一致性的。然而,前面提到,互聯網項目大多數具有大規模、高併發的特性,必須使用拆分的理念。即使使用關係型資料庫,單機是難以滿足存儲和吞吐量上的性能需求。由於業務規則的限制,我們無法將相關數據分到同一個資料庫分片,這時就需要實現最終一致性。

  2、CAP 

  由於對系統或者數據進行了拆分,我們的系統不再是單機系統,而是分散式系統。針對分散式系統的CAP原理有三個元素。

  C:一致性。在分散式系統中的所有數據備份,在統一時刻具有相同的值,所有節點在同一時刻讀取的數據都是最新的數據副本。(Consistency)

  A:可用性,好的響應性能。完全的可用性指的是在任何故障模型下,服務都會在有限的時間內處理完成併進行響應。(Availability)

  P:分區容忍性。儘管網路上有部分消息丟失,但系統仍然可繼續工作。(Partition tolerance)

  CAP原理說明,任何分散式系統只可滿足以上兩點,無法三者兼顧。由於關係型資料庫是單節點無複製的,因此不具有分區容忍性,但是具有一致性和可用性。而分散式的服務化系統都需要滿足分區容忍性,這就需要我們在一致性和可用性兩者中進行權衡選擇。

  3、BASE

  eBay的架構師Dan Pritchett源於對大規模分散式系統的實踐總結,在ACM上發表文章提出BASE理論,BASE理論是對CAP理論的延伸,核心思想是即使無法做到強一致性(Strong Consistency,CAP的一致性就是強一致性),但應用可以採用適合的方式達到最終一致性(Eventual Consitency)。(BASE 思想解決了CAP提出的分散式系統的一致性和可用性不可兼得的問題)

  BASE思想與ACID原理截然不同,它滿足CAP原理,通過犧牲強一致性獲得可用性,一般應用於服務化系統的應用層或者大數據處理系統中,通過達到最終一致性來儘量滿足業務的絕大多數需求。

  BASE思想的三個元素。

  BA:基本可用(Basically Available)。

  S:軟狀態,狀態可以在一段時間內不同步(Soft State)。

  E:最終一致性,在一定的時間內,最終數據達成一致性即可。(Eventually Consistent)

  軟狀態是實現BASE思想的方法,基本可用和最終一致性是目標。以BASE 思想實現的系統由於不保證強一致性,所以系統在處理請求的過程中可以存在短暫的不一致,在短暫的不一致的時間內,請求處理處於臨時狀態中,系統在進行每步操作時,通過記錄每個臨時狀態,在系統出現故障時可以從這些中間狀態繼續處理未完成的請求或者退回到原始狀態,最終達到一致狀態 。

  有了BASE 思想作為基礎,我們對複雜的分散式事務進行拆解,對其中的每個步驟記錄其狀態,有問題可以根據記錄的狀態來繼續執行任務,達到最終一致性。

說明:

  1、參考書籍:《分散式服務架構:原理、設計與實戰》

  2、如有不合適的地方請反饋。綜合後更改。

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 利用 Bootstrap modal 模態框彈層添加或編輯數據,第二次彈出模態框時總是記住上一次的數據值,stackoverflow 上找到個比較好的方法,就是利用 jQuery 的 clone 方法,具體代碼如下 : ...
  • 一、開閉原則(是面向對象開發中最基礎的原則,它指導建立更加穩定靈活的系統) 開閉原則是對擴展和修改行為的一個原則,指的是軟體中的函數、類、模塊應該對擴展開放,對修改關閉。強調的是用抽象構建框架,用實現擴展細節。常用於解決的問題如:更新版本時,儘量在不修改源代碼,但增加新功能。 二、依賴倒置 依賴倒置 ...
  • 來自:Python編程與實戰(微信號:pthon1024),作者:Jerryning 沒有辦法轉,整個複製下來了 本文要點 字元串拼接 拆分含有多種分隔符的字元串 判讀字元串a是否以字元串b開頭或結尾 調整字元串中文本的格式 對字元串進行左,右,居中對齊 刪除字元串中不需要的字元 字元串拼接 拆分含 ...
  • Spring Cloud Alibaba | 序言 @[TOC] 1. Spring Cloud Alibaba是什麼? Spring Cloud Alibaba 致力於提供微服務開發的一站式解決方案。此項目包含開發分散式應用微服務的必需組件,方便開發者通過 Spring Cloud 編程模型輕鬆使 ...
  • 我們分析軟體項目開發過程中各階段的時間占比可以慢慢體會到,一套軟體項目 UI及基本業務的設計會占到整個項目開發的50%以上的時間,再看UI設計,通用的部分占到70%以上,我們會想,如果能將這些重覆簡易的工作能否通過簡易的操作來快速實現呢? 這樣可以將大部分的時間用到後續的真實業務邏輯處理上去,就可以 ...
  • 接著學習設計模式系列,今天講解的是代理模式。 定義 什麼是代理模式? 代理模式,也叫委托模式,其定義是給某一個對象提供一個代理對象,並由代理對象控制對原對象的引用。它包含了三個角色: Subject:抽象主題角色。可以是抽象類也可以是介面,是一個最普通的業務類型定義。 RealSubject:具體主 ...
  • 《Head First設計模式》已經讀了不止一遍,但是始終沒有進行系統的進行總結。所以近期開始總結設計模式相關的知識,從模板方法模式開始,因為是一個我認為是最簡單的設計模式。(推薦視頻資源 "23個設計模式" ) 提出&解決問題 提出問題 實現製作咖啡功能 。且製作咖啡需要四個步驟 : 1. 燒水 ...
  • 舉個慄子 問題描述 小時候數學老師的隨堂測驗,都是在黑板上抄題目,然後再作答案。寫一個抄題目的程式。 簡單實現 學生甲抄的試卷 學生乙抄的試卷 測試 測試結果 存在問題 兩個學生抄試卷都非常類似,除了答案不同,沒什麼不一樣,這樣又容易錯,又難以維護。因此老師出一份試卷,列印多份,讓學生填寫答案就可以 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...