Elixir 分散式平臺

来源:https://www.cnblogs.com/wang_yb/archive/2018/05/15/9039255.html
-Advertisement-
Play Games

概述 分散式平臺的核心在於併發,容錯。 而 Elixir 的優勢正是在於對於併發和容錯的處理。 分散式模型 1. CSP(Communicating Sequential Process) 模型 :: 多個進程通過管道(channel)進行交互 2. Actor 模型 :: 每個進程管理自己的內部狀 ...


概述

分散式平臺的核心在於併發,容錯。 而 Elixir 的優勢正是在於對於併發和容錯的處理。

分散式模型

  1. CSP(Communicating Sequential Process) 模型 :: 多個進程通過管道(channel)進行交互
  2. Actor 模型 :: 每個進程管理自己的內部狀態,通過消息和外界交互

對於 CSP 來說,重點在與 channel,通過 channel 管理併發的任務,並不關心執行任務的執行者。 Actor 模型關心的是任務的執行者(也就是 Actor),每個 Actor 都是可以通過消息和外界交互,根據消息完成任務。

Elixir 採用的是 Actor 模型,golang 的併發是 CSP 模型。

併發

並行(concurrency)經常會和並行(parallelize)的概率混淆,併發是指同時發生,並行是指同時運行, 比如,在一個 4core 的機器上,併發的量可能上萬,但是並行可能只有 4。

Elixir 的併發是由 BEAM VM 來管理的,理論上,一個 BEAM VM 上可以創建 268,000,000 個進程,基本就可以當做是無限制。 一般來說,BEAM VM 都是通過少量的調度進程來管理大量的 processes Elixir 的併發進程之間不會共用任何東西(包括記憶體在內)。

容錯

對錯誤的處理方式,最普遍的就是 try/catch,這種方式對於單機的系統來說可以適用,但是對於分散式系統來說,存在不足之處:

  • 分散式系統涉及多個系統間的交互,try/catch 只能在單點上捕獲異常
  • 分散式系統中可能發生的錯誤往往很難重現,也無法預測,即使捕獲到異常,也很難預置處理方式,也就是很多異常會導致系統無法恢復
  • try/catch 機制一般都是捕獲錯誤,然後自己處理或者直接往上層拋異常,隨著系統的複雜,異常的層級也會越來越多

Elixir 中也有類似 try/catch 的機制,但是它的容錯性不是依靠這種機制來保證的。 Elixir 不是致力於去減少錯誤的發生,而是致力於提供一種機制去減少錯誤的影響,並使得系統能夠自己從錯誤中恢復。

Elixir 中通過進程樹來確保整個應用的可用性,少數幾個進程作為 supervisor,用來監管其他完成實際業務的進程。 如果進程出現問題,由 supervisor 進程負責重啟或者銷毀。

除了進程樹,對於分散式系統的容錯,Erlang 的理念是 let it crash 原因也就是因為在分散式系統中,很多的錯誤和環境相關,難於重現,並且很多時候在錯誤的基礎上恢復系統相當困難, 遠遠沒有直接重啟來的簡單有效。

當然,let it crash 不是 let everything crash,以下情況還是要處理:

-   對於關鍵性的進程,是絕對不能讓它 crash 的,比如有些主幹上的 supervisor
-   可以預期的錯誤,就要有對應的錯誤處理,不能什麼都靠重啟來解決
-   let it crash 是指把那些無法預期的錯誤交給 supervisor 來處理

OTP 平臺

OTP 平臺的分散式系統核心是 processmessage Elixir 本身也可以實現非常健壯的分散式系統,但是藉助 OTP 平臺上已經成熟的組件,可以更快的創建一個分散式應用

下麵是 OTP 平臺上提供的成熟組件:(各個組件的示例參考:http://www.cnblogs.com/wang_yb/p/5589257.html)

  1. agent
  2. GenServer
  3. GenEvent
  4. task
  5. supervisor

您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 前面的話 隨著移動互聯網的興起,不同設備的解析度相差較大,如果在不同的設置上顯示同一個頁面,則用戶體驗差。響應式網頁設計是一種方法,使得一個網站能夠相容多個終端,而不用為每個終端製作特定的版本。它使得一個網站可以在任何類型的屏幕上,都可以被輕鬆地瀏覽和使用。採用響應式設計,在不同設備中,網站會重新排 ...
  • 微信授權、獲取用戶openid-純前端實現——jsonp跨域訪問返回json數據會報錯的純前端解決辦法 ...
  • 1、事件:addEventListener('click', function(){}或者方法名字) 可以添加多個處理器,語法: 對應的有removeEventListener()。 2、阻止表單預設行為: preventDefault();當在事件對象上調用該函數 3、阻止事件冒泡: stopPr ...
  • 閱讀目錄: 1. ELK Stack 簡介 2. 環境準備 3. 安裝 Elasticsearch 4. 安裝 Kibana 5. Kibana 使用 6. Elasticsearch 命令 最近在開發分散式服務追蹤,使用 Spring Cloud Sleuth Zipkin + Stream + ...
  • 在整理模板方法之前,先來說點廢話吧。除了記錄學習總結,也來記錄一下生活吧。 我們公司的老闆在北京,老闆也會因為項目來公司,不過不是天天來。公司有個同事,只要老闆不在就天天遲到,而且一天比一天晚,經常來了公司沒多久,午飯的外賣就送到公司了。前幾天,外賣竟然比他還來的早(外賣11點半送到的),公司一個不 ...
  • 一、什麼是裝飾模式 裝飾模式(Decorator),動態地給一個對象添加一些額外的職責,就增加功能來說,裝飾模式比生成子類更靈活。UML結構圖如下: 其中,Component是抽象構件,定義一個對象介面,可以給這些對象動態地添加職責;ConreteComponent定義一個具體對象,也可以給這個對象 ...
  • 剛畫出來的,裡邊配的騷詞出自本人,夠騷吧! ...
  • Java反射, 修改欄位值, 實例化對象, 繞過構造器來實例化對象 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...