ASP.NET CORE 使用Consul實現服務治理與健康檢查(1)——概念篇

来源:https://www.cnblogs.com/xboo/archive/2019/12/15/12030923.html
-Advertisement-
Play Games

背景 筆者所在的公司正在進行微服務改造,這其中服務治理組件是必不可少的組件之一,在一番討論之後,最終決定放棄 Zookeeper 而採用 Consul 作為服務治理框架基礎組件。主要原因是 Consul 自帶健康檢查,通過該功能可以比較方便的監控應用的運行狀態,從而更好的運維整個系統。但在實際實施過 ...


背景

筆者所在的公司正在進行微服務改造,這其中服務治理組件是必不可少的組件之一,在一番討論之後,最終決定放棄 Zookeeper 而採用 Consul 作為服務治理框架基礎組件。主要原因是 Consul 自帶健康檢查,通過該功能可以比較方便的監控應用的運行狀態,從而更好的運維整個系統。但在實際實施過程中筆者發現,目前網路上所能看到的很多資料,沒有比較清晰的解釋 Consul 的運行方式,特別是當用戶對於 Zookeeper 主動通知的方式比較熟悉之後,對於 Consul 這種每次都通過 HTTP 調用獲取服務信息的方式還是存在很多疑惑的,比如:這樣的方式在調用鏈中,不是會導致 HTTP 調用鏈增加一倍嗎?

多數據中心

關於Consul,首先介紹最常見的一副圖:

該圖表示 Consul 支持的一個重要的功能———多數據中心,這也是很多服務註冊發現工具所不具備的,通過上述圖中我們可以解讀出如下一些信息:

  1. Cosnul 分為 Server 和 Client,多數據中心的實現主要依靠兩個數據中心的 Server 進行通信,並且每個數據中心有各自的主節點,也就是各自選舉。
  2. Client 與 Server 之間通過8300埠,TCP協議進行RPC交互。
  3. Client 與其他實例之間通過 8301 以 TCP/UDP 協議進行 LAN GOSSIP 交互

上圖解釋了 Consul 集群各個 Server 之間的關係,那麼 Server 和 Client 之間的關係又是怎樣呢?在理解這個問題之前,要先理解一個概念——反熵。

反熵

1. 概念

如果用一句話來概括那大概就是:分而治之,Server 將服務的管轄權(健康檢查,服務註冊等功能)層層下放給 Client,而 Client 在需要時(例如健康檢查失敗,新的服務註冊等)將所管轄範圍內的服務信息進行轉發或上報。

關於反熵更加詳細的內容,可以參考園子里 波斯碼 所寫的文章——Consul的反熵,此文對於反熵的解釋非常到位, 感興趣的同學可以進一步閱讀。

這個特點也決定了 Consul 服務的註冊和健康檢查方式:所有操作都是通過 Consul Client 來實現的。如下圖所示:

根據上圖所示有個重要的概念:

1. 如果我們通過 Client 獲取 Agent 上的服務時,則只能返回當前這個 Consul Client 中所註冊的所有服務
2. 而如果我們通過 Client 獲取 Catalog 上的服務時,則可以獲取到所有註冊服務。

事實上即使我們需要獲取 Catalog 中的信息時,也不是直接與 Consul Server 交互,而是通過當前伺服器 Consul Client 轉發請求獲取。同時取決於反熵概念,如果我們把每台伺服器看作管理轄區的最小單位,那麼則需要在每台機器上部署 Consul Client,用它來管理這台服器上所有的服務。

2. 問題

如果按照上述信息實施部署,那麼我們來看下假如 APP1 調用 APP2 時,具體的調用順序時怎樣的:

如上圖所示,這樣的部署其實會帶來一些問題:

  1. 每台機器上都需要部署 Consul Client
  2. 服務請求鏈路成倍增加了

問題1: 部署成本增加,實際上是一次性工作,況且假如你是容器化部署的話,那這個問題基本可以忽略。

問題2: 調用鏈路增加的確會帶來很多問題,主要是在調用 APP2 之前增加了 ① ② 兩步,其中步驟 ① 為本機 HTTP 調用,步驟 ② 為 Consul集群內部的 RPC 調用,經過筆者實際測試這個調用耗時在毫秒級,除非對於性能要求很高的情況下,普通的調用鏈路請求是可以容忍的,而筆者所在公司的方案目前也是基於此方案。如果不能容忍,那隻能犧牲部分一致性,在本地進行緩存,並設定合理的同步周期。

上述問題筆者認為是 Consul 反熵機制所帶來的缺陷:只有通過主動請求 Consul Server 才能獲取所有服務的信息,而又缺少比較好的通知機制,導致應用程式無法緩存服務信息。 而相比較於 Zookeeper,由於有了更好的通知機制,使各個應用程式可以緩存服務列表信息,只有當收到通知時,才主動更新服務信息。同時 zookeeper 是長連接,當服務在出現問題時可以更加及時獲取到變化,而Consul 必須要依賴健康檢查,而健康檢查是有周期性的。當然凡事都各有利弊,但我們要知曉個中優缺點,才能更加合理使用。

通知機制——Consul Watch

Consul 可以通過配置 Agent 對以下類型的數據進行監控,並且同樣受反熵機制的影響,如果想監控集群下所有服務,那麼需要將監控配置放在服務端:

  • key – 監視指定K/V鍵值對
  • keyprefix – Watch a prefix in the KV store
  • services – 監視服務列表
  • nodes – 監控節點列表
  • service – 監視服務實例
  • checks- 監視健康檢查的值
  • event – 監視用戶事件

Consul 主要提供2種通知方式:

  1. script:當發生變化時執行一段腳本(可以是放在伺服器中的任何可執行腳本,例如 py sh 等)
  2. HTTP endpoint:當發生變化時請求配置的http地址

例如在 Consul 配置文件創建 watch.json ,重啟 Consul 後生效
vi /data/consul/config/watch.json

{
  "watches": [
    {
      "type": "services",
      "handler_type": "http",
      "http_handler_config": {
        "path": "http://192.168.1.1:8080/services",
        "method": "POST"
      }
    },
    {
      "type": "nodes",
      "handler_type": "http",
      "http_handler_config": {
        "path": "http://192.168.1.1:8080/nodes",
        "method": "POST"
      }
    },
    {
      "type": "checks",
      "handler_type": "http",
      "http_handler_config": {
        "path": "http://192.168.1.1:8080/checks",
        "method": "POST"
      }
    }
  ]
}

結語

相信有了這些概念的初步理解,可以在初次接觸 Consul 時減少一些疑惑。筆者在這個過程中,從博客園一些同學的文章中收益匪淺,特別是 波斯瑪 同學的3篇文章,值得詳細閱讀,這裡也推薦大家一併學習。
參考資料:
https://www.cnblogs.com/bossma/tag/Consul/
https://www.cnblogs.com/sunsky303/p/9209024.html
https://blog.csdn.net/iamonlyme/category_9266562.html


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 本項目實現的是一個微riscv處理器核(tinyriscv),用verilog語言編寫,只求以最簡單、最通俗易懂的方式實現riscv指令的功能,因此沒有特意去對代碼做任何的優化,因此你會看到裡面寫的代碼有很多冗餘的地方。tinyriscv處理器核有以下特點: 1)實現了RV32I指令集,通過risc ...
  • 數據挖掘作業,要實現決策樹,現記錄學習過程 win10系統,Python 3.7.0 構建一個決策樹,在鳶尾花數據集上訓練一個DecisionTreeClassifier: from sklearn.datasets import load_iris from sklearn.tree import ...
  • web應用簡介 Web 應用在我們的生活中無處不在。看看我們日常使用的各個應用程式,它們要 麽是 Web 應用,要麼是移動 App 這類 Web 應用的變種。無論哪一種編程語言,只要 它能夠開發出與人類交互的軟體,它就必然會支持 Web 應用開發。對一門嶄新的編程 語言來說,它的開發者首先要做的一件 ...
  • 有時候我們想要修改xadmin詳情頁欄位的顯示方式,比如django預設的ImageField在後臺顯示的是image的url,我們更希望看到image的縮略圖;再比如django將多對多欄位顯示為多選的下拉框或者左右選擇欄的方式,向圖片展示的這兩種: 如果我想要上面這種帶搜索功能並且只占一行的效果 ...
  • 相信很多初次接觸java的同學,在遇見主函數的時候,聽到最多的就是主函數的格式是固定的,不能進行修改等等。這就讓人疑惑了,主函數為啥就那麼特殊呢?接下來博主會為大家解釋主函數。大家先看看下麵這個程式: 1 public static void main(String[ ] args){ 2 Syst ...
  • 一種可以實現" 先進先出 "的存儲結構 分類: 1. 鏈式隊列:用鏈表實現 2. 靜態隊列:用數組實現,靜態隊列通常都必須是 迴圈隊列 迴圈隊列的講解: 1. 靜態隊列為什麼是迴圈隊列 減少對記憶體的浪費 2. 迴圈隊列需要幾個參數來確定 兩個參數, frant 、rear 但這2個參數不同場合有不同 ...
  • 大家好,我是Dotnet9小編,一個從事dotnet開發8年+的程式員。我最近在寫dotnet分享文章,希望能讓更多人看到dotnet的發展,瞭解更多dotnet技術,幫助dotnet程式員應用dotnet技術更好的運用於工作和學習中去。 文章閱讀導航 一、寫在前面的話 二、HZHControls介 ...
  • 題外話 筆者有個習慣,就是在接觸新的東西時,一定要先搞清楚新事物的基本概念和背景,對之有個相對全面的瞭解之後再開始進入實際的編碼,這樣做最主要的原因是儘量避免由於對新事物的認知誤區導致更大的缺陷,Bug 一旦發生,將比普通的代碼缺陷帶來更加昂貴的修複成本。 相信有了前一篇和園子里其他同學的文章,你已 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...