ASP.NET CORE 使用Consul實現服務治理與健康檢查(1)——概念篇

来源:https://www.cnblogs.com/xboo/archive/2019/12/15/12030923.html
-Advertisement-
Play Games

背景 筆者所在的公司正在進行微服務改造,這其中服務治理組件是必不可少的組件之一,在一番討論之後,最終決定放棄 Zookeeper 而採用 Consul 作為服務治理框架基礎組件。主要原因是 Consul 自帶健康檢查,通過該功能可以比較方便的監控應用的運行狀態,從而更好的運維整個系統。但在實際實施過 ...


背景

筆者所在的公司正在進行微服務改造,這其中服務治理組件是必不可少的組件之一,在一番討論之後,最終決定放棄 Zookeeper 而採用 Consul 作為服務治理框架基礎組件。主要原因是 Consul 自帶健康檢查,通過該功能可以比較方便的監控應用的運行狀態,從而更好的運維整個系統。但在實際實施過程中筆者發現,目前網路上所能看到的很多資料,沒有比較清晰的解釋 Consul 的運行方式,特別是當用戶對於 Zookeeper 主動通知的方式比較熟悉之後,對於 Consul 這種每次都通過 HTTP 調用獲取服務信息的方式還是存在很多疑惑的,比如:這樣的方式在調用鏈中,不是會導致 HTTP 調用鏈增加一倍嗎?

多數據中心

關於Consul,首先介紹最常見的一副圖:

該圖表示 Consul 支持的一個重要的功能———多數據中心,這也是很多服務註冊發現工具所不具備的,通過上述圖中我們可以解讀出如下一些信息:

  1. Cosnul 分為 Server 和 Client,多數據中心的實現主要依靠兩個數據中心的 Server 進行通信,並且每個數據中心有各自的主節點,也就是各自選舉。
  2. Client 與 Server 之間通過8300埠,TCP協議進行RPC交互。
  3. Client 與其他實例之間通過 8301 以 TCP/UDP 協議進行 LAN GOSSIP 交互

上圖解釋了 Consul 集群各個 Server 之間的關係,那麼 Server 和 Client 之間的關係又是怎樣呢?在理解這個問題之前,要先理解一個概念——反熵。

反熵

1. 概念

如果用一句話來概括那大概就是:分而治之,Server 將服務的管轄權(健康檢查,服務註冊等功能)層層下放給 Client,而 Client 在需要時(例如健康檢查失敗,新的服務註冊等)將所管轄範圍內的服務信息進行轉發或上報。

關於反熵更加詳細的內容,可以參考園子里 波斯碼 所寫的文章——Consul的反熵,此文對於反熵的解釋非常到位, 感興趣的同學可以進一步閱讀。

這個特點也決定了 Consul 服務的註冊和健康檢查方式:所有操作都是通過 Consul Client 來實現的。如下圖所示:

根據上圖所示有個重要的概念:

1. 如果我們通過 Client 獲取 Agent 上的服務時,則只能返回當前這個 Consul Client 中所註冊的所有服務
2. 而如果我們通過 Client 獲取 Catalog 上的服務時,則可以獲取到所有註冊服務。

事實上即使我們需要獲取 Catalog 中的信息時,也不是直接與 Consul Server 交互,而是通過當前伺服器 Consul Client 轉發請求獲取。同時取決於反熵概念,如果我們把每台伺服器看作管理轄區的最小單位,那麼則需要在每台機器上部署 Consul Client,用它來管理這台服器上所有的服務。

2. 問題

如果按照上述信息實施部署,那麼我們來看下假如 APP1 調用 APP2 時,具體的調用順序時怎樣的:

如上圖所示,這樣的部署其實會帶來一些問題:

  1. 每台機器上都需要部署 Consul Client
  2. 服務請求鏈路成倍增加了

問題1: 部署成本增加,實際上是一次性工作,況且假如你是容器化部署的話,那這個問題基本可以忽略。

問題2: 調用鏈路增加的確會帶來很多問題,主要是在調用 APP2 之前增加了 ① ② 兩步,其中步驟 ① 為本機 HTTP 調用,步驟 ② 為 Consul集群內部的 RPC 調用,經過筆者實際測試這個調用耗時在毫秒級,除非對於性能要求很高的情況下,普通的調用鏈路請求是可以容忍的,而筆者所在公司的方案目前也是基於此方案。如果不能容忍,那隻能犧牲部分一致性,在本地進行緩存,並設定合理的同步周期。

上述問題筆者認為是 Consul 反熵機制所帶來的缺陷:只有通過主動請求 Consul Server 才能獲取所有服務的信息,而又缺少比較好的通知機制,導致應用程式無法緩存服務信息。 而相比較於 Zookeeper,由於有了更好的通知機制,使各個應用程式可以緩存服務列表信息,只有當收到通知時,才主動更新服務信息。同時 zookeeper 是長連接,當服務在出現問題時可以更加及時獲取到變化,而Consul 必須要依賴健康檢查,而健康檢查是有周期性的。當然凡事都各有利弊,但我們要知曉個中優缺點,才能更加合理使用。

通知機制——Consul Watch

Consul 可以通過配置 Agent 對以下類型的數據進行監控,並且同樣受反熵機制的影響,如果想監控集群下所有服務,那麼需要將監控配置放在服務端:

  • key – 監視指定K/V鍵值對
  • keyprefix – Watch a prefix in the KV store
  • services – 監視服務列表
  • nodes – 監控節點列表
  • service – 監視服務實例
  • checks- 監視健康檢查的值
  • event – 監視用戶事件

Consul 主要提供2種通知方式:

  1. script:當發生變化時執行一段腳本(可以是放在伺服器中的任何可執行腳本,例如 py sh 等)
  2. HTTP endpoint:當發生變化時請求配置的http地址

例如在 Consul 配置文件創建 watch.json ,重啟 Consul 後生效
vi /data/consul/config/watch.json

{
  "watches": [
    {
      "type": "services",
      "handler_type": "http",
      "http_handler_config": {
        "path": "http://192.168.1.1:8080/services",
        "method": "POST"
      }
    },
    {
      "type": "nodes",
      "handler_type": "http",
      "http_handler_config": {
        "path": "http://192.168.1.1:8080/nodes",
        "method": "POST"
      }
    },
    {
      "type": "checks",
      "handler_type": "http",
      "http_handler_config": {
        "path": "http://192.168.1.1:8080/checks",
        "method": "POST"
      }
    }
  ]
}

結語

相信有了這些概念的初步理解,可以在初次接觸 Consul 時減少一些疑惑。筆者在這個過程中,從博客園一些同學的文章中收益匪淺,特別是 波斯瑪 同學的3篇文章,值得詳細閱讀,這裡也推薦大家一併學習。
參考資料:
https://www.cnblogs.com/bossma/tag/Consul/
https://www.cnblogs.com/sunsky303/p/9209024.html
https://blog.csdn.net/iamonlyme/category_9266562.html


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 本項目實現的是一個微riscv處理器核(tinyriscv),用verilog語言編寫,只求以最簡單、最通俗易懂的方式實現riscv指令的功能,因此沒有特意去對代碼做任何的優化,因此你會看到裡面寫的代碼有很多冗餘的地方。tinyriscv處理器核有以下特點: 1)實現了RV32I指令集,通過risc ...
  • 數據挖掘作業,要實現決策樹,現記錄學習過程 win10系統,Python 3.7.0 構建一個決策樹,在鳶尾花數據集上訓練一個DecisionTreeClassifier: from sklearn.datasets import load_iris from sklearn.tree import ...
  • web應用簡介 Web 應用在我們的生活中無處不在。看看我們日常使用的各個應用程式,它們要 麽是 Web 應用,要麼是移動 App 這類 Web 應用的變種。無論哪一種編程語言,只要 它能夠開發出與人類交互的軟體,它就必然會支持 Web 應用開發。對一門嶄新的編程 語言來說,它的開發者首先要做的一件 ...
  • 有時候我們想要修改xadmin詳情頁欄位的顯示方式,比如django預設的ImageField在後臺顯示的是image的url,我們更希望看到image的縮略圖;再比如django將多對多欄位顯示為多選的下拉框或者左右選擇欄的方式,向圖片展示的這兩種: 如果我想要上面這種帶搜索功能並且只占一行的效果 ...
  • 相信很多初次接觸java的同學,在遇見主函數的時候,聽到最多的就是主函數的格式是固定的,不能進行修改等等。這就讓人疑惑了,主函數為啥就那麼特殊呢?接下來博主會為大家解釋主函數。大家先看看下麵這個程式: 1 public static void main(String[ ] args){ 2 Syst ...
  • 一種可以實現" 先進先出 "的存儲結構 分類: 1. 鏈式隊列:用鏈表實現 2. 靜態隊列:用數組實現,靜態隊列通常都必須是 迴圈隊列 迴圈隊列的講解: 1. 靜態隊列為什麼是迴圈隊列 減少對記憶體的浪費 2. 迴圈隊列需要幾個參數來確定 兩個參數, frant 、rear 但這2個參數不同場合有不同 ...
  • 大家好,我是Dotnet9小編,一個從事dotnet開發8年+的程式員。我最近在寫dotnet分享文章,希望能讓更多人看到dotnet的發展,瞭解更多dotnet技術,幫助dotnet程式員應用dotnet技術更好的運用於工作和學習中去。 文章閱讀導航 一、寫在前面的話 二、HZHControls介 ...
  • 題外話 筆者有個習慣,就是在接觸新的東西時,一定要先搞清楚新事物的基本概念和背景,對之有個相對全面的瞭解之後再開始進入實際的編碼,這樣做最主要的原因是儘量避免由於對新事物的認知誤區導致更大的缺陷,Bug 一旦發生,將比普通的代碼缺陷帶來更加昂貴的修複成本。 相信有了前一篇和園子里其他同學的文章,你已 ...
一周排行
    -Advertisement-
    Play Games
  • 示例項目結構 在 Visual Studio 中創建一個 WinForms 應用程式後,項目結構如下所示: MyWinFormsApp/ │ ├───Properties/ │ └───Settings.settings │ ├───bin/ │ ├───Debug/ │ └───Release/ ...
  • [STAThread] 特性用於需要與 COM 組件交互的應用程式,尤其是依賴單線程模型(如 Windows Forms 應用程式)的組件。在 STA 模式下,線程擁有自己的消息迴圈,這對於處理用戶界面和某些 COM 組件是必要的。 [STAThread] static void Main(stri ...
  • 在WinForm中使用全局異常捕獲處理 在WinForm應用程式中,全局異常捕獲是確保程式穩定性的關鍵。通過在Program類的Main方法中設置全局異常處理,可以有效地捕獲並處理未預見的異常,從而避免程式崩潰。 註冊全局異常事件 [STAThread] static void Main() { / ...
  • 前言 給大家推薦一款開源的 Winform 控制項庫,可以幫助我們開發更加美觀、漂亮的 WinForm 界面。 項目介紹 SunnyUI.NET 是一個基於 .NET Framework 4.0+、.NET 6、.NET 7 和 .NET 8 的 WinForm 開源控制項庫,同時也提供了工具類庫、擴展 ...
  • 說明 該文章是屬於OverallAuth2.0系列文章,每周更新一篇該系列文章(從0到1完成系統開發)。 該系統文章,我會儘量說的非常詳細,做到不管新手、老手都能看懂。 說明:OverallAuth2.0 是一個簡單、易懂、功能強大的許可權+可視化流程管理系統。 有興趣的朋友,請關註我吧(*^▽^*) ...
  • 一、下載安裝 1.下載git 必須先下載並安裝git,再TortoiseGit下載安裝 git安裝參考教程:https://blog.csdn.net/mukes/article/details/115693833 2.TortoiseGit下載與安裝 TortoiseGit,Git客戶端,32/6 ...
  • 前言 在項目開發過程中,理解數據結構和演算法如同掌握蓋房子的秘訣。演算法不僅能幫助我們編寫高效、優質的代碼,還能解決項目中遇到的各種難題。 給大家推薦一個支持C#的開源免費、新手友好的數據結構與演算法入門教程:Hello演算法。 項目介紹 《Hello Algo》是一本開源免費、新手友好的數據結構與演算法入門 ...
  • 1.生成單個Proto.bat內容 @rem Copyright 2016, Google Inc. @rem All rights reserved. @rem @rem Redistribution and use in source and binary forms, with or with ...
  • 一:背景 1. 講故事 前段時間有位朋友找到我,說他的窗體程式在客戶這邊出現了卡死,讓我幫忙看下怎麼回事?dump也生成了,既然有dump了那就上 windbg 分析吧。 二:WinDbg 分析 1. 為什麼會卡死 窗體程式的卡死,入口門檻很低,後續往下分析就不一定了,不管怎麼說先用 !clrsta ...
  • 前言 人工智慧時代,人臉識別技術已成為安全驗證、身份識別和用戶交互的關鍵工具。 給大家推薦一款.NET 開源提供了強大的人臉識別 API,工具不僅易於集成,還具備高效處理能力。 本文將介紹一款如何利用這些API,為我們的項目添加智能識別的亮點。 項目介紹 GitHub 上擁有 1.2k 星標的 C# ...