Consul和Kong的實踐（一）

来源:https://www.cnblogs.com/oryx/archive/2019/08/02/11288705.html
-Advertisement-
Play Games

Consul和Kong的實踐（一） 這一篇先介紹consul集群，以及consul和應用服務的結合使用，下一篇是和kong網關的結合。 一.Consul的集群安裝 以其中一臺機器為例： 1. mkdir /usr/local/consul 創建consul的安裝目錄 1. cd /usr/local ...


Consul和Kong的實踐（一）

這一篇先介紹consul集群，以及consul和應用服務的結合使用，下一篇是和kong網關的結合。

一.Consul的集群安裝

以其中一臺機器為例：

  1. mkdir /usr/local/consul   創建consul的安裝目錄
  2. cd /usr/local/consul
  3. wget https://releases.hashicorp.com/consul/1.5.2/consul_1.5.2_linux_amd64.zip 建議大家不要直接使用我給出的下載地址，可以開了代理下好了，再將consul壓縮包上傳到伺服器或者虛擬機。官網下載地址：https://www.consul.io/downloads.html  （我是centos7.X 64位操作系統）
  4. unzip consul_1.5.2_linux_amd64.zip   解壓cconsul壓縮包，如果沒有unzip命名，先安裝（yum -y install unzip）consul的壓縮包解壓以後是非常乾凈的，只有一個consul的二進位文件。
  5. cp consul /usr/local/bin    將consul文件複製到 /usr/local/bin 目錄下麵，這樣我們不管在什麼目錄下都可以運行了。
  6. consul version   老規矩，版本號測試一下。
  7. 下一步就是開啟consul的server服務了，consul分為server和client兩種節點。我們現在是先搭建server集群。開啟consul server節點有兩種方式。

     1）直接運行，控制台可查看日誌，ctrl+c可直接退出。
    consul agent -server -ui -bootstrap-expect=3 -data-dir=/tmp/consul -node=node1
    -client=0.0.0.0 -bind=192.168.0.171 -datacenter=dc1
     2)  後臺運行
          nohup consul agent -server -ui -bootstrap-expect=3 -data-dir=/tmp/consul -node=node1 
   -client=0.0.0.0 -bind=192.168.0.171 -datacenter=dc1  >/tmp/consul/nohup.out 2>&1 &

    簡單介紹一下參數的意思：

     ** -server ： 定義agent運行在server模式
      -ui：開啟ui管理
      -bootstrap-expect ：在一個datacenter中期望提供的server節點數目，當該值提供的時候，consul一直等到達     到指定sever數目的時候才會引導整個集群，該標記不能和bootstrap共用
      -client：**consul服務偵聽地址，這個地址提供HTTP、DNS、RPC等服務，預設是127.0.0.1所以不對外提供服            務，如果你要對外提供服務改成0.0.0.0
     如果你對更多配置有興趣，可以移步以下地址： https://www.consul.io/docs/agent/options.html

  1. 啟動以後我們可以檢查一下埠是否監聽：netstat -tunlp （如果nestat沒裝，可以執行 yum -y install net-tools）。可以看到8300 8301 8302以及8500和8600埠都已經監聽了。

      其中8500是ui埠，在我們集群啟動以後，可以用ip:8500/ui 查看，8600是功能變數名稱解析埠，在我的解決方案里        面會使用到。
  9. consul members 查看成員，目前只有改節點。

  1. 在另外兩台虛擬機或者伺服器上重覆以上操作，第七步命令有一些不同。

      consul agent -server -ui -bootstrap-expect=3 -data-dir=/tmp/consul -node=node2 -client=0.0.0.0
-bind=192.168.0.155 -datacenter=dc1 -join 192.168.0.171
consul agent -server -ui -bootstrap-expect=3 -data-dir=/tmp/consul -node=node3 -client=0.0.0.0
-bind=192.168.0.169 -datacenter=dc1 -join 192.168.0.171

  1. consul members 此刻就可以看到有三個節點了

     image.png

12.consul operator raft list-peers
     image.png
    
    在這裡我們可以看到consul集群已經啟動了，自動選舉node2節點，也就是ip為155的這台機器為leader，如果你     斷開了這台機器，集群會自動選舉下一個leader。
13.現在你可以選擇選擇三台機器的任意一臺機器的ip，訪問ip:8500，即可以看到ui管理。（請註意關閉防火牆，或       者打開該埠。不然其他機器上訪問不到）
     image.png

二.Consul的架構以及和應用程式的結合

       目前我們的架構如圖：

   image.png

       我們這篇博客要達到的目的：

    image.png
         
     consul提供的節點有兩種模式，上面我們已經提到了，我們之前搭建的就是server，每個應用程式application到consul server之間，需要client的交互。你說client和application是部署在一臺機器上面的，這是官方推薦的架構，當然我們也可以有其他選擇，這裡我採用的是這種，比較簡單。（client是一個非常輕量級的進程.用於註冊服務,運行健康檢查和轉發對server的查詢，client無狀態）
     為了做到高可用，我們application服務本身就必須是高可用的，如圖所示，比如serviceA（文中application等於service概念）我在三台伺服器上都部署了，同時通過三個consul client註冊了。這樣，不管是某台consul client或者某台service掛了，或者某台consul server，都不會影響到我們的使用，其實nginx也可以做到類似功能，不過在服務註冊和發現上面，consul更為靈活。
    簡單介紹了一下我的設計，讓我們來繼續搭建吧：
    機器有限，我就不換機器了，還是在這三台伺服器上面去部署了，這次部署consul client 我給你介紹另外一種          方式部署，docker，其實consul server的部署也可以用docker，這個選擇自己習慣的就行。

1.部署client 

      1）yum install -y docker  如果機器已經安裝了docker 請直接跳至第四步
      2）systemctl start docker
      3）systemctl status docker
      4)  docker pull consul:1.5.2
      5）docker images  查看鏡像，可以看到已經拉到了。
      6）docker run --name nodeclient1 -d -p 8501:8500  -p 8311:8301 -p 8312:8302 -p 8601:8600      consul:1.5.2  agent  -ui -bind=0.0.0.0 -client=0.0.0.0  -join 192.168.0.171               
      7）consul members
          image.png
       8）按照架構圖裡面還需要部署兩台，這裡就不做演示了，按照上述步驟，大家可以自行部署。
 9）部署完了可以在ui界面裡面看一下。
image.png

2.註冊services

    consul提供http api的方式註冊，如果是.NET core的程式可以採用這種方式手動去寫腳本，或者代碼去註冊。我這邊是java程式，採用的框架都是springboot，所以引用了springcloud就直接結合了consul的註冊，我先介紹一下這種。
    1）引用maven包  

 <dependency>
   <groupId>org.springframework.cloud</groupId>
   <artifactId>spring-cloud-starter-consul-all</artifactId>
   <version>2.1.1.RELEASE</version>
</dependency>
<dependency>
   <groupId>org.springframework.boot</groupId>
   <artifactId>spring-boot-starter-actuator</artifactId>
   <version>2.1.5.RELEASE</version>
</dependency>

   2）配置bootstrap.yml配置文件，如果你本來項目是application.yml可以直接換成bootstrap.yml.
        核心配置貼個圖：
       image.png

spring:
 application:
    name: operating #Operating
 cloud:
    consul:
      host: 192.168.0.171  
      port: 8501
      discovery:
        register: true
        hostname: 192.168.0.159
        serviceName: ${spring.application.name}
        healthCheckPath: /api/operating/actuator/health
        healthCheckInterval: 15s
        tags: urlprefix-/${spring.application.name}
        #instanceId: ${spring.application.name}:${spring.cloud.client.ip-address}

     老規矩給大家介紹一下配置的意思：
     host：        consul client 的ip。
     port:           client 的port 。正常是8500，但是我用docker部署的時候用了8501映射了容器的8500,。
     hostname：健康檢查的ip 也就是你當前應用的ip，其實和前面host一樣，你把application和consul client部署                           在同一臺機器的時候，這兩個地方可以都填127.0.0.1。
     healthCheckPath：如果你沒配置context-path，那麼就是/actuator/health，我這裡配置context-path，所以                         加上來了。
     tags：        後期做版本管理，我會用起來，現在無所謂。
     instanceId: consul 註冊的時候預設是applicationName+port ，我這裡將他重寫了。所以你看到我將它註釋掉                          了。 
3）啟動springboot程式。服務註冊成功，查看ui管理

image.png

三.基於consul集群架構，調用服務

現在我們的服務已經註冊到了consul上面了，那麼針對目前架構，我們肯定還有兩個疑惑。
1.公司伺服器內部之間的調用，比如我們已經註冊了的rpc服務之間的調用，當然你是Restful也所謂。
2.網關層面怎麼調用consul。
針對第一點，springcloud是提供部分sdk的，當然如果你是.NET CORE，我不太清楚是否有相關sdk，沒有也可以自己寫。我先介紹一下，你如果想實現自己sdk的思路。
consul任何一個節點都提供了
http://192.168.0.155:8500/v1/agent/services      節點內部所有存活服務查詢
http://192.168.0.155:8500/v1/catalog/services    集群內部所有存活服務查詢

http://192.168.0.155:8500/v1/agent/service/serviceName   節點內部單個服務查詢 
http://192.168.0.155:8500/v1/catalog/service/serviceName 集群內部單個服務查詢
Tip：serviceName替換成你註冊的名稱

根據上述consul api介面我們是可以拿到你註冊的service實際ip和content-path，並且還有tags，那麼你還可以利用tags進行版本控制。
那我們先來看看，springcloud替我們做了什麼？
引用的包，我們已經引用了。
直接上代碼：

public class ServerInvoke {
    @Autowired
    private LoadBalancerClient loadBalancer;
    @Autowired
    private DiscoveryClient discoveryClient;
    
     /**
     * 獲取所有服務
     *
     * @return
     */
    private List<ServiceInstance> services(String serverName) {
        return discoveryClient.getInstances(serverName);
    }

    /**
     * 從所有服務中選擇一個服務（輪詢）
     */
    private ServiceInstance discover(String serverName) {
        return loadBalancer.choose(serverName);
    }
}

很明顯可以發現我們可以拿到服務的實際地址，如果你的服務是高可用的，會輪訓拿到不同的地址。

針對服務以jsonrpc協議內部調用時

由於公司之前都是基於jsonrpc在調用（.NET平臺）為了相容。我寫了一個非常簡單的sdk，傳到了github，如果你公司不是jsonrpc協議，你可以自己寫一個，思路上面已經給了提供，在參考一下我寫的。（草稿版）
https://github.com/xiaoxiaobanxian/discoveryrpcsdk/tree/master

針對服務被外部（網關層調用）

     前文已經介紹了，consul是8600埠作為功能變數名稱解析的，並且consul會為你的服務提供一個功能變數名稱：serviceName.service.consul。所以只需要將你的請求轉發到8600即可，你可以採用serviceName.service.consul/XXX來訪問你的服務，前提是已經轉發到了consul的功能變數名稱解析埠。
    測試一下 dig @127.0.0.1 -p 8600 Operating.service.consul SRV  （dig命令安裝 yum install bind-utils）
  image.png

可以看到通過consul功能變數名稱解析是沒有問題的。

關於consul的集群安裝，client安裝和services註冊我已經介紹完了，他們之間的調用也介紹了。下一篇文章就是介紹如何和kong網關結合起來。即使你不選擇Kong作為你的網關，這篇文章也可以幫你完善你的服務註冊和發現，以及調用。謝謝大家。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • ECharts模擬百度遷徙實例
    本實例原始信息： 作者： "anix" 演示地址： "Echarts模擬遷徙" 源碼地址： "GitHub ananix qianxi" 前言 “百度地圖春節人口遷徙大數據”（簡稱“百度遷徙”）是百度在春運期間推出的技術品牌項目，為業界首個以“人群遷徙”為主題的大數據可視化項目。 準備 開發工具 由 ...
  • 文件導入功能的前端實現
    1.HTML部分 accept屬性可以設置要上傳文件的格式 2.js部分 介面部分 代碼部分 ...
  • js截取字元串相關的知識點
    截取字元串中的數字 1、使用parseInt() 2、使用正則 截取字元串 1、使用split() 2、使用join() 3、使用substring() 4、使用indexOf() 5、使用substr() ...
  • jQuery 事件介紹
    事件處理程式指的是當 HTML 中發生某些事件時所調用的方法，是 jQuery 中的核心函數。 ...
  • 前端筆記之React（六）ES6的Set和Map&immutable和Ramda和lodash&redux-thunk
    一、ES6的Set、Map數據結構 Map、Set都是ES6新的數據結構，都是新的內置構造函數，也就是說typeof的結果，多了兩個： Set 是不能重覆的數組 Map 是可以任何東西當做鍵的對象 ES6 提供了新的數據結構 Set。它類似於數組，但是成員的值都是唯一的，沒有重覆的值。 let s ...
  • 函數作用域查找、閉包和匿名函數整理
    一、函數作用域查找1、定義說明1）、函數當前作用域查找不到，可以訪問外層函數作用域的活動對象（參數、局部變數、定義在外層函數體里的函數）2）、外層的外層函數。。。一直到全局 第一條說明：定義在外層函數體里的函數，包括當前函數，當前函數調用自己的時候，就是遞歸調用。 2、原理執行環境、作用域鏈、作用域 ...
  • 微信小程式中懸浮窗功能的實現（主要探討和解決在原生組件上的拖動）
    問題場景 所謂懸浮窗就是圖中微信圖標的按鈕，採用fixed定位，可拖動和點擊。 這算是一個比較常見的實現場景了。 為什麼要用cover view做懸浮窗？原生組件出來背鍋了~ 最初我做懸浮窗用的不是cover view，而是view。 這是簡化的代碼結構： index.wxml: 一大段test，占 ...
  • 企業怎樣設計網站主題及風格
    親戚覺得自己家公司的官網不夠吸引人，想換種風格，所以來找我討論，哪種風格更符合自己的公司形象，一個企業的官網就相當於一個人的外在形象，一個人如果長相、打扮、舉止都很優秀就會給人一種被吸引的感覺，相反的話就會讓人不想再看第二眼。當客戶不瞭解這個公司，要不就是親自到店裡瞭解，但是更多的人會選擇在網上搜索 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發（一）：使用.NET MAUI開發第一個安卓APP
    移動開發（一）：使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說，近來想嘗試開發一款安卓APP，考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP，畢竟是使用Visual Studio開發工具，使用起來也比較的順手，結合微軟官方的教程進行了安卓 ...
  • wpf ToggleButton選中效果和一個登錄界面
    前言 QuestPDF 是一個開源 .NET 庫，用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫，它徹底改變了我們生成 PDF 文檔的方 ...
  • 彈幕樹洞項目功能新增篇
    項目地址 項目後端地址： https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址： ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址： http://tree ...
  • 第27篇 sqlserver2022詳細安裝步驟
    話不多說，直接開乾 一.下載 1.官方鏈接下載： https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe，運行開始下載SQL server； 二. ...
  • .NET 開源高性能 MQTT 類庫
    前言 隨著物聯網（IoT）技術的迅猛發展，MQTT（消息隊列遙測傳輸）協議憑藉其輕量級和高效性，已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫，為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog文檔翻譯系列（六） - 可用的接收器、增強器、格式化輸出
    Serilog支持多種接收器用於日誌存儲，增強器用於添加屬性，LogContext管理動態屬性，支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項，適用於不同需求。 ...
  • 警惕 Visual Studio 屬性求值副作用導致邏輯不符合預期
    目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據，爬取信息時需要模擬瀏覽器行為，否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下： 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • [使用目前最新版]HybridCLR6.9.0+YooAsset2.2.4實現純C# Unity熱更新方案 (一)
    1.前言 什麼是熱更新 游戲或者軟體更新時，無需重新下載客戶端進行安裝，而是在應用程式啟動的情況下，在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR，Xlua，ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles，Addressable， ...
  • 在 ASP.NET Core Web API 中使用操作篩選器統一處理通用操作
    本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺，其實像阿裡雲，騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後，它會送 ...
  • 第28篇 如何.net中實現高效可靠數據同步api
    通過以下方式可以高效，並保證數據同步的可靠性 1.API設計 使用RESTful設計，確保API端點明確，並使用適當的HTTP方法（如POST用於創建，PUT用於更新）。 設計清晰的請求和響應模型，以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證，確保接收到的數據符合預期格 ...
所有分類