Strimzi Kafka Bridge(橋接)實戰之一:簡介和部署

来源:https://www.cnblogs.com/bolingcavalry/archive/2023/09/27/17724694.html
-Advertisement-
Play Games

歡迎訪問我的GitHub 這裡分類和彙總了欣宸的全部原創(含配套源碼):https://github.com/zq2599/blog_demos 關於《Strimzi Kafka Bridge(橋接)實戰》 在strimzi技術體系中,橋接(bridge)是很要的功能,內容也很豐富,因此將橋接相關的 ...


歡迎訪問我的GitHub

這裡分類和彙總了欣宸的全部原創(含配套源碼):https://github.com/zq2599/blog_demos

關於《Strimzi Kafka Bridge(橋接)實戰》

  • 在strimzi技術體系中,橋接(bridge)是很要的功能,內容也很豐富,因此將橋接相關的內容從《strimzi實戰》系列中獨立出來,成立橋接相關的系列文章,便於分類和專項深入

本篇概覽

  • 本文是《Strimzi Kafka Bridge(橋接)實戰》系列的第一篇,按照慣例,先做好介紹和部署工作,以便後續深入學習
  • 什麼是橋接?來看官方說明,如下圖,最上面的Brokers就是核心的kafka服務,底部的Client是業務應用,分為消息生產者(Producers)和消費者(Consumers)兩類,正中心藍色背景的Strimzi Kafka Bridge就是今天的主角:strimzi橋接服務,從下圖很容易看出它的作用:通過http介面來生產和消費kafka消息
    在這裡插入圖片描述
  • 在整個strimzi技術體系中,bridge可謂舉足輕重,如下圖紅框,官方為bridge準備了專門文檔鏈接,這是其他擴展組件都沒有的待遇
    在這裡插入圖片描述

安裝方式的選擇

  • bridge支持在兩種環境下安裝:
  1. kubernetes環境:使用strimzi的kafka-operator安裝
  2. 非kubernetes環境:使用bridge的安裝包,解壓後修改配置文件,然後用內置的shell文件啟動即可
  • 整個《strimzi實戰》系列都是在kubernetes環境中操作的,所以本篇只考慮上述第一種安裝方式:kafka-operator
  • 整個部署過程非常簡單,首先確認kubernetes和strimzi的operator都已經部署完成,kafka服務也已經部署好了(部署細節請參考《strimzi實戰之二:部署和消息功能初體驗》
  • 第二步:新增名為kafka-bridge.yaml的文件,內容如下
apiVersion: kafka.strimzi.io/v1beta2
kind: KafkaBridge
metadata:
  name: my-bridge
spec:
  replicas: 1
  bootstrapServers: my-cluster-kafka-bootstrap:9092
  http:
    port: 8080
  • 執行以下命令開始部署bridge,我這裡kafka服務的namespace是aabbcc,請您改為自己實際的namespace
kubectl apply -f kafka-bridge.yaml -n aabbcc
  • 查看deployment、service、pod,發現均有新增,如下圖
    在這裡插入圖片描述
  • 從上圖可見,bridge的service是ClusterIP類型,其值是10.96.0.222,於是迫不及待的試試bridge,執行以下命令,向bridge發出第一個請求,功能是獲取所有topic
curl -X GET http://10.96.0.222:8080/topics
  • 成功收到bridge的響應,如下圖,現有全部topic都返回了
    在這裡插入圖片描述

增加一個service,使得可以從外部訪問

  • bridge的服務是ClusterIP類型,外部無法訪問,那就新增一個NodePort類型的服務吧,新建文件bridge-service-nodeport.yaml,內容如下,31331是我在宿主機上隨便找了個未占用的埠,您隨意
apiVersion: v1
kind: Service
metadata:
  name: bridge-nodeport
spec:
  type: NodePort
  ports:
  - port: 8080
    nodePort: 31331
  selector:
    strimzi.io/cluster: my-bridge
    strimzi.io/kind: KafkaBridge
    strimzi.io/name: my-bridge-bridge
  • 執行以下命令讓上述service生效,我這裡kafka服務的namespace是aabbcc,請您改為自己實際的namespace
kubectl apply -f bridge-service-nodeport.yaml -n aabbcc
  • 從宿主機暴露埠後,就可以用客戶端工具(例如apipost)遠程訪問了,如下圖
    在這裡插入圖片描述

安全問題(需要自己處理)

  • 從前面的架構圖可以看出,業務服務與bridge之間是http協議,那麼存在安全問題嗎(畢竟是遠程調用)?如果真的存在安全問題,strimzi都應對之策嗎?
  • 安全問題確實存在,而且strimzi的應對之策也真夠敷衍...不多說了,來圍觀吧
    在這裡插入圖片描述
  • 調侃歸調侃,但是真正使用bridge的時候,尤其是應用與bridge不在同一個內網環境時,一定要自己做好安全工作
  • 至此,Strimzi Kafka Bridge的介紹和部署已經完成,接下來的文章會有更多實戰等著咱們,通過實際操作熟練掌握橋接特性

歡迎關註博客園:程式員欣宸

學習路上,你不孤單,欣宸原創一路相伴...


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 作者:VanFan 來源:juejin.cn/post/6844904053411938311 現在幾乎大部分的 App 都支持使用多個第三方賬號進行登錄,如:微信、QQ、微博等,我們把此稱為多賬號統一登陸。而這些賬號的表設計,流程設計至關重要,不然後續擴展性賊差。 本文不提供任何代碼實操,但是梳理 ...
  • 環境:Windows,cmake,gcc,g++,CLion 一、下載源碼 二、解壓並構建(我是怎麼知道的?) 進入處於解壓目錄的cmd視窗 輸入以下命令cmake以下 使用以下命令構建 100%即構建成功 找到這些東西,複製到CLion項目中,文件結構在後面 我這裡是先創建一個gtest目錄,在g ...
  • 不知道大家平時開發響應式前端代碼是如何調試的?是不是也跟我一樣,通過瀏覽器的開發者工具來切換不同的界面尺寸來看驗證效果呢? 可能是因為習慣了,平時就不停的切換不同尺寸來看效果。直到TJ君看到今天要推薦的這個免費工具,我才發現之前的調試方式好傻... 使用體驗 下麵,我們還一起來看看今天要推薦的這款名 ...
  • 3.1、環境搭建 創建名為spring_mvc_demo的新module,過程參考2.1節 3.1.1、創建SpringMVC的配置文件 <?xml version="1.0" encoding="UTF-8"?> <beans xmlns="http://www.springframework.o ...
  • 共兩個依賴的需提前安裝的第三方庫:requests和bs4庫 cmd命令行輸入安裝requests庫:pip3 install -i https://pypi.douban.com/simple requests 安裝bs4庫:pip3 install -i https://pypi.douban. ...
  • Matplotlib 庫是一個用於數據可視化和繪圖的 Python 庫。 它提供了大量的函數和類,可以幫助用戶輕鬆地創建各種類型的圖表,包括直方圖、箱形圖、散點圖、餅圖、條形圖和密度圖等。 本系列具體內容包括: 畫布 畫布是其他所有的元素的載體,可以說是最重要,也是最容易被忽視的元素。 繪製圖形之前 ...
  • Context本質 golang標準庫里Context實際上是一個介面(即一種編程規範、 一種約定)。 type Context interface { Deadline() (deadline time.Time, ok bool) Done() <-chan struct{} Err() err ...
  • Merkle 樹(Merkle Tree)是一種樹狀數據結構,通常用於驗證大規模數據集的完整性和一致性。它的名字來源於其發明者 Ralph Merkle。Merkle 樹在密碼學、分散式系統和區塊鏈等領域得到廣泛應用,尤其在區塊鏈中,它用於驗證交易和區塊的完整性,確保數據不被篡改。 下麵是 Merk ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...