Zookeeper+Kafka的單節點standalone配置

来源:https://www.cnblogs.com/ALittleMoreLove/archive/2018/07/31/9396745.html
-Advertisement-
Play Games

Zookeeper+Kafka的單節點standalone配置 環境描述:Ubuntu16.04 server系統,在系統上搭建Java環境,jdk的版本為1.8或更高,我的伺服器IP地址為192.168.0.106。 1.使用命令mkdir /opt/data在opt目錄下創建data目錄。 2. ...


Zookeeper+Kafka的單節點standalone配置

環境描述:Ubuntu16.04 server系統,在系統上搭建Java環境,jdk的版本為1.8或更高,我的伺服器IP地址為192.168.0.106。

1.使用命令mkdir /opt/data在opt目錄下創建data目錄。

2.在Apache官網http://www.apache.org/dyn/closer.cgi/zookeeper/https://www.apache.org/dyn/closer.cgi?path=/kafka/0.10.0.0/kafka_2.10-0.10.0.0.tgz

上下載zookeeper和kafka的壓縮包,我下載的是zookeeper-3.4.10.tar.gz和kafka_2.11-0.10.1.0.gz。

3.使用命令tar -zxvf kafka_2.11-0.10.1.0.gztar -zxvf zookeeper-3.4.10.tar.gz對壓縮文件進行解壓,對解壓後的文件進行改名和移動位置,移動到/opt/data目錄下。

4.使用命令vim /etc/hosts增加zookeeper節點的IP如下附圖所示。

5.使用命令cd /opt/data/zookeeper/conf進入zookeeper目錄下的conf目錄,使用命令cp zoo_sample.cfg zoo.cfg複製出文件zoo.cfg,使用命令vim zoo.cfg修改該文件。同時,在/opt/data/zookeeper下創建目錄data目錄和logs目錄,在/opt/data/zookeeper/data下創建文件myid,使用命令echo 1 > myid在文件myid中寫入1。

 

============================================================================================================================================

在此zookeeper的配置已經完成。

============================================================================================================================================

6.使用命令vim /opt/data/kafka/config/server.properties修改kafka的配置文件,同時使用命令mkdir /opt/data/kafka/kafka-logs創建目錄,修改內容如下附圖所示。

============================================================================================================================================

在此kafka的配置已經完成。

============================================================================================================================================

測試zookeeper和kafka的配置是否成功:

1.啟動zookeeper:在/opt/data/zookeeper目錄下使用命令bin/zkServer.sh start啟動zookeeper。使用命令bin/zkServer.sh status查看zookeeper的狀態,如果現實如下圖所示的狀態表示zookeeper配置成功。

2.啟動kafka:在/opt/data/kafka目錄下使用命令bin/kafka-server-start.sh config/server.properties啟動kafka,顯示以下信息為成功啟動kafka。

3.創建會話topic:打開新的終端(我們暫記為終端1),在/opt/data/kafka目錄下使用命令bin/kafka-topics.sh --create --zookeeper 192.168.0.106:2181 --replication-factor 1 --partitions 1 --topic test1創建會話test1,使用命令bin/kafka-topics.sh --list --zookeeper 192.168.0.106:2181查看會話列表,顯示以下信息為成功創建會話。

4.啟動生產者Producer發消息:在/opt/data/kafka目錄下使用命令bin/kafka-console-producer.sh --broker-list 192.168.0.106:9092 --topic test1啟動消息生產者。

5.啟動消費者Consumer接收消息:再打開一個新的終端(我們暫記為終端2),在/opt/data/kafka目錄下使用命令bin/kafka-console-consumer.sh --bootstrap-server 192.168.0.106:9092 --from-beginning --topic test1來接收消息。

6.在生產者Producer所在的終端1里隨便輸入一些內容,消費者Consumer所在的終端2將會實時的捕獲終端1里發出的消息。如下表示成功建立會話,kafka和zookeeper的單節點standalone配置圓滿成功。

7.刪除會話topic:在/opt/data/kafka目錄下使用命令bin/kafka-topics.sh --delete --zookeeper 192.168.0.106:2181 --topic test1,再使用命令bin/kafka-topics.sh --list --zookeeper 192.168.0.106:2181查看會話是否存在,如下圖所示,表示會話test1刪除成功。

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • [TOC] 一、 前言 這是筆者在參與一個小型項目開發時所遇到的一個BUG,因為項目經驗不足對Entity Framwork框架認識不足導致了這一BUG浪費了一天的時間,特此在這裡記錄。給自己一個警醒希望大家遇到相同問題能幫助到大家。 註:筆者水平有限,大家發現錯誤望批評指正。 二、問題背景 1.本 ...
  • Dictionary<string, string>是一個泛型,什麼是泛型?使用泛型下麵是用泛型來重寫上面的棧,用一個通用的數據類型T來作為一個占位符,等待在實例化時用一個實際的類型來代替。讓我們來看看泛型的威力: public class Stack<T> { private T[] m_item ...
  • 1. 概念: WFI(Wait for interrupt)和WFE(Wait for event)是兩個讓ARM核進入low power standby模式的指令,由ARM architecture定義,由ARM core實現。 2. WFI和WFE 2.1 相同點 WFI和WFE的功能非常類似, ...
  • 字元串是shell編程中最常用最有用的數據類型(除了數字和字元串,也沒啥其它類型好用了),字元串可以用單引號,也可以用雙引號,也可以不用引號。 但是單引號和雙引號是有區別的: 單引號: 單引號里的任何字元都會原樣輸出,單引號字元串中的變數是無效的; 單引號字串中不能出現單獨一個的單引號(對單引號使用 ...
  • 1.ansible的安裝 1)使用源碼安裝Python3.5 安裝支持包 yum -y install lrzsz vim net-tools gcc gcc-c++ ncurses ncurses-devel unzip zlib-devel zlib openssl-devel openssl ...
  • 在Shell里存在的一些特殊變數:$!、$@、$#、$$、$*、$0、$n、$_、$? [root@shell ~]# sh shell.sh aaa bbb ccc$0 獲取當前執行的shell腳本的文件名:shell.sh$n 獲取當前執行的shell腳本的第n個參數值,n=1..9:$1=aa ...
  • [TOC] 1. 前期預備知識 1.1 串口通訊電路圖 ![image_1bqjjhr9leo112efe02df51fp.png 25kB][1] 從上圖可見,CC2530晶元通過P0埠的P0.1和P0.2引腳進行串口通訊。這個實驗當中對於埠的操作也主要就是P0埠。 1.2 實驗相關寄存器 ...
  • [TOC] 1.前期預備知識 1.1 新大陸ZigBee模塊LED燈電路 ![image_1bq999vhb104s1v6249bq031jjg9.png 32.1kB][1] 從上兩的兩個電路可知 1.LED1連接在LED LINK上,而LED LINK是從CC2530晶元的P1.0埠引出,同樣 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...