zookeeper的安裝與配置

来源:https://www.cnblogs.com/wang9911-00/archive/2019/03/28/10616713.html
-Advertisement-
Play Games

zookeeper簡介 1.官網:http://zookeeper.apache.org/ 介紹:Apache ZooKeeper致力於開發和維護開源伺服器,實現高度可靠的分散式協調。 ZooKeeper是一種集中式服務,用於維護配置信息,命名,提供分散式同步和提供組服務。 所有這些類型的服務都以分 ...


zookeeper簡介

  1.官網:http://zookeeper.apache.org/

    介紹:Apache ZooKeeper致力於開發和維護開源伺服器,實現高度可靠的分散式協調。

    ZooKeeper是一種集中式服務,用於維護配置信息,命名,提供分散式同步和提供組服務。

  所有這些類型的服務都以分散式應用程式的某種形式使用。每次實施它們都需要做很多工作來

  修複不可避免的錯誤和競爭條件。由於難以實現這些類型的服務,應用程式最初通常會吝嗇它們,

  這使得它們在變化的情況下變得脆弱並且難以管理。即使正確完成,這些服務的不同實現也會在

  部署應用程式時導致管理複雜性。

  2.Zookeeper工作原理

    存儲和監聽

  3.Zookeeper角色

    主從結構:zookeeper由一個領導者多個追隨者組成

    1)Leader領導者->主

    2)Follower追隨者->從
   

   註意:zk集群中只要有半數以上的節點存活,zk集群就能正常工作。所以搭建zk集群最好搭建

  奇數台(3,5,11)。

  4.zookeeper功能

    大數據中使用zookeeper業務:

    1)做統一的配置管理
    2)做統一的命名服務

    3)做統一的集群管理

    4)做伺服器的動態上下線感知

  5.zookeeper的單節點安裝部署

    1)下載安裝包:zookeeper-3.4.10.tar.gz

      到官網下載:http://zookeeper.apache.org/

    2)上傳安裝包到linux

      alt+p(此處採用的是secureCRT連接的虛擬機)

    3)解壓壓縮包
       tar -zxvf zookeeper-3.4.10.tar.gz -C /opt/module/

      在解壓好的安裝包(/opt/module/zookeeper-3.4.10/)里創建新的文件夾zkData

    4)修改配置文件

      重命名:mv zoo_sample.cfg zoo.cfg

      添加到配置文件:vim zoo.cfg

      dataDir=/opt/module/zookeeper-3.4.10/zkData

    5)啟動zookeeper

      bin/zkServer.sh start
    6)啟動zookeeper客戶端
      bin/zkCli.sh

  6.zookeeper集群安裝部署

    1)下載安裝包:zookeeper-3.4.10.tar.gz

      到官網下載:http://zookeeper.apache.org/

    2)上傳安裝包到linux

      alt+p(此處採用的是secureCRT連接的虛擬機)

    3)解壓壓縮包
       tar -zxvf zookeeper-3.4.10.tar.gz -C /opt/module/

      在解壓好的安裝包(/opt/module/zookeeper-3.4.10/)里創建新的文件夾zkData

    4)修改配置文件

      重命名:mv zoo_sample.cfg zoo.cfg

      添加到配置文件:vim zoo.cfg

      dataDir=/opt/module/zookeeper-3.4.10/zkData

      ##############zkconfig##############

      server.1=hadoop133:2888:3888   
      server.2=hadoop134:2888:3888
      server.3=hadoop135:2888:3888
      hadoop133\hadoop134\hadoop135\為我的虛擬機主機名,在此需要改成你自己的主機名

      在/opt/module/zookeeper-3.4.10/zkData/目錄下創建文件

      touch myid

      vim myid
      添加伺服器編號:1

    5)拷貝zookeeper到其它機器

       scp -r zookeeper-3.4.10/  hadoop134:/opt/module/

      scp -r zookeeper-3.4.10/  hadoop135:/opt/module/

      註意需要修改每台機器的myid文件 設置為當前的機器編號即可

      hadoop134的/opt/module/zookeeper-3.4.10/zkData/下的myid文件里的伺服器編號為:2

      hadoop134的/opt/module/zookeeper-3.4.10/zkData/下的myid文件里的伺服器編號為:3

    6)啟動zookeeper集群

      $ bin/zkServer.sh start
    7)查看zookeeper狀態
      $ bin/zkServer.sh status

    8)配置環境變數:vi /etc/profile

      export ZOOKEEPER_HOME=/opt/module/zookeeper-3.4.10
      export PATH=$ZOOKEEPER_HOME/bin:$PATH
      聲明環境變數:source /etc/profile

    

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 一、shuffle機制概述 shuffle機制就是發生在MR程式中,Mapper之後,Reducer之前的一系列分區排序的操作。shuffle的作用是為了保證Reducer收到的數據都是按鍵排序的。 二、shuffle機制的流程 還是按照上個隨筆MR整體流程的需求來做參考: 1.Mapper中con ...
  • Solr的時區為什麼總是UTC? 從資料庫同步數據到Solr, 為什麼時間總是少了8小時? 要怎樣修改Solr的預設時區?這篇文章來做個實踐和探討. ...
  • 下載鏈接: ※ 如果沒有 直接複製url 到瀏覽器下載 1:下載完成 2:解壓 3: 複製 放到use/local目錄下 4:進入 redis 目錄 ( 確認 /url/local/redis/ 目錄下的文件是否存在, INSTALL Makefile redis.conf ) 5: 生成 6: 測 ...
  • 一、輔助排序 需求:先有一個訂單數據文件,包含了訂單id、商品id、商品價格,要求將訂單id正序,商品價格倒序,且生成結果文件個數為訂單id的數量,每個結果文件中只要一條該訂單最貴商品的數據。 思路:1.封裝訂單類OrderBean,實現WritableComparable介面; 2.自定義Mapp ...
  • 第一次在博客園寫博客,寫的不好,請大家多多評論,也希望自己以後對技術探索的更深。 今天下班之後,由於晚上要發版本,所以開發同事必須留下,突然收到一封公司監控預警郵件。 瞄了幾眼,大致的意思就是說 視圖無效。由於視圖查詢的是表,所以開始做實驗測試。 實驗一: 當基表drop列的時候,視圖是否還是有效? ...
  • 本篇博文介紹瞭如何在URL中直接發起HTTP請求, 操作Solr的文檔? 如何通過Solr的Web界面添加、修改、刪除文檔? 還涉及到常見的Solr刪除文檔的方式: URL發起HTTP請求, Solr Web中的document中提交請求. ...
  • Redis 三大特性: Redis 支持數據的持久化,可以將記憶體中的數據保存在磁碟中,重啟的時候可以再次載入進行使用 Redis 不僅支持簡單的 鍵 * 值 類型的數據, 還提供list、set、zset、hash 等數據結構存儲 Redis 支持數據的備份,即master -slave模式的數據備 ...
  • 原理:多個msyql/mariadb之間可以實時同步,任意節點的操作可以立即同步到其他節點,底層採用galera插件同步,類似rsync,上層mysql相對於galera是透明的,可以實現多節點同時讀寫(無法實現讀寫分離)。 NOTE:普通的msyql/mariadb無法集成galera,要想使用g ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...