003.etcd集群部署-靜態發現

来源:https://www.cnblogs.com/itzgr/archive/2019/01/09/10243082.html
-Advertisement-
Play Games

一 etcd集群概述 1.1 概述 靜態啟動etcd集群要求每個成員都知道集群中的另一個成員。Etcd運行在集群的每個coreos節點上，可以保證coreos集群的穩定，可靠的運行。當集群網路出現動蕩，或者當前master節點出現異常時，etcd可以進行master節點的選舉工作，同時恢復集群中損失 ...


一 etcd集群概述

1.1 概述

靜態啟動etcd集群要求每個成員都知道集群中的另一個成員。Etcd運行在集群的每個coreos節點上，可以保證coreos集群的穩定，可靠的運行。當集群網路出現動蕩，或者當前master節點出現異常時，etcd可以進行master節點的選舉工作，同時恢復集群中損失的數據。

1.2 集群容錯能力

集群大小 最大容錯
1 0
2 1
4 1
5 2
6 2
7 3
8 3
9 4

1.3 集群基礎

每個 etcd cluster 都由若幹個 member 組成的，每個 member 是一個獨立運行的 etcd 實例，單台機器上也可以運行多個 member。 在正常運行的狀態下，集群中會有一個 leader，其餘的 member 都是 followers。leader 向 followers 同步日誌，保證數據在各個 member 都有副本。leader 還會定時向所有的 member 發送心跳報文，如果在規定的時間里 follower 沒有收到心跳，就會重新進行選舉。 客戶端所有的請求都會先發送給 leader，leader 向所有的 followers 同步日誌，等收到超過半數的確認後就把該日誌存儲到磁碟，並返迴響應客戶端。 每個 etcd 服務有三大主要部分組成：raft 實現、WAL 日誌存儲、數據的存儲和索引。 WAL 會在本地磁碟（即 --data-dir）上存儲日誌內容（wal file）和快照（snapshot）。 提示：etcd 預設只保存 1000 個歷史事件，因此不適合有大量更新操作的場景，否則會導致數據的丟失。etcd 典型的應用場景是配置管理和服務發現，即讀多寫少的。

1.4 引導機制

  • 靜態的
在啟動 etcd server 的時候，通過 --initial-cluster 參數配置好所有的節點信息
  • etcd Discovery
使用已有的 etcd cluster 來註冊和啟動
  • DNS發現
使用 DNS 啟動。

二 集群部署-靜態

2.1 環境準備

ntp配置：略 #建議配置ntp服務，保證時間一致性 etcd版本：v3.3.9 防火牆及SELinux：關閉防火牆和SELinux
名稱 地址 主機名 備註
etcd1 172.24.8.31 etcd1.example.com  
etcd2 172.24.8.32 etcd2.example.com  
etcd3 172.24.8.33 etcd3.example.com   
  1 # hostnamectl set-hostname etcd1.example.com
  2 # hostnamectl set-hostname etcd2.example.com
  3 # hostnamectl set-hostname etcd3.example.com
  4 # vi /etc/hosts
  5 #……
  6 172.24.8.31 etcd1.example.com
  7 172.24.8.32 etcd2.example.com
  8 172.24.8.33 etcd3.example.com
  提示：CentOS6.x則修改/etc/sysconfig/network。

2.2 安裝etcd

  1 # ETCD_VER=v3.3.9
  2 # GITHUB_URL=https://github.com/coreos/etcd/releases/download
  3 # DOWNLOAD_URL=${GITHUB_URL}
  4 # rm -f /tmp/etcd-${ETCD_VER}-linux-amd64.tar.gz
  5 # rm -rf /tmp/etcd-download-test
  6 # mkdir -p /tmp/etcd-download-test		#創建下載保存目錄
  7 # curl -L ${DOWNLOAD_URL}/${ETCD_VER}/etcd-${ETCD_VER}-linux-amd64.tar.gz -o /tmp/etcd-${ETCD_VER}-linux-amd64.tar.gz
  8 # tar xzvf /tmp/etcd-${ETCD_VER}-linux-amd64.tar.gz -C /tmp/etcd-download-test --strip-components=1
  9 # cp /tmp/etcd-download-test/etcd /usr/local/bin/
 10 # cp /tmp/etcd-download-test/etcdctl /usr/local/bin/
 11 # rm -f /tmp/etcd-${ETCD_VER}-linux-amd64.tar.gz
 12 
 13 # rm -rf /tmp/etcd-download-test/
 14 # ETCDCTL_API=3
 15 # etcd --version
 16 # etcdctl --version				#查看已安裝版本
  提示：所有節點均需要安裝etcd。

2.3 啟動前準備

  1 # mkdir -p /var/log/etcd/			#建議創建etcd日誌保存目錄
  2 # mkdir -p /data/etcd				#建議創建單獨的etcd數據目錄
 

2.4 啟動集群

  1 [root@etcd1 ~]# etcd --name etcd1 --data-dir /data/etcd \
  2 --initial-advertise-peer-urls http://172.24.8.31:2380 \
  3 --listen-peer-urls http://172.24.8.31:2380 \
  4 --listen-client-urls http://172.24.8.31:2379,http://127.0.0.1:2379 \
  5 --advertise-client-urls http://172.24.8.31:2379 \
  6 --initial-cluster-token etcd-cluster-1 \
  7 --initial-cluster etcd1=http://172.24.8.31:2380,etcd2=http://172.24.8.32:2380,etcd3=http://172.24.8.33:2380 \
  8 --initial-cluster-state new
  註意：第一臺啟動的 etcd 伺服器將會不斷等待其他集群成員完成初始化連接, 處於 waiting 狀態。 
  1 [root@etcd2 ~]# etcd --name etcd2 --data-dir /data/etcd \
  2 --initial-advertise-peer-urls http://172.24.8.32:2380 \
  3 --listen-peer-urls http://172.24.8.32:2380 \
  4 --listen-client-urls http://172.24.8.32:2379,http://127.0.0.1:2379 \
  5 --advertise-client-urls http://172.24.8.32:2379 \
  6 --initial-cluster-token etcd-cluster-1 \
  7 --initial-cluster etcd1=http://172.24.8.31:2380,etcd2=http://172.24.8.32:2380,etcd3=http://172.24.8.33:2380 \
  8 --initial-cluster-state new
  9 
 10 [root@etcd3 ~]# etcd --name etcd3 --data-dir /data/etcd \
 11 --initial-advertise-peer-urls http://172.24.8.33:2380 \
 12 --listen-peer-urls http://172.24.8.33:2380 \
 13 --listen-client-urls http://172.24.8.33:2379,http://127.0.0.1:2379 \
 14 --advertise-client-urls http://172.24.8.33:2379 \
 15 --initial-cluster-token etcd-cluster-1 \
 16 --initial-cluster etcd1=http://172.24.8.31:2380,etcd2=http://172.24.8.32:2380,etcd3=http://172.24.8.33:2380 \
 17 --initial-cluster-state new
  提示：etcd可通過配置文件、命令行參數和環境變數進行配置，在命令行上設置的選項優先於來自環境的選項。如果提供了配置文件，則將忽略其他命令行參數和環境變數。例如，etcd --config-file etcd.conf.yml --data-dir /tmp將忽略該--data-dir標誌。即優先順序為：配置文件>命令行參數>環境變數。 配置文件為yml的文件，可參考《附001.etcd實例配置文件》 建議： 建議根據以下操作將啟動命令寫成固定腳本： 
  1 [root@etcd1 ~]# vi /root/startetcd.sh
  2 #!/bin/sh
  3 #****************************************************************#
  4 # ScriptName: /root/startetcd.sh
  5 # Author: Xiang Hongying
  6 # Create Date: 2018-09-10 01:14
  7 # Modify Author: Xiang Hongying
  8 # E-Mail: [email protected]
  9 # Version:
 10 #***************************************************************#
 11 LOGFILE=/var/log/etcd/etcd.log
 12 /usr/local/bin/etcd --name etcd1 --data-dir /data/etcd \
 13 --initial-advertise-peer-urls http://172.24.8.31:2380 \
 14 --listen-peer-urls http://172.24.8.31:2380 \
 15 --listen-client-urls http://172.24.8.31:2379,http://127.0.0.1:2379 \
 16 --advertise-client-urls http://172.24.8.31:2379 \
 17 --initial-cluster-token etcd-cluster-1 \
 18 --initial-cluster etcd1=http://172.24.8.31:2380,etcd2=http://172.24.8.32:2380,etcd3=http://172.24.8.33:2380 \
 19 -initial-cluster-state new >> $LOGFILE 2>&1 &
 20 [root@etcd1 ~]# chmod u+x startetcd.sh
 

2.5 集群健康檢測

  1 [root@etcd1 ~]# etcdctl cluster-health
07_thumb1

附錄：使用systemd管理etcd。

  1 [root@etcd1 ~]# vi /lib/systemd/system/etcd.service
  2 [Unit]
  3 Description=etcd
  4 Documentation=https://github.com/coreos/etcd
  5 Conflicts=etcd.service
  6 
  7 [Service]
  8 Type=notify
  9 Restart=always
 10 RestartSec=5s
 11 LimitNOFILE=40000
 12 TimeoutStartSec=0
 13 
 14 ExecStart=/usr/local/bin/etcd --name etcd1 --data-dir /data/etcd \
 15 --initial-advertise-peer-urls http://172.24.8.31:2380 \
 16 --listen-peer-urls http://172.24.8.31:2380 \
 17 --listen-client-urls http://172.24.8.31:2379,http://127.0.0.1:2379 \
 18 --advertise-client-urls http://172.24.8.31:2379 \
 19 --initial-cluster-token etcd-cluster-1 \
 20 --initial-cluster etcd1=http://172.24.8.31:2380,etcd2=http://172.24.8.32:2380,etcd3=http://172.24.8.33:2380 \
 21 --initial-cluster-state new
 22 
 23 [Install]
 24 WantedBy=multi-user.target
 25 [root@etcd1 ~]# systemctl daemon-reload
 26 [root@etcd1 ~]# systemctl start etcd.service
 27 [root@etcd1 ~]# systemctl enable etcd.service
  提示：其他節點類似即可。

2.6 關閉集群

  1 [root@etcd1 ~]# systemctl stop etcd
提示： 使用systemctl stop etcd 關閉集群, 在重新啟動集群, 之前 etcd 保存的資料不會丟失 要對 etcd 集群進行重置, 最簡單的方式是關閉集群後, 刪除了所有 etcd member 中ETCD_DATA_DIR 配置中定義的目錄下的所有子目錄，然後啟動所有 member 即可。

三 集群管理

3.1 集群成員檢測

  1 [root@etcd1 ~]# etcdctl member list
08_thumb1

3.2 更新成員url

若成員etcd2的IP地址有變動，需要更新url，則需要執行以下操作： 
  1 [root@etcd3 ~]# ifconfig eth0
  2 inet 172.24.8.40
  3 [root@etcd3 ~]# vi /lib/systemd/system/etcd.service		#將所有舊IP改為最新IP。
  提示：將所有IP修改為新的IP，若使用命令參數啟動，則在命令參數中修改此IP為新值即可。 
  1 [root@etcd3 ~]# systemctl restart etcd
  2 [root@etcd1 ~]# etcdctl member list		#在leader節點查看所有節點
  09_thumb1 
  1 [root@etcd1 ~]# etcdctl member update 14ff148c62a24fb2 http://172.24.8.40:2380	#更新對等url
  10_thumb1 提示：錯誤更新的客戶端URL不會影響etcd群集的運行狀況。

3.3 添加新成員

  1 [root@localhost ~]# hostnamectl set-hostname etcd4.example.com
參考2.3步驟在etcd4.example.com節點安裝etcd。 
  1 [root@etcd1 ~]# etcdctl member add etcd4 http://172.24.8.34:2380
11_thumb1 
  1 [root@etcd4 ~]# export ETCD_NAME="etcd4"
  2 [root@etcd4 ~]# export ETCD_INITIAL_CLUSTER="etcd4=http://172.24.8.34:2380,etcd3=http://172.24.8.40:2380,etcd1=http://172.24.8.31:2380,etcd2=http://172.24.8.32:2380"
  3 [root@etcd4 ~]# export ETCD_INITIAL_CLUSTER_STATE="existing"
  4 [root@etcd4 ~]# etcd --listen-client-urls http://172.24.8.34:2379,http://127.0.0.1:2379 --advertise-client-urls http://172.24.8.34:2379 --listen-peer-urls http://172.24.8.34:2380 --initial-advertise-peer-urls http://172.24.8.34:2380 --data-dir /data/etcd
  5 [root@etcd1 ~]# etcdctl member list
  6 [root@etcd1 ~]# etcdctl cluster-health
  12_thumb1 提示：當使用已刪除成員的數據目錄啟動etcd時，如果etcd連接到集群中的任何活動成員，它將自動退出，可通過以下方式刪除舊member的數據，然後重新啟動： 
  1 # rm -rf /var/lib/etcd/default.etcd/
  2 # systemctl start etcd
 

3.4 刪除成員

  1 [root@etcd1 ~]# etcdctl member remove 5a6397499417250
  2 Removed member 5a6397499417250 from cluster
  13_thumb1 提示：刪除leader是安全的，但是當選出新領導者時，群集將處於非活動狀態。此持續時間通常是選舉超時和投票過程的時間段。

四 集群部署-發現

見《004.etcd集群部署-發現》 參考官方文檔： https://github.com/etcd-io/etcd/blob/master/Documentation/op-guide/configuration.md
您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • Nginx狀態信息（status）配置及信息詳解
    nginx狀態信息功能的介： Nginx 在編譯安裝 Nginx 的時候添加 --with-http_stub_status_module 參數，其功能是記錄 Nginx 的基本訪問狀態信息，讓使用者瞭解 Nginx 的工作狀態， 可以用 /application/nginx/sbin/nginx ...
  • [環境配置]Ubuntu16.04下編譯安裝gcc6.3.0
    上一篇的SVS要用gcc6.3編譯，否則結果不正確，本來以為gcc很好裝，結果發現用apt-get安裝gcc6只能安裝6.5版本，代碼作者奇特的要求只能用gcc6.3，沒辦法只能用源碼裝了，期間碰見了各種各樣的問題，特此記錄。 1.環境要求 安裝gcc之前要安裝gmp，mpfr，mpc，isl這幾個 ...
  • windows之如何把文件夾轉換成iso文件
    （1）oscdimg下載路徑： 鏈接：https://pan.baidu.com/s/1U_SfamsOvI2nav9odAzujQ 提取碼：21fr (2)以管理員身份運行cmd命令： ...
  • Linux常用文件處理命令
    功能 顯示目錄文件 ls 選項[-alh] [路徑、文件或目錄】 -l(long) 表示 list,表示以詳細列表的形式進行展示；-h 用“k”“M”"G"來顯示文件的目錄和大小； -a (all)表示顯示所有的文件和文件夾（包含了隱藏文件（一般是以“.”開頭）和文件夾） 1、 #mkdir 路徑 ...
  • 004.etcd集群部署-動態發現
    一 etcd發現簡介 1.1 需求背景 在實際環境中，集群成員的ip可能不會提前知道。如使用dhcp自動獲取的情況，在這些情況下，使用自動發現來引導etcdetcd集群，而不是指定靜態配置，這個過程被稱為“發現”。 etcd Discovery 使用已有的 etcd cluster 來註冊和啟動 D ...
  • linux-Vim命令合集
    Vim命令合集 命令歷史 以:和/開頭的命令都有歷史紀錄，可以首先鍵入:或/然後按上下箭頭來選擇某個歷史命令。 啟動vim 在命令行視窗中輸入以下命令即可 vim 直接啟動vim vim filename 打開vim並創建名為filename的文件 文件命令 打開單個文件 vim file 同時打開 ...
  • Linux的基礎預備知識
    Linux下一切皆文件 1、root@mk-virtual-machine:/home/mk# root:該位置表示當前終端登錄的用戶名 mk-virtual-machine:/home/mk：當前終端的工作目錄 #：超級管理用戶登錄 $ ：普通用戶 2、su或su username :進入超級用戶 ...
  • zabbix4.0LTS安裝配置
    一、環境準備 1、最小化安裝centos7.5系統 2、安裝常用軟體包 yum install -y net-tools vim bash-completion 3、關閉selinux和修改主機名 vim /etc/selinux/config SELINUX=disabled vim /etc/h ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發（一）：使用.NET MAUI開發第一個安卓APP
    移動開發（一）：使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說，近來想嘗試開發一款安卓APP，考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP，畢竟是使用Visual Studio開發工具，使用起來也比較的順手，結合微軟官方的教程進行了安卓 ...
  • wpf ToggleButton選中效果和一個登錄界面
    前言 QuestPDF 是一個開源 .NET 庫，用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫，它徹底改變了我們生成 PDF 文檔的方 ...
  • 彈幕樹洞項目功能新增篇
    項目地址 項目後端地址： https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址： ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址： http://tree ...
  • 第27篇 sqlserver2022詳細安裝步驟
    話不多說，直接開乾 一.下載 1.官方鏈接下載： https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe，運行開始下載SQL server； 二. ...
  • .NET 開源高性能 MQTT 類庫
    前言 隨著物聯網（IoT）技術的迅猛發展，MQTT（消息隊列遙測傳輸）協議憑藉其輕量級和高效性，已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫，為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog文檔翻譯系列（六） - 可用的接收器、增強器、格式化輸出
    Serilog支持多種接收器用於日誌存儲，增強器用於添加屬性，LogContext管理動態屬性，支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項，適用於不同需求。 ...
  • 警惕 Visual Studio 屬性求值副作用導致邏輯不符合預期
    目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據，爬取信息時需要模擬瀏覽器行為，否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下： 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • [使用目前最新版]HybridCLR6.9.0+YooAsset2.2.4實現純C# Unity熱更新方案 (一)
    1.前言 什麼是熱更新 游戲或者軟體更新時，無需重新下載客戶端進行安裝，而是在應用程式啟動的情況下，在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR，Xlua，ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles，Addressable， ...
  • 在 ASP.NET Core Web API 中使用操作篩選器統一處理通用操作
    本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺，其實像阿裡雲，騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後，它會送 ...
  • 第28篇 如何.net中實現高效可靠數據同步api
    通過以下方式可以高效，並保證數據同步的可靠性 1.API設計 使用RESTful設計，確保API端點明確，並使用適當的HTTP方法（如POST用於創建，PUT用於更新）。 設計清晰的請求和響應模型，以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證，確保接收到的數據符合預期格 ...
所有分類