Elasticsearch重要配置

来源:http://www.cnblogs.com/ginb/archive/2017/06/16/7027910.html
-Advertisement-
Play Games

雖然Elasticsearch需要很少的配置,但是有一些設置需要手動配置,並且必須在進入生產之前進行配置。 path.data and path.logs cluster.name node.name bootstrap.memory_lock network.host discovery.zen. ...


雖然Elasticsearch需要很少的配置,但是有一些設置需要手動配置,並且必須在進入生產之前進行配置。

  • path.data  and path.logs
  • cluster.name
  • node.name
  • bootstrap.memory_lock
  • network.host
  • discovery.zen.ping.unicast.hosts
  • discovery.zen.minimum_master_nodes

path.data  and path.logs

如果您正在使用.zip.tar.gz文件歸檔datalogs 目錄在 $ES_HOME 如果這些重要文件夾保留在預設位置,則Elasticsearch升級到新版本時,很有可能被刪除。

在生產中使用,肯定要更改數據和日誌文件夾的位置:

path:
  logs: /var/log/elasticsearch
  data: /var/data/elasticsearch

RPM和Debian的安裝包已經使用了自定義的data和logs路徑。

 path.data  選項可以同時指定多個路徑,所有的路徑都會被用來存儲數據(但所有屬於同一個分片的文件,都會全部保存到同一個數據路徑)

path:
  data:
    - /mnt/elasticsearch_1
    - /mnt/elasticsearch_2
    - /mnt/elasticsearch_3

cluster.name

某個節點只有和集群下的其他節點共用它的 cluster.name  才能加入一個集群。預設是elasticsearch,但是應該修改為更恰當的,用於描述集群目的的名稱。

cluster.name: logging-prod

一定要確保不要在不同的環境中使用相同的集群名稱。否則,節點可能會加入錯誤的集群中。

node.name

預設情況下,Elasticsearch 將使用隨機生成的uuid的前7個字元作為節點id,請註意,節點ID是持久化的,並且在節點重新啟動時不會更改,因此預設節點名稱也不會更改。

推薦為節點配置更有意義的名稱。

node.name: prod-data-2

也可以使用伺服器的 HOSTNAME  作為節點的名稱。

node.name: ${HOSTNAME}

bootstrap.memory_lock

由於當jvm開始swapping時es的效率會降低,所以要保證它不swap,這對節點健康極其重要。實現這一目標的一種方法是將 bootstrap.memory_lock 設置為true

要使此設置有效,首先需要配置其他系統設置。有關如何正確設置記憶體鎖定的更多詳細信息,請參閱啟用bootstrap.memory_lock

network.host

預設情況下,Elasticsearch 僅僅綁定迴環地址,比如127.0.0.1 和[::1] 。這足以在伺服器上運行單個開發節點。

事實上,一臺機器上可以啟動多個節點這可對於測試Elasticsearch集群的能力很有用,但不推薦用於生產。

為了與其他伺服器上的節點進行通信並形成集群,你的節點將需要綁定到非環回地址。雖然這裡有很多網路相關的配置,但通常只需要配置一下 network.host 

network.host: 192.168.1.10

 network.host 設置一些特殊值也是可以的,比如 _local_, _site_, _global_ ,ip4,ip6。更多詳情請參考 “Special values for network.host”.

一旦自定義設置了 network.host ,Elasticsearch 會假定你正在從開發模式轉移到生產模式,並將許多系統啟動檢查從警告升級到異常。有關詳細信息,請參閱Development mode vs production mode”。

discovery.zen.ping.unicast.hosts

開箱即用,沒有任何網路配置情況下,Elasticsearch將綁定到可用的迴環地址,並會掃描埠9300至9305以嘗試連接到同一伺服器上運行的其他節點。這提供了一個自動集群體驗,而無需執行任何配置。

如果想和其他伺服器的節點形成一個集群,你必須提供集群中其它節點的列表。可以通過以下方式指定:

discovery.zen.ping.unicast.hosts:
   - 192.168.1.10:9300
   - 192.168.1.11 
   - seeds.mydomain.com 

如果沒有指定埠,將預設為 transport.profiles.default.port 並回退 transport.tcp.port 。

如果輸入的是主機名,被解析成多個地址,將會嘗試連接所有地址。

discovery.zen.minimum_master_nodes

為了防止數據丟失, discovery.zen.minimum_master_nodes 配置至關重要, 以便每個候選主節點知道為了形成集群而必須可見最少數量的候選主節點

沒有這種設置,遇到網路故障的群集有可能將群集分成兩個獨立的群集(腦裂), 這將導致數據丟失。更詳細的解釋在Avoiding split brain with minimum_master_nodes ” 中提供

為了避免腦裂,候選主節點的數量應該設置為:

(master_eligible_nodes / 2) + 1

換句話說,如果現在有3個節點,最小候選主節點數應該是(3/2)+1=2:

discovery.zen.minimum_master_nodes: 2

官方文檔:https://www.elastic.co/guide/en/elasticsearch/reference/current/important-settings.html#path-settings

參考文檔

https://github.com/13428282016/elasticsearch-CN/wiki/es-setup--elasticsearch

ElasticSearch入門 第二篇:集群配置


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 首先,上圖展示的是項目的部署方式。用戶通過手機訪問上面的nignx,即應用nignx將請求分發到三台web伺服器中,伺服器將從redis緩存里獲取熱點數據,如過期或者非熱點數據則從資料庫中獲取並同步到redis.此過期時間設定為12小時。另外資料庫和redis未保存正文內容。當用戶讀取正文內容時,服 ...
  • 1.ArrayBlockingQueue:基於數組實現的一個阻塞隊列,在創建ArrayBlockingQueue對象時必須制定容量大小。 並且可以指定公平性與非公平性,預設情況下為非公平的,即不保證等待時間最長的隊列最優先能夠訪問隊列。 2.ArrayBlockingQueue內部通過Object[ ...
  • 版權聲明:本文為博主原創文章,轉載時請註明原文鏈接。 1.創建表 創建了一個兩個欄位的表,num和name,都設置為非空,num設為主鍵,在創建表的時候經常一個“缺失左括弧”的錯誤信息,估計是VARCHAR2類型後面沒有加數據長度,加上就好了。這是用sql語句創建表,感覺要比右鍵新建要麻煩,可能有的 ...
  • zookeeper 1) cp /vagrant/zookeeper-3.5.2-alpha.tar.gz ~2) cd zookeeper-3.5.2-alpha3) mkdir data4) mkdir datalog5) cd data6) touch myid7) echo 1 > myid ...
  • 數 據 庫 今天小編來講一下資料庫的相關知識點,資料庫的三大特性可謂是:實體屬性和關係。 實體:表; 屬性:表中的數據(欄位); 關係:表與表之間的關係; 資料庫設計三大範式(重點): 第一範式(1NF):數據表中的每一列(每個欄位)必須是不可拆分的最小單元,也就是確保每一列的原子性; 例如:use ...
  • 通常我們採集Redis的性能數據時,或者想要知道Redis當前的性能如何時,需要知道這個實例的QPS數據,那麼這個QPS數據是如何計算的呢?我們都有哪些辦法或者這個QPS ? QPS顧名思義就是每秒執行的指令數,猜想Redis裡邊肯定是有個計數器來對每次執行的命令進行一次累計操作,通過這個思路不難想 ...
  • hadoop的ha部署-利用zookeeper和jns來實現 ...
  • https://www.microsoft.com/mspress/companion/0-7356-2313-9/ https://www.microsoftpressstore.com/store/inside-microsoft-sql-server-2008-t-sql-querying-9 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...