輕鬆掌握組件啟動之MongoDB(番外篇):高可用複製集架構環境搭建-mtools

来源:https://www.cnblogs.com/guoxiaoyu/archive/2023/10/18/17743883.html
-Advertisement-
Play Games

mtools是一個基於Python實現的MongoDB工具集,旨在提供一系列功能,包括MongoDB日誌分析、報表生成以及簡易的資料庫安裝等。它由MongoDB原生的工程師單獨發起併進行開源維護。mtools包含了一些常用的組件,如mlaunch、mlogfilter、mplotqueries和ml... ...


引言

在前兩章節中,我們詳細講解瞭如何手動配置啟動MongoDB。然而,現在有許多不同的工具可以幫助我們更方便地啟動和創建MongoDB資料庫。因此,今天我將介紹一個名為mtools的開源項目,它可以幫助我們更輕鬆地啟動MongoDB。

mtools介紹

官方文檔地址:mtools

mtools是一個基於Python實現的MongoDB工具集,旨在提供一系列功能,包括MongoDB日誌分析、報表生成以及簡易的資料庫安裝等。該工具集由MongoDB原生的工程師單獨發起併進行開源維護,目前已經吸引了大量的用戶。

mtools包含了一些常用的組件,下麵是其中一些組件的介紹:

  • mlaunch:這個組件能夠快速搭建本地測試環境,無論是單機、副本集還是分片集群,都可以輕鬆實現。
  • mlogfilter:這個組件用於對MongoDB日誌進行過濾,支持按時間檢索慢查詢和全表掃描操作,同時還支持通過多個屬性進行信息過濾,並可以將結果輸出為JSON格式。
  • mplotqueries:這個組件能夠將日誌分析結果轉換為圖表形式,它依賴於tkinter(Python圖形模塊)和matplotlib模塊,可以方便地進行數據可視化。
  • mlogvis:這個組件可以將日誌分析結果轉換為一個獨立的HTML頁面,實現了與mplotqueries相同的功能。
Tools Description
mlogfilter 合併、分割日誌文件,過濾慢查詢,集合掃描,格式轉換等
mloginfo 統計日誌內的資料庫信息(啟停、連接、集群狀態等)
mplotqueries 日誌轉化為圖表形式
mlogvis 日誌轉化為HTML頁面,與mplotqueries類似
mlaunch 快速搭建本地測試環境(單機、集群、分片)

安裝mtools

環境準備

為了使用mtools,您需要確保在Path路徑中包含MongoDB的二進位程式所在的目錄{MONGODB_HOME}/bin。此外,還需要安裝Python環境,並選擇安裝Python 3.7、3.8或3.9版本。如果您正在Centos7上進行安裝,可以安裝Python 3.9。

pip安裝

安裝依賴

pip3 install python-dateutil
pip3 install psutil pymongo 

image

安裝mtools

pip3 install mtools

通過源碼安裝

源碼地址:https://github.com/rueckstiess/mtools/releases/tag/v1.6.4

wget https://github.com/rueckstiess/mtools/archive/refs/tags/v1.6.4.tar.gz
#解壓後進入mtools
python setup.py install

使用mtools創建複製集

#準備複製集使用的工作目錄
mkdir -p /data/mongo
cd /data/mongo
#初始化3節點複製集
mlaunch init --replicaset --nodes 3

埠預設從27017開始,依次為2017,27018,27019

image

查看當前複製集狀態

 mongo --port 27017
 replset:PRIMARY> rs.status()

使用mtools創建分片集群

#準備分片集群使用的工作目錄
mkdir /data/mongo-cluster
cd /data/mongo-cluster/

#執行mlaunch init初始化集群

mlaunch init --sharded 2 --replicaset --node 3 --config 3 --csrs --mongos 3 --port 27050 

選項說明

  • sharded 2:啟用分片集群模式,分片數為2。
  • replicaset --nodes 3:採用3節點的複製集架構,即每個分片為一致的複製集模式。
  • config 3 --csrs:配置伺服器採用3節點的複製集架構模式,--csrs是指Config Server as a Replica Set
  • mongos 3:啟動3個mongos實例進程。
  • port 27050:集群將以27050作為起始埠,集群中的各個實例的埠號基於該值遞增。
  • noauth:不啟用鑒權功能。
  • arbiter:向複製集中添加一個額外的仲裁器。
  • single:創建單個獨立節點。
  • dir:指定數據目錄,預設為./data。
  • binarypath:如果環境中已經存在MongoDB的二進位文件,則不需要指定該選項。

如果安裝成功,稍等片刻後,你將會看到以下輸出:

image

檢查分片實例

mlaunch list命令可以對當前集群的實例狀態進行檢查

image

此時您可以通過查看各個實例的運行狀態來獲取更多信息,包括每個實例的進程號和監聽的埠等。

#顯示標簽
mlaunch  list --tags 

#顯示啟動命令
mlaunch  list --startup

連接mongos,查看分片實例的情況

mongo --port 27050
mongos> db.adminCommand({listShards:1})

image

停止、啟動

如果希望停止集群,則可以使用mlaunch stop命令

image

想要再次啟動集群,可以使用mlaunch start命令

image

使用mtools搭建測試集群是一個非常方便且高效的方式。相比手工搭建,它能夠大大減少時間和精力的投入。通過mtools,您可以快速創建一個測試環境,而不需要手動安裝和配置各種軟體和組件。

總結

mtools是一個基於Python實現的MongoDB工具集,旨在提供一系列功能,包括MongoDB日誌分析、報表生成以及簡易的資料庫安裝等。它由MongoDB原生的工程師單獨發起併進行開源維護。mtools包含了一些常用的組件,如mlaunch、mlogfilter、mplotqueries和mlogvis等,可以幫助我們更方便地啟動和創建MongoDB資料庫。而不需要手動安裝和配置各種軟體和組件。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 在WPF應用端開發,它的界面類似於Winform端,因此我們也需要對系統的菜單進行動態配置,這樣才能把系統的功能彈性發揮到極致,通過動態菜單的配置方式,我們可以很容易的為系統新增所需的功能,通過許可權分配的方式,可以更有效的管理系統的菜單分配到不同的角色用戶,本篇隨筆介紹在WPF應用端中實現系統動態菜... ...
  • 哈嘍大家好,我是鹹魚 不知道大家在日常學習或者工作當中用 dig 命令多不多 dig 是 Domain Information Groper 的縮寫,對於網路管理員和在功能變數名稱系統(DNS)領域工作的小伙伴來說,它是一個非常常見且有用的工具。 無論是簡單的 DNS 解析查找還是更高級的故障排除和分析,d ...
  • 背景及需求 之前提到我們模型驅動的實現選擇的是解釋型,需要模型的元數據信息,在接到請求後動態處理邏輯. 此外,應用的通用能力中還包括:頁面dsl查詢,菜單查詢等. 而且後期加入觸發器,用戶自定義api後,這些元數據也需要提供查詢服務. 所以我們需要一個元數據模塊,需要提供兩個基礎功能:載入元數據和提 ...
  • Linux系統中,DBA一般使用oracle用戶登陸/訪問Linux操作系統,然後使用sqlplus命令登陸資料庫進行一些維護操作,如果由於某些特殊原因,系統管理員創建了一個db_support用戶,如果使用dba_support這個普通賬號登陸了Linux操作系統,如何使用sqlplus訪問資料庫 ...
  • 下載jdk-8u361-linux-x64.tar.gz https://www.oracle.com/java/technologies/downloads 上傳jdk-8u361-linux-x64.tar.gz 到node1 以下命令都是在node1上執行 解壓 tar -zxvf jdk-8 ...
  • 2023金融業資料庫技術大會上,華為雲資料庫服務產品部總經理蘇光牛、華為雲資料庫服務產品部CTO莊乾鋒受邀出席,分享了關於華為雲GaussDB資料庫的設計思考和關鍵技術能力。 ...
  • 在上篇文章中,我們向大家解釋了為什麼實時湖倉是當前企業數字化轉型過程中的解決之道,介紹了實時計算和數據湖結合的應用場景。(“數據驅動”時代,企業為什麼需要實時湖倉?) 在這篇文章中,我們將詳細介紹在數棧實時開發平臺內,實時湖倉的功能架構設計和具體實操案例。 功能架構介紹 實時湖倉並不是一個獨立的產品 ...
  • 使用Base克隆集群節點 先把Base關機,然後右鍵 - 管理 - 克隆 選擇完整克隆 克隆名字這裡叫node1 重覆步驟,克隆node2/node3 為了分類,創建了一個大數據集群文件夾 以下命令全是root許可權執行 配置固定IP # 修改主機名 hostnamectl set-hostname ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...