mongodb分片集群 搭建 + keyFile認證

来源:https://www.cnblogs.com/jxkshu/archive/2020/04/29/mongodb.html
-Advertisement-
Play Games

創建mongodb分片集群 + keyFile認證 一、環境準備 1. 伺服器節點信息【三台伺服器】 x.x.x.159、 x.x.x..160、 x.x.x..161 2. 伺服器系統 linux x86_64 GNU/Linux 或者 centos7 或者 redhat 3. mongodb版本 ...


 創建mongodb分片集群 + keyFile認證

一、環境準備

　　 1. 伺服器節點信息【三台伺服器】
　　　　x.x.x.159、 x.x.x..160、 x.x.x..161
　　 2. 伺服器系統
　　　　linux x86_64 GNU/Linux 或者 centos7 或者 redhat
　　3. mongodb版本
　　　　mongodb v4.2.5
　　　　下載地址：https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-rhel70-4.2.5.tgz

 二、 集群環境設計

　　1. 三個 分片 複製集合
　　　　shard1(x.x.x.159:27017、 x.x.x.160:27017、 x.x.x.161:27017)
　　　　shard2(x.x.x.159:27018、 x.x.x.160:27018、 x.x.x.161:27018)
　　　　shard3(x.x.x.159:27019、 x.x.x.160:27019、 x.x.x.161:27019)
　　2. 一個 config 複製集合
　　　　(x.x.x.159:28018、 x.x.x.160:28018、 x.x.x.161:28018)
　　3. 一個 mongos 節點
　　　　(x.x.x.159:27000)

 三、mongodb 安裝、

`tar -zxvf mongodb-linux-x86_64-rhel70-4.2.5.tgz`
 mv mongodb-linux-x86_64-rhel70-4.2.5 /opt/mongodb4.2

 

四、添加環境變數

　　1. vim /etc/profile
　　2. 文件末尾追加:           export PATH=$PATH:/opt/mongodb/bin
　　3. 載入文件立刻生效:    source /etc/profile

五、搭建mongodb分片複製集

　　1. 分別在三台伺服器(x.x.x.159、x.x.x.160、 x.x.x.161)節點 執行如下命令

　　2. mongodb分片集群 配置文件 目錄 

     　mkdir -p /opt/mongodb4.2/conf

　　3. 分片日誌目錄

　　　　mkdir -p /opt/mongodb4.2/logs

　　4. 創建集群安全認證機制KeyFile

　　　　openssl rand -base64 736 > /opt/mongodb4.2/conf/mongodb.keyfile

　　Notice: keyfile 必須滿足以下條件:

1) 至少6個字元，小於1024位元組。
2) 認證的時候不考慮文件中的空白字元。
3) 連接副本集成員的KeyFile和啟動mongos進程的 KeyFile文件內容必須一致。
4) 必須是base64編碼，但不能有等號。
5) 文件許可權必須是 600(chmod 600),不能分配任何許可權給group成員和其他成員。

 

　　5. 創建分片 數據存儲目錄

　　　　mkdir -p /opt/mongodb4.2/data/db1 【分片1】
　　　　mkdir -p /opt/mongodb4.2/data/db2 【分片2】
　　　　mkdir -p /opt/mongodb4.2/data/db3 【分片3】

　　6. 創建分片配置文件

  vim /opt/mongodb4.2/conf/mongodb1.conf 【分片1 配置文件】
        storage:
            journal:
                enabled: true
            wiredTiger:
                engineConfig:
                    cacaeSizeGB: 2
                    directoryForIndexes: true
        systemLog:
            destination: file
            logAppend: true
            path: /opt/mongodb4.2/logs/mongodb1.log
        net:
            port: 27017
            bindIp: 0.0.0.0
        processManagement:
            fork: true
        replication:
            oplogSizeMB: 4000
            replSetName: jxk1
        sharding:
            clusterRole: shardsvr
        security:
            authorization: enabled
            keyFile: /opt/mongodb4.2/conf/mongodb.keyfile
            clusterAuthMode: keyFile


    vim /opt/mongodb4.2/conf/mongodb2.conf 【分片2 配置文件】
        storage:
            journal:
                enabled: true
            wiredTiger:
                engineConfig:
                    cacaeSizeGB: 2
                    directoryForIndexes: true
        systemLog:
            destination: file
            logAppend: true
            path: /opt/mongodb4.2/logs/mongodb2.log
        net:
            port: 27018
            bindIp: 0.0.0.0
        processManagement:
            fork: true
        replication:
            oplogSizeMB: 4000
            replSetName: jxk2
        sharding:
            clusterRole: shardsvr
        security:
            authorization: enabled
            keyFile: /opt/mongodb4.2/conf/mongodb.keyfile
            clusterAuthMode: keyFile


    vim /opt/mongodb4.2/conf/mongodb3.conf 【分片3 配置文件】
        storage:
            journal:
                enabled: true
            wiredTiger:
                engineConfig:
                    cacaeSizeGB: 2
                    directoryForIndexes: true
        systemLog:
            destination: file
            logAppend: true
            path: /opt/mongodb4.2/logs/mongodb3.log
        net:
            port: 27018
            bindIp: 0.0.0.0
        processManagement:
            fork: true
        replication:
            oplogSizeMB: 4000
            replSetName: jxk3
        sharding:
            clusterRole: shardsvr
        security:
            authorization: enabled
            keyFile: /opt/mongodb4.2/conf/mongodb.keyfile
            clusterAuthMode: keyFile

    註意： 配置文件 yuml語法格式 直接拷貝下來 語法格式估計不能用

　　 

 六、啟動 分片複製集

　　1. 分別在三台伺服器(x.x.x.159、x.x.x.160、 x.x.x.161)節點 執行如下命令
　　2. mongod -f /opt/mongodb4.2/conf/mongodb1.conf
　　3. mongod -f /opt/mongodb4.2/conf/mongodb2.conf
　　4. mongod -f /opt/mongodb4.2/conf/mongodb3.conf

七、 初始化分片複製集 並 設置 分片複製集賬號

　　1. 在其中任意一臺節點伺服器登錄 本人使用 x.x.x.159節點
　　2. mongo -port 27017 【登錄】
　　3. 進入mongodb命令輸入終端 輸入命令如下

    var conf = {
        _id:'jxk',
        members:[
            {_id:1, host:'x.x.x.159:27017'},
            {_id:2, host:'x.x.x.160:27017'},
            {_id:3, host:'x.x.x.161:27017'},
        ],
    }
    rs.initiate(conf)
    rs.status()

　　

　　4. 找到mongodb自己選舉出來的 主庫 輸入命令：

    use admin
    db.createUser({
        user: "username",
        pwd : "password",
        roles:[
            {role:"root", db:"admin"}
        ]
    })
    db.auth("username", "password")

八、搭建config節點複製集

　　1. 分別在三台伺服器(x.x.x.159、x.x.x.160、 x.x.x.161)節點 執行如下命令

　　2. 創建 config 數據存儲 目錄

　　　　mkdir -p /opt/mongodb4.2/mongo-cfg/data

　　3. 創建 config 日誌 目錄

　　　　mkdir -p /opt/mongodb4.2/mongo-cfg/logs

　　4. 創建 config複製集 配置文件
 

    vim /opt/mongodb4.2/conf/mongodb-cfg.conf
        systemLog:
            destination: file
            logAppend: true
            path: /opt/mongodb4.2/logs/mongodb3.log
        storage:
            journal:
                enabled: true
            dbPath: /opt/mongodb4.2/mongo-cfg/data
            directoryPerDB: true
            wiredTiger:
                engineConfig:
                    cacaeSizeGB: 2
                    directoryForIndexes: true
                collectionConfig:
                    blockCompressor: zstd
                indexConfig:
                    prefixCompression: true
        net:
            port: 28018
            bindIp: x.x.x.159
        replication:
            oplogSizeMB: 4000
            replSetName: configReplSet
        sharding:
            clusterRole: configsvr
        processManagement:
            fork: true　

　　5. 啟動config節點複製集

　　　　mongod -f /opt/mongodb4.2/conf/mongodb-cfg.conf

　　6. 登錄config節點

　　　　mongo -host x.x.x.(159/160/161) -port 28018

　　7.初始化 config節點

        var conf = {
            _id:'configReplSet',
            members:[
                {_id:0, host:"x.x.x.159:28018"},
                {_id:1, host:"x.x.x.160:28018"},
                {_id:2, host:"x.x.x.161:28018"},
            ]
        }
        rs.initiate(conf)
        rs.status()

　　8. 創建認證用戶

        use admin
        db.createUser({
            user: "username",
            pwd : "password",
            roles:[
                {role:"root", db:"admin"}
            ]
        })
        db.auth("username", "password")

　　

　　9. 開啟config複製集 認證
　　　　關閉 config複製集
　　　　在配置文件追加
　　　　vim /opt/mongodb4.2/conf/mongodb-cfg.conf

　　　  security:
          authorization: enabled
          keyFile: /opt/mongodb4.2/conf/mongodb.keyfile
          clusterAuthMode: keyFile

 

　　　　啟動 config複製集

九、搭建mongos節點(x.x.18.159)

　　1. 在 x.x.x.159 伺服器上搭建客戶端
　　2. 創建mongos 日誌目錄

　　　　mkdir -p /opt/mongodb4.2/mongos/logs

3. 創建mongos 配置文件
　　vim /opt/mongodb4.2/conf/mongos.conf

        systemLog:
            destination: file
            logAppend: true
            path: /opt/mongodb4.2/mongos/logs/mongodb.log
        net:
            port: 27000
            bindIp: 0.0.0.0
        sharding:
            configDB: configReplSet/x.x.x.159:28018,x.x.x.160:28018,x.x.x.160:28018,
        processManagement:
            fork: true  
        security:
            keyFile: /opt/mongodb4.2/conf/mongodb.keyfile
            clusterAuthMode: keyFile

　　4. 啟動mongos

　　　　mongos -f /opt/mongodb4.2/conf/mongos.conf

　　5. 登錄並初始化 mongos

    mongo -port 27000
    use admin
    db.auth("username", "password")  #這裡使用的賬號是 config複製集的賬號
    db.runCommand({
        addshard:"jxk1/x.x.x.159:27017,x.x.x.160:27017,x.x.x.161:27017,",
        name: "shard1"
    });
    db.runCommand({
        addshard:"jxk2/x.x.x.159:27018,x.x.x.160:27018,x.x.x.161:27018,",
        name: "shard1"
    });
    db.runCommand({
        addshard:"jxk3/x.x.x.159:27019,x.x.x.160:27019,x.x.x.161:27019,",
        name: "shard1"
    })

　　

　　6. 測試是否搭建成功

    db.runCommand( {enablesharding:"dbtest"})
    db.runCommand( {shardcollection:"dbtest.one", key:{id:1} })
    use dbtest
    var tmp = [];
    for(var i =0; i<10000000; i++){
        tmp.push({ 'id':i, "name":"lunck dog " + i});
    }
    db.one.insertMany(tmp);
    sh.status()

　　

十、常用命令彙總

　　1. 分片命令

　　mongod -f /opt/mongodb4.2/conf/mongodb1.conf 啟動
　　mongod -f /opt/mongodb4.2/conf/mongodb1.conf --shutdown 關閉
　　OR
　　mongo -port 27017
　　use admin
　　db.shutdownServers()

　　

　　2.config 複製集命令

　　　　mongod -f /opt/mongodb4.2/conf/mongodb-cfg.conf 啟動
　　　　mongod -f /opt/mongodb4.2/conf/mongodb-cfg.conf --shutdown 關閉

　　3. mongos 命令

　　　　mongos -f /opt/mongodb4.2/conf/mongos.conf 啟動
　　　　mongo -port 27017 關閉
　　　　use admin
　　　　db.shutdownServers()

　　

參考資料

　　https://my.oschina.net/u/563789/blog/3050068
　　https://blog.csdn.net/qq_24434491/article/details/102907486
　　https://blog.csdn.net/lezeqe/article/details/90518179
　　https://blog.csdn.net/tototuzuoquan/article/details/78295040
　　https://www.freesion.com/article/6886370039/#8mongo_247
　　https://www.cnblogs.com/shaosks/p/5775757.html
　　https://www.cnblogs.com/wxmdevelop/p/7341292.html

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • shell腳本之十三：Shell數組應用實踐
    十三、Shell數組應用實踐 （一）數組介紹 為什麼會產生數組 通常在開發Shell腳本時，我們定義變數採用的形式為a=1;b=2;c=3，可如果有多個變數呢？這時再一個一個定義很費勁，並且要是有多個不確定的變數內容，也難以進行變數定義，此外，快速讀取不同變數的值也是一件很痛苦的事情，於是數組就誕生 ...
  • shell腳本之十二：迴圈控制及狀態返回值應用實踐
    十二、迴圈控制及狀態返回值應用實踐 本章將帶著大家學習以下幾個特殊的命令break（迴圈控制）、continue（迴圈控制）、exit（退出腳本）、return（退出函數）。 （一）、break、continue、exit、return的區別和對比 在上述命令中，break、continue在條件語 ...
  • shell編程之十一：for迴圈語句應用實踐
    十一、for迴圈語句應用實踐 （一）、for迴圈語法 （二）範例1 用for迴圈豎向列印1、2、3、4、5共5個數字。 （三）範例2： 通過開發腳本實現僅設置sshd rsyslog crond network sysstat 服務 開機自啟動。 （四）範例3： 計算從1加到100之和。 （五）案例 ...
  • shell腳本之十：while迴圈及應用實踐
    十、while迴圈及應用實踐 （一）while迴圈語法 （二）範例1： 每隔2s輸出系統負載情況。 1、腳本執行的方法 | 用法 | 說明 | | | | | sh while1.sh & | 把腳本while1.sh放到後臺執行（後臺運行腳本時常用） | | nohup while1.sh & | ...
  • Ansible Jinja2 模板使用
    Ansible Jinja2 模板使用、語法與使用案例 主機規劃 添加用戶賬號 說明： 1、 運維人員使用的登錄賬號； 2、 所有的業務都放在 /app/ 下「yun用戶的家目錄」，避免業務數據亂放； 3、 該用戶也被 ansible 使用，因為幾乎所有的生產環境都是禁止 root 遠程登錄的（因此 ...
  • Centos系統磁碟目錄分析工具-Ncdu
    Ncdu (NCurses Disk Usage) ：磁碟目錄分析工具 平時大家在Centos系統上使用du命令來查看磁碟目錄及文件的使用情況，今天分享一款更方便更好用的工具：Ncdu，它是一個基於 Ncurses 庫的 du 命令的界面。ncdu命令是對傳統du命令功能上的增強，不需要像du那樣輸 ...
  • linux下文件的打包和壓縮
    文章來源： "linux下文件的打包和壓縮" "TOC" 一、文件壓縮的原理 簡單來說，壓縮技術就是在存儲時將文件裡面沒有使用的空間利用起來，主要有以下兩種情況。 1. 存儲時去掉沒有用到的空間。假設我們只是存儲一個數字 1 ，二進位表示數字1只需1個bit是1就可以表示（1=1 2^0），但是為了 ...
  • Ubuntu 18.04更換apt-get源
    使用apt-get安裝時，會很慢，更換了國內的源後，就可以解決這個問題了。 1. 備份sources.list文件 sudo cp /etc/apt/sources.list /etc/apt/sources.list.bak 2. 打開sources.list文件 sudo gedit /etc/ ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發（一）：使用.NET MAUI開發第一個安卓APP
    移動開發（一）：使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說，近來想嘗試開發一款安卓APP，考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP，畢竟是使用Visual Studio開發工具，使用起來也比較的順手，結合微軟官方的教程進行了安卓 ...
  • wpf ToggleButton選中效果和一個登錄界面
    前言 QuestPDF 是一個開源 .NET 庫，用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫，它徹底改變了我們生成 PDF 文檔的方 ...
  • 彈幕樹洞項目功能新增篇
    項目地址 項目後端地址： https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址： ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址： http://tree ...
  • 第27篇 sqlserver2022詳細安裝步驟
    話不多說，直接開乾 一.下載 1.官方鏈接下載： https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe，運行開始下載SQL server； 二. ...
  • .NET 開源高性能 MQTT 類庫
    前言 隨著物聯網（IoT）技術的迅猛發展，MQTT（消息隊列遙測傳輸）協議憑藉其輕量級和高效性，已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫，為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog文檔翻譯系列（六） - 可用的接收器、增強器、格式化輸出
    Serilog支持多種接收器用於日誌存儲，增強器用於添加屬性，LogContext管理動態屬性，支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項，適用於不同需求。 ...
  • 警惕 Visual Studio 屬性求值副作用導致邏輯不符合預期
    目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據，爬取信息時需要模擬瀏覽器行為，否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下： 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • [使用目前最新版]HybridCLR6.9.0+YooAsset2.2.4實現純C# Unity熱更新方案 (一)
    1.前言 什麼是熱更新 游戲或者軟體更新時，無需重新下載客戶端進行安裝，而是在應用程式啟動的情況下，在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR，Xlua，ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles，Addressable， ...
  • 在 ASP.NET Core Web API 中使用操作篩選器統一處理通用操作
    本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺，其實像阿裡雲，騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後，它會送 ...
  • 第28篇 如何.net中實現高效可靠數據同步api
    通過以下方式可以高效，並保證數據同步的可靠性 1.API設計 使用RESTful設計，確保API端點明確，並使用適當的HTTP方法（如POST用於創建，PUT用於更新）。 設計清晰的請求和響應模型，以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證，確保接收到的數據符合預期格 ...
所有分類