MongoDB 副本集丟失數據的測試

来源:https://www.cnblogs.com/xuliuzai/archive/2019/05/22/10906165.html
-Advertisement-
Play Games

在MongoDB副本集的測試中發現了一個丟數據的案例。 1. 概要描述 測試場景為:一主一從一驗證 測試案例 step1 :關閉從副本; step 2 ;向主副本中插入那條數據; step 3 :關閉主副本; step 4 :開啟輔助副本,此副本升級為主副本,這是後會看到新的主副本沒有剛纔插入的幾筆 ...


在MongoDB副本集的測試中發現了一個丟數據的案例。

1. 概要描述

測試場景為:一主一從一驗證

測試案例 

 step1 :關閉從副本;

step 2 ;向主副本中插入那條數據;

step 3 :關閉主副本;

step 4 :開啟輔助副本,此副本升級為主副本,這是後會看到新的主副本沒有剛纔插入的幾筆數據。

----測試時,請註意測試步驟。

step 5 :原主節點 再次加入到集群中後,會變成新的輔助副本。測試插入的數據會產生回滾。

 

2. 具體的測試步驟 

(1)測試伺服器,原測試環境

主Server:Port 副Server:Port 見證Server:Port
XXX.XXX.XXX.124:27220 XXX.XXX.XXX.123:27221 XXX.XXX.XXX.134:27220

 

(2)測試步驟

Step 1 向主資料庫(XXX.XXX.XXX.124:27220),插入以下數據,執行時間要長一些。

for(var i = 0; i < 100000; i++) { db.order0522.insert({a: i});};

 

Step 2 在上述命令執行的過程中,關於副主Server上的mongodb服務,服務命名為mongodboplogtest.service

systemctl stop mongodboplogtest.service

 

Step 3.查詢主副本上資料庫insert的數據量,為100000.命令完全插入。

 

Step 4.關閉主副本上的Mongodb 服務,服務命名為mongodboplogtest.service

systemctl stop mongodboplogtest.service

 

Step 5 開啟輔助節點上的MongoDB服務

systemctl start mongodboplogtest.service 

 

step 6 此時輔助節點(XXX.XXX.XXX.123)升級為主節點,此時數據為30337(100000-30337 筆記錄丟失了)

 

 

此時 124 (原主節點)為 "stateStr" : "(not reachable/healthy)"

 

step 7 開啟原主節點上的服務,集群的狀態,關於原主節點的描述短暫處於 "stateStr" : "ROLLBACK"

 

 step 8 回滾後,狀態變為 "stateStr" : "SECONDARY"

 

step 9 查詢原主節點數據,此時數據量為30337(100000-30337 筆也記錄丟失了)

 

3.丟失的數據是否可以找到

我們發現,重啟原主節點(XXX.XXX.XXX.124)mongodb服務後,在數據目錄下多了一個  rollback 目錄。

重啟前的數據目錄

 

 重啟後的數據目錄

 進去這個目錄後,我們看到生成了一個以資料庫+集合名字+時間的 bson 文件。

 

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • /一般情況下,我們用SELECT這些查詢語句時,都是針對的一行記錄而言,如果要在查詢分析器中對多行記錄(即記錄集)進行讀取操作時,則需要使用到游標或WHILE等迴圈/以下內容摘自http://www.cnblogs.com/aotian56/archive/2007/07/13/817281.htm ...
  • SELECT TABLE_NAME,COLUMN_NAME,COLUMN_COMMENT FROM INFORMATION_SCHEMA.COLUMNS WHERE COLUMN_COMMENT LIKE '%條件%' AND table_name='表名' AND table_schema='數據... ...
  • 在MySQL中條件判斷語句常用於數據轉換,基於現有數據創建新的數據列,使用場景還是比較多。 基礎樣式: CASE WHEN`條件`THEN`結果` ELSE`預設結果` END 在同一條判斷語句中可以有一個到多個判斷條件: CASE WHEN0`條件`THEN`結果0` WHEN1…… WHEN2… ...
  • REGEXP_SUBSTR函數格式如下: function REGEXP_SUBSTR(string, pattern, position, occurrence, modifier) string :需要進行正則處理的字元串 pattern :進行匹配的正則表達式 position :起始位置,從 ...
  • 結論: 1. float 預設只保存6位(除去小數點),如果超過6位,則四捨五入,所以float存儲的數據是不精確的,只是近似值; 2. decimal,如果輸入的數據超過了定義的最大值,那麼則溢出,資料庫裡面存儲的是定義的最大值,例如,decimal(5,2)輸入123123.45,實際存儲為99 ...
  • 常用的語法:select--from--where--group by--having--order by 1、分組子句group by +con 按什麼分組 2、having子句 對上面分組的數據進行再次條件過濾 3、排序子句 order by order by + con ASC 升序 orde ...
  • 為什麼需要Redis集群 需要提高更大的併發量 Redis官方提出擁有10萬QPS的請求量 如果業務需要Redis擁有100萬的QPS 可以通過集群來提升併發量。 需要存儲更大的數據量 一般伺服器的機器記憶體為16G-256G 如果業務需要500G的數據量 可以通過集群的分區技術來擴展數據量 需要提高 ...
  • 今天遇到一個奇怪的問題,項目突然要從mysql切換到sql server資料庫,包含order by 子句的嵌套子查詢報錯。 示例:select top 10 name,age,sex from ( select * from user order by id desc) temp; 在mysql數 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...