NoSQL比較火的三個資料庫Memcached、Redis、MongoDB

来源:https://www.cnblogs.com/zzz2000/archive/2020/04/19/12730880.html
-Advertisement-
Play Games

NoSQL,泛指非關係型的資料庫。隨著互聯網不斷的發展,傳統的關係資料庫在應付新互聯網模式的網站,特別是超大規模和高併發的SNS類型的純動態網站已經顯得力不從心,暴露了很多難以剋服的問題,而非關係型的資料庫則由於其本身的特點得到了非常迅速的發展。NoSQL資料庫的產生就是為瞭解決大規模數據集合多重數 ...


NoSQL,泛指非關係型的資料庫。隨著互聯網不斷的發展,傳統的關係資料庫在應付新互聯網模式的網站,特別是超大規模和高併發的SNS類型的純動態網站已經顯得力不從心,暴露了很多難以剋服的問題,而非關係型的資料庫則由於其本身的特點得到了非常迅速的發展。NoSQL資料庫的產生就是為瞭解決大規模數據集合多重數據種類帶來的挑戰,尤其是大數據應用難題。而今天主要講用得比較多的三個NoSQL:Memcached、Redis、MongoDB。

Memcached

優點

1.Memcached可以利用多核優勢,單實例吞吐量極高,可以達到幾十萬QPS(取決於key、value的位元組大小以及伺服器硬體性能,日常環境中QPS高峰大約在4-6w左右)。適用於最大程度扛量。

2.支持直接配置為session handle。

缺點

1.只支持簡單的key/value數據結構,不像Redis可以支持豐富的數據類型。

2.無法進行持久化,數據不能備份,只能用於緩存使用,且重啟後數據全部丟失。

3.無法進行數據同步,不能將MC中的數據遷移到其他MC實例中。

4.Memcached記憶體分配採用Slab Allocation機制管理記憶體,value大小分佈差異較大時會造成記憶體利用率降低,並引發低利用率時依然出現踢出等問題。需要用戶註重value設計。

Redis

優點

1.支持多種數據結構,如 string(字元串)、 list(雙向鏈表)、dict(hash表)、set(集合)、zset(排序set)、hyperloglog(基數估算)。

2.支持持久化操作,可以進行aof及rdb數據持久化到磁碟,從而進行數據備份或數據恢復等操作,較好的防止數據丟失的手段。

3.支持通過Replication進行數據複製,通過master-slave機制,可以實時進行數據的同步複製,支持多級複製和增量複製,master-slave機制是Redis進行HA的重要手段。

4.單線程請求,所有命令串列執行,併發情況下不需要考慮數據一致性問題。

5.支持pub/sub消息訂閱機制,可以用來進行消息訂閱與通知。

6.支持簡單的事務需求,但業界使用場景很少,並不成熟。

缺點

1.Redis只能使用單線程,性能受限於CPU性能,故單實例CPU最高才可能達到5-6wQPS每秒(取決於數據結構,數據大小以及伺服器硬體性能,日常環境中QPS高峰大約在1-2w左右)。

2.支持簡單的事務需求,但業界使用場景很少,並不成熟,既是優點也是缺點。

3.Redis在string類型上會消耗較多記憶體,可以使用dict(hash表)壓縮存儲以降低記憶體耗用。

MongoDB

優點

1.更高的寫負載,MongoDB擁有更高的插入速度。

2.處理很大的規模的單表,當數據表太大的時候可以很容易的分割表。

3.高可用性,設置M-S不僅方便而且很快,MongoDB還可以快速、安全及自動化的實現節點(數據中心)故障轉移。

4.快速的查詢,MongoDB支持二維空間索引,比如管道,因此可以快速及精確的從指定位置獲取數據。MongoDB在啟動後會將資料庫中的數據以文件映射的方式載入到記憶體中。如果記憶體資源相當豐富的話,這將極大地提高資料庫的查詢速度。

5.非結構化數據的爆發增長,增加列在有些情況下可能鎖定整個資料庫,或者增加負載從而導致性能下降,由於MongoDB的弱數據結構模式,添加1個新欄位不會對舊表格有任何影響,整個過程會非常快速。

缺點

1.不支持事務。

2.MongoDB占用空間過大 。

3.MongoDB沒有成熟的維護工具。

Memcached、Redis、MongoDB的區別

1.性能

三者的性能都比較高,總的來講:Memcached和Redis差不多,要高於MongoDB。

2.便利性

Memcached數據結構單一。

Redis豐富一些,數據操作方面,Redis更好一些,較少的網路IO次數。

MongoDB支持豐富的數據表達,索引,最類似關係型資料庫,支持的查詢語言非常豐富。

3.存儲空間

Memcached可以修改最大可用記憶體,採用LRU演算法。

Redis在2.0版本後增加了自己的VM特性,突破物理記憶體的限制;可以對key value設置過期時間(類似memcached)。

MongoDB適合大數據量的存儲,依賴操作系統VM做記憶體管理,吃記憶體也比較厲害,服務不要和別的服務在一起。

4.可用性

Memcached本身沒有數據冗餘機制,也沒必要;對於故障預防,採用依賴成熟的hash或者環狀的演算法,解決單點故障引起的抖動問題。

Redis,依賴客戶端來實現分散式讀寫;主從複製時,每次從節點重新連接主節點都要依賴整個快照,無增量複製,因性能和效率問題,所以單點問題比較複雜;不支持自動sharding,需要依賴程式設定一致hash 機制。一種替代方案是,不用redis本身的複製機制,採用自己做主動複製(多份存儲),或者改成增量複製的方式(需要自己實現),一致性問題和性能的權衡。

MongoDB支持master-slave,replicaset(內部採用paxos選舉演算法,自動故障恢復),auto sharding機制,對客戶端屏蔽了故障轉移和切分機制。

5.可靠性

Memcached不支持,通常用在做緩存,提升性能。

Redis支持(快照、AOF):依賴快照進行持久化,aof增強了可靠性的同時,對性能有所影響。

MongoDB從1.8版本開始採用binlog方式支持持久化的可靠性。

6.一致性

Memcached在併發場景下,用cas保證一致性。

Redis事務支持比較弱,只能保證事務中的每個操作連續執行。

MongoDB不支持事務。

7.數據分析

MongoDB內置了數據分析的功能(mapreduce),其他兩者不支持。

8.應用場景

Memcached:用於在動態系統中減少資料庫負載,提升性能;做緩存,提高性能(適合讀多寫少,對於數據量比較大,可以採用sharding)。

Redis:數據量較小的高性能操作和運算上。

MongoDB:主要解決海量數據的訪問效率問題。

總結分析

1.若是簡單的存取key-value(主要是讀)這樣的數據用Memcached好一些。若是要支持數據持久化,量也不大,操作很頻繁,多數據類型(如集合、散列之類的),用列表類型做隊列之類的高級應用,就用Redis,但如果是數據量比較大時就採用MongoDB。

2.Memcached的很多客戶端更加成熟穩定,Redis協議比Memcached複雜。Redis不可能比Memcached快?但是測試結果基本是Redis占絕對優勢。

3.雲資料庫Memcached版實例中的數據是存儲在記憶體中的,當出現宕機、機房斷電等意外,或是雲資料庫Memcached版實例在正常升級維護時,記憶體中的數據均會丟失。因此,雲資料庫Memcached版不能作為持久化的數據存儲服務使用。Redis的數據都存放在記憶體中,如果沒有配置持久化,Redis重啟後數據就全丟失了,於是需要開啟Redis的持久化功能,將數據保存到磁碟上,當Redis重啟後,可以從磁碟中恢複數據,實現持久化。

4.對於Redis和MongoDB來說,大家一般稱之為Redis緩存、MongoDB資料庫。Redis主要把數據存儲在記憶體中,其“緩存”的性質遠大於其“數據存儲“的性質,其中數據的增刪改查也只是像變數操作一樣簡單;MongoDB卻是一個“存儲數據”的系統,增刪改查可以添加很多條件,就像SQL資料庫一樣靈活。

5.MongoDB和Redis都是NoSQL,採用結構型數據存儲。二者在使用場景中,存在一定的區別,這也主要由於二者在記憶體映射的處理過程,持久化的處理方法不同。MongoDB建議集群部署,更多的考慮到集群方案,Redis更偏重於進程順序寫入,雖然支持集群,也僅限於主-從模式

推薦:妝組詞


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • Linux運維工程師的首要職責就是保證業務7 x 24小時穩定的運行,監控Web伺服器對於查看網站上發生的情況至關重要。關註最多的便是日誌變動,查看實時日誌文件變動大家第一反應應該是'tail -f /path/to/log'命令吧,但是如果每個網站的訪問日誌都是使用這種方式查看也是相當崩潰的,今天 ...
  • 深度操作系統(DEEPIN)是武漢深之度科技有限公司致力於為全球用戶提供美觀易用、安全可靠的Linux發行版。經過一段時間的測試,這款操作系統的Beta版終於今天和大家見面了。這次Deepin v20操作系統帶來了全新的Deepin桌面和全家桶軟體,基於Linux 5.3內核,並宣佈將永久免費使用。 ...
  • 本文講述一些有利於提高xenomai 實時性配置建議,其中,一些是通用的,一些是針對某個架構的,最後是xenomai實時性測試數據,希望對你有用。 一、影響因素 硬實時操作系統應具備的最重要特性之一是可預測性,系統應該保證滿足所有關鍵時序約束。然而,這取決於一系列因素,這些因素涉及硬體的架構特征、內 ...
  • 這裡分享嵌入式領域有用有趣的項目/工具以及一些熱點新聞,農曆年分二十四節氣,希望在每個交節之日準時發佈一期。 ...
  • 在【甜甜老師的DB Fun圈】第二講的分享中,我們對GaussDB 100 OLTP 單機在RHEL7.6上的安裝有了全面的認識,那麼本期我們繼續分享【甜甜老師的DB Fun圈】第三講——GaussDB T 單機手工建庫。 你需要知道的 好了,我們今天的課就先講到這。同學們可以自己實操下,增強動手能 ...
  • 大多數情況是正常的,只是偶爾會出現很慢的情況 網路問題 資料庫在刷新臟頁 獲取鎖失敗,我們可以用 show processlist這個命令來查看當前的狀態 刷臟頁有下麵4種場景(後兩種不用太關註“性能”問題): redolog寫滿了:redo log 里的容量是有限的,如果資料庫一直很忙,更新又很頻 ...
  • 查找描述信息中包括robot的電影對應的分類名稱以及電影數目,而且還需要該分類對應電影數量>=5部 film表為電影表,category表為電影分類表,film_category表為電影表與電影分類表的中間表(多對多的中間表) film表 欄位 說明 film_id 電影id title 電影名稱 ...
  • Yearning簡介 Yearning MYSQL 是一個SQL語句審核平臺。提供查詢審計,SQL審核等多種功能,支持Mysql,可以在一定程度上解決運維與開發之間的那一環,功能豐富,代碼開源,安裝部署容易! 項目地址:https://gitee.com/cookieYe/Ye... 註意: Yea ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...