NoSQL比較火的三個資料庫Memcached、Redis、MongoDB

来源:https://www.cnblogs.com/zzz2000/archive/2020/04/19/12730880.html
-Advertisement-
Play Games

NoSQL,泛指非關係型的資料庫。隨著互聯網不斷的發展,傳統的關係資料庫在應付新互聯網模式的網站,特別是超大規模和高併發的SNS類型的純動態網站已經顯得力不從心,暴露了很多難以剋服的問題,而非關係型的資料庫則由於其本身的特點得到了非常迅速的發展。NoSQL資料庫的產生就是為瞭解決大規模數據集合多重數 ...


NoSQL,泛指非關係型的資料庫。隨著互聯網不斷的發展,傳統的關係資料庫在應付新互聯網模式的網站,特別是超大規模和高併發的SNS類型的純動態網站已經顯得力不從心,暴露了很多難以剋服的問題,而非關係型的資料庫則由於其本身的特點得到了非常迅速的發展。NoSQL資料庫的產生就是為瞭解決大規模數據集合多重數據種類帶來的挑戰,尤其是大數據應用難題。而今天主要講用得比較多的三個NoSQL:Memcached、Redis、MongoDB。

Memcached

優點

1.Memcached可以利用多核優勢,單實例吞吐量極高,可以達到幾十萬QPS(取決於key、value的位元組大小以及伺服器硬體性能,日常環境中QPS高峰大約在4-6w左右)。適用於最大程度扛量。

2.支持直接配置為session handle。

缺點

1.只支持簡單的key/value數據結構,不像Redis可以支持豐富的數據類型。

2.無法進行持久化,數據不能備份,只能用於緩存使用,且重啟後數據全部丟失。

3.無法進行數據同步,不能將MC中的數據遷移到其他MC實例中。

4.Memcached記憶體分配採用Slab Allocation機制管理記憶體,value大小分佈差異較大時會造成記憶體利用率降低,並引發低利用率時依然出現踢出等問題。需要用戶註重value設計。

Redis

優點

1.支持多種數據結構,如 string(字元串)、 list(雙向鏈表)、dict(hash表)、set(集合)、zset(排序set)、hyperloglog(基數估算)。

2.支持持久化操作,可以進行aof及rdb數據持久化到磁碟,從而進行數據備份或數據恢復等操作,較好的防止數據丟失的手段。

3.支持通過Replication進行數據複製,通過master-slave機制,可以實時進行數據的同步複製,支持多級複製和增量複製,master-slave機制是Redis進行HA的重要手段。

4.單線程請求,所有命令串列執行,併發情況下不需要考慮數據一致性問題。

5.支持pub/sub消息訂閱機制,可以用來進行消息訂閱與通知。

6.支持簡單的事務需求,但業界使用場景很少,並不成熟。

缺點

1.Redis只能使用單線程,性能受限於CPU性能,故單實例CPU最高才可能達到5-6wQPS每秒(取決於數據結構,數據大小以及伺服器硬體性能,日常環境中QPS高峰大約在1-2w左右)。

2.支持簡單的事務需求,但業界使用場景很少,並不成熟,既是優點也是缺點。

3.Redis在string類型上會消耗較多記憶體,可以使用dict(hash表)壓縮存儲以降低記憶體耗用。

MongoDB

優點

1.更高的寫負載,MongoDB擁有更高的插入速度。

2.處理很大的規模的單表,當數據表太大的時候可以很容易的分割表。

3.高可用性,設置M-S不僅方便而且很快,MongoDB還可以快速、安全及自動化的實現節點(數據中心)故障轉移。

4.快速的查詢,MongoDB支持二維空間索引,比如管道,因此可以快速及精確的從指定位置獲取數據。MongoDB在啟動後會將資料庫中的數據以文件映射的方式載入到記憶體中。如果記憶體資源相當豐富的話,這將極大地提高資料庫的查詢速度。

5.非結構化數據的爆發增長,增加列在有些情況下可能鎖定整個資料庫,或者增加負載從而導致性能下降,由於MongoDB的弱數據結構模式,添加1個新欄位不會對舊表格有任何影響,整個過程會非常快速。

缺點

1.不支持事務。

2.MongoDB占用空間過大 。

3.MongoDB沒有成熟的維護工具。

Memcached、Redis、MongoDB的區別

1.性能

三者的性能都比較高,總的來講:Memcached和Redis差不多,要高於MongoDB。

2.便利性

Memcached數據結構單一。

Redis豐富一些,數據操作方面,Redis更好一些,較少的網路IO次數。

MongoDB支持豐富的數據表達,索引,最類似關係型資料庫,支持的查詢語言非常豐富。

3.存儲空間

Memcached可以修改最大可用記憶體,採用LRU演算法。

Redis在2.0版本後增加了自己的VM特性,突破物理記憶體的限制;可以對key value設置過期時間(類似memcached)。

MongoDB適合大數據量的存儲,依賴操作系統VM做記憶體管理,吃記憶體也比較厲害,服務不要和別的服務在一起。

4.可用性

Memcached本身沒有數據冗餘機制,也沒必要;對於故障預防,採用依賴成熟的hash或者環狀的演算法,解決單點故障引起的抖動問題。

Redis,依賴客戶端來實現分散式讀寫;主從複製時,每次從節點重新連接主節點都要依賴整個快照,無增量複製,因性能和效率問題,所以單點問題比較複雜;不支持自動sharding,需要依賴程式設定一致hash 機制。一種替代方案是,不用redis本身的複製機制,採用自己做主動複製(多份存儲),或者改成增量複製的方式(需要自己實現),一致性問題和性能的權衡。

MongoDB支持master-slave,replicaset(內部採用paxos選舉演算法,自動故障恢復),auto sharding機制,對客戶端屏蔽了故障轉移和切分機制。

5.可靠性

Memcached不支持,通常用在做緩存,提升性能。

Redis支持(快照、AOF):依賴快照進行持久化,aof增強了可靠性的同時,對性能有所影響。

MongoDB從1.8版本開始採用binlog方式支持持久化的可靠性。

6.一致性

Memcached在併發場景下,用cas保證一致性。

Redis事務支持比較弱,只能保證事務中的每個操作連續執行。

MongoDB不支持事務。

7.數據分析

MongoDB內置了數據分析的功能(mapreduce),其他兩者不支持。

8.應用場景

Memcached:用於在動態系統中減少資料庫負載,提升性能;做緩存,提高性能(適合讀多寫少,對於數據量比較大,可以採用sharding)。

Redis:數據量較小的高性能操作和運算上。

MongoDB:主要解決海量數據的訪問效率問題。

總結分析

1.若是簡單的存取key-value(主要是讀)這樣的數據用Memcached好一些。若是要支持數據持久化,量也不大,操作很頻繁,多數據類型(如集合、散列之類的),用列表類型做隊列之類的高級應用,就用Redis,但如果是數據量比較大時就採用MongoDB。

2.Memcached的很多客戶端更加成熟穩定,Redis協議比Memcached複雜。Redis不可能比Memcached快?但是測試結果基本是Redis占絕對優勢。

3.雲資料庫Memcached版實例中的數據是存儲在記憶體中的,當出現宕機、機房斷電等意外,或是雲資料庫Memcached版實例在正常升級維護時,記憶體中的數據均會丟失。因此,雲資料庫Memcached版不能作為持久化的數據存儲服務使用。Redis的數據都存放在記憶體中,如果沒有配置持久化,Redis重啟後數據就全丟失了,於是需要開啟Redis的持久化功能,將數據保存到磁碟上,當Redis重啟後,可以從磁碟中恢複數據,實現持久化。

4.對於Redis和MongoDB來說,大家一般稱之為Redis緩存、MongoDB資料庫。Redis主要把數據存儲在記憶體中,其“緩存”的性質遠大於其“數據存儲“的性質,其中數據的增刪改查也只是像變數操作一樣簡單;MongoDB卻是一個“存儲數據”的系統,增刪改查可以添加很多條件,就像SQL資料庫一樣靈活。

5.MongoDB和Redis都是NoSQL,採用結構型數據存儲。二者在使用場景中,存在一定的區別,這也主要由於二者在記憶體映射的處理過程,持久化的處理方法不同。MongoDB建議集群部署,更多的考慮到集群方案,Redis更偏重於進程順序寫入,雖然支持集群,也僅限於主-從模式

推薦:妝組詞


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • Linux運維工程師的首要職責就是保證業務7 x 24小時穩定的運行,監控Web伺服器對於查看網站上發生的情況至關重要。關註最多的便是日誌變動,查看實時日誌文件變動大家第一反應應該是'tail -f /path/to/log'命令吧,但是如果每個網站的訪問日誌都是使用這種方式查看也是相當崩潰的,今天 ...
  • 深度操作系統(DEEPIN)是武漢深之度科技有限公司致力於為全球用戶提供美觀易用、安全可靠的Linux發行版。經過一段時間的測試,這款操作系統的Beta版終於今天和大家見面了。這次Deepin v20操作系統帶來了全新的Deepin桌面和全家桶軟體,基於Linux 5.3內核,並宣佈將永久免費使用。 ...
  • 本文講述一些有利於提高xenomai 實時性配置建議,其中,一些是通用的,一些是針對某個架構的,最後是xenomai實時性測試數據,希望對你有用。 一、影響因素 硬實時操作系統應具備的最重要特性之一是可預測性,系統應該保證滿足所有關鍵時序約束。然而,這取決於一系列因素,這些因素涉及硬體的架構特征、內 ...
  • 這裡分享嵌入式領域有用有趣的項目/工具以及一些熱點新聞,農曆年分二十四節氣,希望在每個交節之日準時發佈一期。 ...
  • 在【甜甜老師的DB Fun圈】第二講的分享中,我們對GaussDB 100 OLTP 單機在RHEL7.6上的安裝有了全面的認識,那麼本期我們繼續分享【甜甜老師的DB Fun圈】第三講——GaussDB T 單機手工建庫。 你需要知道的 好了,我們今天的課就先講到這。同學們可以自己實操下,增強動手能 ...
  • 大多數情況是正常的,只是偶爾會出現很慢的情況 網路問題 資料庫在刷新臟頁 獲取鎖失敗,我們可以用 show processlist這個命令來查看當前的狀態 刷臟頁有下麵4種場景(後兩種不用太關註“性能”問題): redolog寫滿了:redo log 里的容量是有限的,如果資料庫一直很忙,更新又很頻 ...
  • 查找描述信息中包括robot的電影對應的分類名稱以及電影數目,而且還需要該分類對應電影數量>=5部 film表為電影表,category表為電影分類表,film_category表為電影表與電影分類表的中間表(多對多的中間表) film表 欄位 說明 film_id 電影id title 電影名稱 ...
  • Yearning簡介 Yearning MYSQL 是一個SQL語句審核平臺。提供查詢審計,SQL審核等多種功能,支持Mysql,可以在一定程度上解決運維與開發之間的那一環,功能豐富,代碼開源,安裝部署容易! 項目地址:https://gitee.com/cookieYe/Ye... 註意: Yea ...
一周排行
    -Advertisement-
    Play Games
  • 示例項目結構 在 Visual Studio 中創建一個 WinForms 應用程式後,項目結構如下所示: MyWinFormsApp/ │ ├───Properties/ │ └───Settings.settings │ ├───bin/ │ ├───Debug/ │ └───Release/ ...
  • [STAThread] 特性用於需要與 COM 組件交互的應用程式,尤其是依賴單線程模型(如 Windows Forms 應用程式)的組件。在 STA 模式下,線程擁有自己的消息迴圈,這對於處理用戶界面和某些 COM 組件是必要的。 [STAThread] static void Main(stri ...
  • 在WinForm中使用全局異常捕獲處理 在WinForm應用程式中,全局異常捕獲是確保程式穩定性的關鍵。通過在Program類的Main方法中設置全局異常處理,可以有效地捕獲並處理未預見的異常,從而避免程式崩潰。 註冊全局異常事件 [STAThread] static void Main() { / ...
  • 前言 給大家推薦一款開源的 Winform 控制項庫,可以幫助我們開發更加美觀、漂亮的 WinForm 界面。 項目介紹 SunnyUI.NET 是一個基於 .NET Framework 4.0+、.NET 6、.NET 7 和 .NET 8 的 WinForm 開源控制項庫,同時也提供了工具類庫、擴展 ...
  • 說明 該文章是屬於OverallAuth2.0系列文章,每周更新一篇該系列文章(從0到1完成系統開發)。 該系統文章,我會儘量說的非常詳細,做到不管新手、老手都能看懂。 說明:OverallAuth2.0 是一個簡單、易懂、功能強大的許可權+可視化流程管理系統。 有興趣的朋友,請關註我吧(*^▽^*) ...
  • 一、下載安裝 1.下載git 必須先下載並安裝git,再TortoiseGit下載安裝 git安裝參考教程:https://blog.csdn.net/mukes/article/details/115693833 2.TortoiseGit下載與安裝 TortoiseGit,Git客戶端,32/6 ...
  • 前言 在項目開發過程中,理解數據結構和演算法如同掌握蓋房子的秘訣。演算法不僅能幫助我們編寫高效、優質的代碼,還能解決項目中遇到的各種難題。 給大家推薦一個支持C#的開源免費、新手友好的數據結構與演算法入門教程:Hello演算法。 項目介紹 《Hello Algo》是一本開源免費、新手友好的數據結構與演算法入門 ...
  • 1.生成單個Proto.bat內容 @rem Copyright 2016, Google Inc. @rem All rights reserved. @rem @rem Redistribution and use in source and binary forms, with or with ...
  • 一:背景 1. 講故事 前段時間有位朋友找到我,說他的窗體程式在客戶這邊出現了卡死,讓我幫忙看下怎麼回事?dump也生成了,既然有dump了那就上 windbg 分析吧。 二:WinDbg 分析 1. 為什麼會卡死 窗體程式的卡死,入口門檻很低,後續往下分析就不一定了,不管怎麼說先用 !clrsta ...
  • 前言 人工智慧時代,人臉識別技術已成為安全驗證、身份識別和用戶交互的關鍵工具。 給大家推薦一款.NET 開源提供了強大的人臉識別 API,工具不僅易於集成,還具備高效處理能力。 本文將介紹一款如何利用這些API,為我們的項目添加智能識別的亮點。 項目介紹 GitHub 上擁有 1.2k 星標的 C# ...