MongoDB學習(使用分組、聚合和映射-歸併)

来源:https://www.cnblogs.com/shangyang/archive/2019/04/16/10685297.html
-Advertisement-
Play Games

使用分組、聚合和映射-歸併 MongoDB的強大功能之一,是直接在伺服器對文檔的值進行複雜的操作,而不用先發文檔發送到客戶端在進行處理。 結果分組 對大型數據集進行查詢操作時,通常會根據文檔的欄位值對其進行分組。這可以在取迴文檔後通過代碼來完成,但在伺服器端查找的同時進行分組效率跟高。 要將查詢結果 ...


使用分組、聚合和映射-歸併  

  MongoDB的強大功能之一,是直接在伺服器對文檔的值進行複雜的操作,而不用先發文檔發送到客戶端在進行處理。

結果分組

  對大型數據集進行查詢操作時,通常會根據文檔的欄位值對其進行分組。這可以在取迴文檔後通過代碼來完成,但在伺服器端查找的同時進行分組效率跟高。

  要將查詢結果分組,可使用Collection對象的方法 group()。該語法為:

db.collection_name.group({key, reduce, initial, [keyf], [cond], finalize})

  參數列表:

  •   key:指定要根據哪些健進行分組。其屬性為要用於分組的欄位,值為 1。
  •   reduce:一個接受參數 obj 和 prev 的函數( function(obj,prev))。對於每個與查詢匹配的文檔,都執行這個參數。其中參數 obj 為當前文檔,而 prev 是根據參數 initial 創建的對象。(可以通過obj來更新prev,如計數或累計)。
  •   initial:可以創建一個group分組欄位,並包含初始值,用於在分組期間聚合數據。(常見的是使用一個計數器來跟蹤匹配的文檔數。{ initial : {"count" : 0 } } )。
  •   keyf:可選。指定一個函數,這個函數返回一個用於分組的key對象,用於替代參key。這樣可以使用函數動態地指定根據哪些欄位分組。
  •   cond:可選。查找條件,表示從哪些結果集中進行分組。
  •   finalize:可選。在reduce執行之後,結果集返回之前,對結果集進行的最終操作。可以精簡數據。

  示例:

  數據集:

  執行分組命令:

db.student.group({
    key:{age:1}, 
    initial:{"count":0}, 
    reduce:function(obj,prev) { 
        prev.count++;
    } 
})

  

 

MongoDB聚合

理解 aggregate() 方法

  Collection對象提供了對數據執行聚合操作的方法 aggregate()。該方法主要用於數據處理(諸如統計平均值,求和等),並返回計算的結果。

db.collection_name.aggregate( operator, [ operator ,...] )

  參數 operator 是一系列聚合運算符,讓您指定要在流水線的各個階段對數據執行哪種聚合操作。執行的一個運算符後,將結果傳給下一個運算符繼續運算。

  該方法直接返回一個包含聚合結果的迭代器。

使用聚合框架運算符

  MongoDB提供的聚合框架非常強大,通過 aggrgate() 方法可以反覆將一個聚合運算符的結果傳遞給下一個運算符。

  註意在引用文檔中的欄位名時,需要在欄位名前加 $ ,表示這是一個欄位值而不是字元串。

運算符 描述 示例
$project 通過重命名、添加或刪除欄位來重新定義文檔。還能重新計算值以及添加子文檔 { $project : { title : " $name " } }
$match 可以實現查找的功能 { $match : { value : { $gt : 50 } } }
$limit 限制文檔數,返回結果集中的前 n 個數 { $limit : 5 }
$skip 丟棄結果集中的前 n 個文檔,效率較低,依然會遍歷前 n 個文檔 { $skip : 5 }
$unwind 其值必須是數組欄位的名稱。對指定的數組進行分拆,為其中的每個值創建一個文檔 { $unwind : { $myArr } }
$group 將文檔分組並生成新的文檔,可以進行一系列子命令 { $group : { _id : " $name " , num : { $sum : 1 } } }
$sort 將文檔排序 { $sort : { name : 1 , age : -1 } }

 

MapReduce() 方法

  Map-Reduce是一種計算模型,簡單的說就是將大批量的工作(數據)分解(MAP)執行,然後再將結果合併成最終結果(REDUCE)。

  MongoDB提供的Map-Reduce非常靈活,對於大規模數據分析也相當實用。

db.collection_name.mapReduce( map , reduce , arguments );

  其中 map 是一個函數,用於分組,它將對數據集的每個對象執行它來生成一個鍵和值,這些值被加入到與鍵相關聯的數組中,供歸併階段使用。

// map 函數
function() {
    emit ( key , value );
}

  參數 reudce 也是一個函數,將對 map 函數生成的每個對象執行它。reduce 函數必須將鍵作為第一個參數,將與鍵相關聯的值數組作為第二個參數,並使用值數組來計算得到與鍵相關聯的單個值,再返回結果。

// reduce 函數 處理需要統計的欄位
function ( key , value ) {
    ......統計欄位處理
    return result;
}

  參數 arguments 是一個對象,指定了檢索傳遞給 map 函數的文檔時使用的選項。

{
    out : collection,      // 統計結果存放集合 (不指定則使用臨時集合,在客戶端斷開後自動刪除)。
    query : document,      // 一個篩選條件,只有滿足條件的文檔才會調用map函數。(query。limit,sort可以隨意組合)
    sort : document,       // 和limit結合的sort排序參數(也是在發往map函數前給文檔排序),可以優化分組機制 
    limit : number         // 發往map函數的文檔數量的上限(要是沒有limit,單獨使用sort的用處不大) 
}

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 摘要:https://www.cnblogs.com/luoguixin/p/6291408.html 歡迎轉載,若需轉載請標明出處:https://www.cnblogs.com/luoguixin/p/6291408.html 如圖,如果通過一下代碼,添加服務後,使用 net start命令出現 ...
  • 前言 ​ 關於資料庫我們知道是通過記憶體對磁碟進行操作的,也知道數據會落實到磁碟上,但是數據在磁碟上的存儲結構可能大家還不是很清楚。 ​ MySQL伺服器上負責對錶中的數據的讀取和寫入的工作的部分是存儲引擎,而關於伺服器會支持不同類型的伺服器,如:InnoDB、MyISAM、Memory...... ...
  • 一、PreparedStatement 介面的使用 首先占位符我們可以使用 Statement 介面來操作數據, 但是這個介面存在兩個問題: 1、使用 Statement 介面對象發送的 sql 語句需要在資料庫中進行一次編譯之後成為指令才能執行,並且每條 sql 語句都需要編譯一次, 這樣效率是很 ...
  • 1.查看資料庫的基本語句:show databases; 2.選擇相應的資料庫進入語法:use 資料庫名; 3.查看資料庫中的表語法:show tables; 4.查看表的基本結構語句:desc 表名; 5.修改表名:alter table 舊表名 rename to 新表名; 6.修改欄位的數據類 ...
  • sqlplus /nolog 回車 conn / as sysdba 回車 startup 回車(如果被告知已啟動,應先執行 shutdown immediate 回車) ...
  • 一、事務概念 事務就是一個程式執行單元,裡面的操作要麼都做,要麼都不做。 二、事務特性 事務有四個非常重要的特性(ACID): 原子性(Atomicity):事務是不可分割的整體,所有操作要麼全做,要麼全不做;只要事務中有一個操作出錯,回滾到事務開始前狀態,即之前已執行的操作無效。 一致性(Cons ...
  • IDEA 安裝配置可視化 MongDB 插件 1、安裝MongoDB插件 打開 IDEA ,file --> settings --> plugins,在右邊搜索欄中輸入Mongo,點擊 Mongo Plugin 下的 Install ,安裝完後點擊重啟。 2、添加連接 第一步安裝好後,在idea右 ...
  • [TOC] 一、安裝單實例 1、升級openssl "openssl升級" 2、替換軟體源 3、root 用戶ssh遠程登錄 4、mysql需要安裝的包 5、navicate 連接虛擬機mysql 6、安裝mysql utilities ==最好源碼安裝== 二、安裝多實例 1、目錄結構 2、腳本語 ...
一周排行
    -Advertisement-
    Play Games
  • 前言 本文介紹一款使用 C# 與 WPF 開發的音頻播放器,其界面簡潔大方,操作體驗流暢。該播放器支持多種音頻格式(如 MP4、WMA、OGG、FLAC 等),並具備標記、實時歌詞顯示等功能。 另外,還支持換膚及多語言(中英文)切換。核心音頻處理採用 FFmpeg 組件,獲得了廣泛認可,目前 Git ...
  • OAuth2.0授權驗證-gitee授權碼模式 本文主要介紹如何筆者自己是如何使用gitee提供的OAuth2.0協議完成授權驗證並登錄到自己的系統,完整模式如圖 1、創建應用 打開gitee個人中心->第三方應用->創建應用 創建應用後在我的應用界面,查看已創建應用的Client ID和Clien ...
  • 解決了這個問題:《winForm下,fastReport.net 從.net framework 升級到.net5遇到的錯誤“Operation is not supported on this platform.”》 本文內容轉載自:https://www.fcnsoft.com/Home/Sho ...
  • 國內文章 WPF 從裸 Win 32 的 WM_Pointer 消息獲取觸摸點繪製筆跡 https://www.cnblogs.com/lindexi/p/18390983 本文將告訴大家如何在 WPF 裡面,接收裸 Win 32 的 WM_Pointer 消息,從消息裡面獲取觸摸點信息,使用觸摸點 ...
  • 前言 給大家推薦一個專為新零售快消行業打造了一套高效的進銷存管理系統。 系統不僅具備強大的庫存管理功能,還集成了高性能的輕量級 POS 解決方案,確保頁面載入速度極快,提供良好的用戶體驗。 項目介紹 Dorisoy.POS 是一款基於 .NET 7 和 Angular 4 開發的新零售快消進銷存管理 ...
  • ABP CLI常用的代碼分享 一、確保環境配置正確 安裝.NET CLI: ABP CLI是基於.NET Core或.NET 5/6/7等更高版本構建的,因此首先需要在你的開發環境中安裝.NET CLI。這可以通過訪問Microsoft官網下載並安裝相應版本的.NET SDK來實現。 安裝ABP ...
  • 問題 問題是這樣的:第三方的webapi,需要先調用登陸介面獲取Cookie,訪問其它介面時攜帶Cookie信息。 但使用HttpClient類調用登陸介面,返回的Headers中沒有找到Cookie信息。 分析 首先,使用Postman測試該登陸介面,正常返回Cookie信息,說明是HttpCli ...
  • 國內文章 關於.NET在中國為什麼工資低的分析 https://www.cnblogs.com/thinkingmore/p/18406244 .NET在中國開發者的薪資偏低,主要因市場需求、技術棧選擇和企業文化等因素所致。歷史上,.NET曾因微軟的閉源策略發展受限,儘管後來推出了跨平臺的.NET ...
  • 在WPF開發應用中,動畫不僅可以引起用戶的註意與興趣,而且還使軟體更加便於使用。前面幾篇文章講解了畫筆(Brush),形狀(Shape),幾何圖形(Geometry),變換(Transform)等相關內容,今天繼續講解動畫相關內容和知識點,僅供學習分享使用,如有不足之處,還請指正。 ...
  • 什麼是委托? 委托可以說是把一個方法代入另一個方法執行,相當於指向函數的指針;事件就相當於保存委托的數組; 1.實例化委托的方式: 方式1:通過new創建實例: public delegate void ShowDelegate(); 或者 public delegate string ShowDe ...