MongoDB聚合类操作
MongoDB中聚合(aggregate)主要用于处理数据(诸如统计平均值,求和等),并返回计算后的数据结果。有点类似sql语句中的 count(*)
语法:db.tablename.aggregate(aggregate_operation)
一、聚合表达式类型及举例(来自菜鸟教程)
| 表达式 | 描述 | 实例 |
| $sum | 计算总和。 | db.mycol.aggregate([{$group : {_id : "$by_user", num_tutorial : {$sum : "$likes"}}}]) |
| $avg | 计算平均值 | db.mycol.aggregate([{$group : {_id : "$by_user", num_tutorial : {$avg : "$likes"}}}]) |
| $min | 获取集合中所有文档对应值得最小值。 | db.mycol.aggregate([{$group : {_id : "$by_user", num_tutorial : {$min : "$likes"}}}]) |
| $max | 获取集合中所有文档对应值得最大值。 | db.mycol.aggregate([{$group : {_id : "$by_user", num_tutorial : {$max : "$likes"}}}]) |
| $push | 在结果文档中插入值到一个数组中。 | db.mycol.aggregate([{$group : {_id : "$by_user", url : {$push: "$url"}}}]) |
| $addToSet | 在结果文档中插入值到一个数组中,但不创建副本。 | db.mycol.aggregate([{$group : {_id : "$by_user", url : {$addToSet : "$url"}}}]) |
| $first | 根据资源文档的排序获取第一个文档数据。 | db.mycol.aggregate([{$group : {_id : "$by_user", first_url : {$first : "$url"}}}]) |
| $last | 根据资源文档的排序获取最后一个文档数据 | db.mycol.aggregate([{$group : {_id : "$by_user", last_url : {$last : "$url"}}}]) |
如下,大家看我的代码举例
我的示例数据库中有同名的课程,除了name字段的内容相同,其他的内容是不一样的,在这里我使用了$group管道和$sum表达式,
db.basiclesson.aggregate([{$group:{_id:"$name",num_tutorial:{$sum:1}}}]),在这里{$group:{_id:"$name",num_tutorial:{$sum:1}}代表以“name”作为分组的字段,统计每个分组的数据行数
可能有很多小伙伴不理解为什么前面要使用_id,后面又跟上"name",即这处的表达:_id:"$name",在这里,前面_id必须是数据的主键,因为在进行统计计算时,它是需要向程序内部传递一个可以用作累加的字段
> db.basiclesson.find()
{ "_id" : ObjectId("5f1fdb6f122ecd20144058e9"), "name" : "JAVA" }
{ "_id" : ObjectId("5f1feb50122ecd20144058ea"), "name" : "SQL Server", "desc" : "这是一个测试课程" }
{ "_id" : ObjectId("5f1febce122ecd20144058eb"), "name" : "MongoDB", "desc" : "这是一个测试课程" }
{ "_id" : "001", "name" : "Oracle", "level" : 1, "price" : 10000 }
{ "_id" : "002", "name" : "C语言", "level" : 1, "price" : 5000 }
{ "_id" : "003", "name" : "C语言", "level" : 2, "price" : 8000 }
{ "_id" : ObjectId("5f21271e4b787aeb982bc254"), "name" : "计算机网络", "level" : "2", "price" : 1000 }
{ "_id" : ObjectId("5f212fb24b787aeb982bc255"), "name" : "计算机网络", "level" : 2 }
> db.basiclesson.aggregate([{$group:{_id:"$name",num_tutorial:{$sum:1}}}])
{ "_id" : "SQL Server", "num_tutorial" : 1 }
{ "_id" : "Oracle", "num_tutorial" : 1 }
{ "_id" : "JAVA", "num_tutorial" : 1 }
{ "_id" : "C语言", "num_tutorial" : 2 }
{ "_id" : "MongoDB", "num_tutorial" : 1 }
{ "_id" : "计算机网络", "num_tutorial" : 2 }
大家看我下面的截图,我尝试将_id改为name,此时程序就会报错,提示“字段name 必须是一个累加器类型的对象”

二、管道
菜鸟教程中的介绍:
管道在Unix和Linux中一般用于将当前命令的输出结果作为下一个命令的参数。
MongoDB的聚合管道将MongoDB文档在一个管道处理完毕后将结果传递给下一个管道处理。管道操作是可以重复的。
表达式:处理输入文档并输出。表达式是无状态的,只能用于计算当前聚合管道的文档,不能处理其它的文档。
| 表达式 | 说明 | 举例 | 我的理解 |
|
$project |
修改输入文档的结构。可以用来重命名、增加或删除域,也可以用于创建计算结果以及嵌套文档 |
db.article.aggregate({$project:{title:1 ,author:1}}) |
相当于SQL查询时指定查询的字段,其中_id默认显示,如果将字段值设置为1;则显示,设置为0,则不显示 |
| $match | 用于过滤数据,只输出符合条件的文档。$match使用MongoDB的标准查询操作 |
db.articles.aggregate( [ { $match : { score : { $gt : 70, $lte : 90 } } }, { $group: { _id: null, count: { $sum: 1 } } } ] ) |
相当于SQL中的条件查询,输出符合条件的数据,效果同直接使用同类的操作符,注意,这里一定不要漏掉中括号,可以直接使用条件查询搞定,例如这里举例中,如果不用统计最后的数据条数,可以改为db.articles.find({score:{$gt : 70, $lte : 90}}) |
| $limit | 用来限制MongoDB聚合管道返回的文档数 |
db.article.aggregate( { $limit : 3 }) |
相当于SQL中的topN,即显示前N条数据,可以直接用limit()方法,即db.tablename.find().limit(NUMBER) |
| $skip | 在聚合管道中跳过指定数量的文档,并返回余下的文档 | db.article.aggregate( { $skip : 5 }) | 显示前N条数据之后的数据,与$limit刚好形成互补,可以直接用skip()方法,即db.tablename.find().skip(NUMBER) |
| $unwind | 将文档中的某一个数组类型字段拆分成多条,每条包含数组中的一个值 | 待测试说明 | |
| $group | 将集合中的文档分组,可用于统计结果 | db.mycol.aggregate([{$group : {_id : "$by_user", num_tutorial : {$sum : "$likes"}}}]) | 相当于SQL中的group by,将数据按指定字段进行分组统计 |
| $sort | 将输入文档排序后输出 | db.basiclesson.aggregate({$sort:({"name":1})}) | 相当于SQL中的order by,个人觉得直接用操作符中的sort方法即可,效果一样,即db.tablename.find().sort({key:1/-1}) |
| $geoNear | 输出接近某一地理位置的有序文档 | 暂时没有做数据测试,不好描述 |
总结:我觉得管道有些不是太好理解,有些与其本身的一些函数功能相同,目前还没发现管道的作用是在哪,希望有大神指点一二
MongoDB聚合类操作的更多相关文章
- MongoDB 聚合操作
在MongoDB中,有两种方式计算聚合:Pipeline 和 MapReduce.Pipeline查询速度快于MapReduce,但是MapReduce的强大之处在于能够在多台Server上并行执行复 ...
- MongoDB 聚合操作(转)
在MongoDB中,有两种方式计算聚合:Pipeline 和 MapReduce.Pipeline查询速度快于MapReduce,但是MapReduce的强大之处在于能够在多台Server上并行执行复 ...
- MongoDB聚合查询及Python连接MongoDB操作
今日内容概要 聚合查询 Python操作MongoDB 第三方可视化视图工具 今日内容详细 聚合查询 Python操作MongoDB 数据准备 from pymongo import MongoCli ...
- Java对MongoDB进行分组操作并统计各个分组的数量
最近在检索MongoDB的数据时需要用到分组操作,由于没有现成的说明文档可参考,只能是在代码中不断调试.摸索前进:目前已现实了Java对MongoDB的分组操作,并统计各个分组的数量.现通过示例详细解 ...
- 【翻译】MongoDB指南/CRUD操作(二)
[原文地址]https://docs.mongodb.com/manual/ MongoDB CRUD操作(二) 主要内容: 更新文档,删除文档,批量写操作,SQL与MongoDB映射图,读隔离(读关 ...
- MongoDB 聚合管道(Aggregation Pipeline)
管道概念 POSIX多线程的使用方式中, 有一种很重要的方式-----流水线(亦称为"管道")方式,"数据元素"流串行地被一组线程按顺序执行.它的使用架构可参考 ...
- MongoDB的CRUD操作
1. 前言 在上一篇文章中,我们介绍了MongoDB.现在,我们来看下如何在MongoDB中进行常规的CRUD操作.毕竟,作为一个存储系统,它的基本功能就是对数据进行增删改查操作. MongoDB中的 ...
- Mongodb学习笔记四(Mongodb聚合函数)
第四章 Mongodb聚合函数 插入 测试数据 ;j<;j++){ for(var i=1;i<3;i++){ var person={ Name:"jack"+i, ...
- mongodb MongoDB 聚合 group
MongoDB 聚合 MongoDB中聚合(aggregate)主要用于处理数据(诸如统计平均值,求和等),并返回计算后的数据结果.有点类似sql语句中的 count(*). 基本语法为:db.col ...
- MongoDB 聚合
聚合操作过程中的数据记录和计算结果返回.聚合操作分组值从多个文档,并可以执行各种操作,分组数据返回单个结果.在SQL COUNT(*)和group by 相当于MongoDB的聚集. aggregat ...
随机推荐
- 修复 Longhorn 卷挂载失败(”CentOS 7.6-'fsck' found errors on device“)
查看 Pod 日志 kubectl describe po clickhouse-0 -n clickhouse ...... #Events: # Type Reason Age From Mess ...
- Git-HEAD 的含义
在 Git 中,"HEAD" 是一个特殊的引用,它指向当前所处的分支或提交. 当你进行一些操作时,比如提交代码.切换分支等,HEAD 的指向会随之改变.下面是 HEAD 在不同情况 ...
- C#模拟键盘输入、键状态和监听键盘消息
模拟键盘输入 模拟键盘输入的功能需要依赖Windows函数实现,这个函数是SendInput,它是专门用来模拟键盘.鼠标等设备输入的函数. 另外和键盘输入相关的函数还有SendKeys,它是Syste ...
- 折腾 Quickwit,Rust 编写的分布式搜索引擎-官方配置详解
Node configuration(节点配置) 节点配置允许您为集群中的各个节点自定义和优化设置.它被分为几个部分: 常规配置设置:共享的顶级属性 Storage(存储)设置:在storage部分定 ...
- Kubernetes-9:Service介绍及演示
Service Kubernetes 的Service定义了这样一种抽象:一个 Pod 的逻辑分组,一种可以访问他们的策略 -- 微服务,这一组Pod能够被Service访问到,通常是通过tabel ...
- Python新手爬虫四:爬取视频
老样子,先上最后成功源码(在D盘下创建'好看视频'文件夹,直接运行即可获取视频): import sys import re,os import requests from you_get impor ...
- ERROR: Could not determine java version from 'JavaVersion.VERSION_1_8'.
写法原为: compileOptions { sourceCompatibility 'JavaVersion.VERSION_1_8' targetCompatibility 'JavaVersio ...
- Google Ads – UTM
介绍 UTM (Urchin tracking module) 的作用是帮助我们收集访客的来源渠道. 比如说, 用户是从 Google 广告来的, Youtube, 还是 Facebook 等等. 它 ...
- 【翻译】实现 Blocked Floyd-Warshall 用于解决所有对最短路径问题 C# 实现
介绍 在之前的帖子中,我们实现了Floyd-Warshall(弗洛伊德-沃沙尔算法)(四种变体)以及路由重建算法.在这些帖子中,我们探讨了所有对最短路径问题的基本概念.内存中的数据表示.并行性.向量化 ...
- foobar2000 v2.1.6 汉化版
foobar2000 v2.1.6 汉化版 -----------------------[软件截图]---------------------- -----------------------[软件 ...