MongoDB学习笔记-05 聚合
MongoDB除了基本查询功能之外,还有强大的聚合工具,其中包括:count()、distinct()、group()、mapreduce.
计数函数count
count是最简单的聚合工具,用于返回文档的数量:
>db.user.count() // 返回集合user的个数
传递查询文档时,则计算查询结果的数量:
>db.user.count({"age":{"$lt":20}}) // 返回年龄小于20岁的用户数
该函数对于分页时的总数非常有必要
去重函数distinct
distinct函数用来找出给定键的所有不同的值。使用时必须指定集合和键:
>db.runCommand({"distinct":"user","key":"age"}) // 获取age键的不同的值
有时候需要获取集合中所有不同的键,此时需要自己编写MapReduce,内置没有这样的函数。
values返回键所对应的所有不同的值,数组形式。
stats返回distinct过程的一些指标。
n:返回的集合数量,
nscanned:扫描过的文档数量,
timems:耗费的时间(毫秒),
cursor:使用的索引(BasicCursor:无索引,BtreeCursor)
分组函数group
MongoDB会根据分组依据的键将集合分成若干个组,再聚合每个组内的文档。
>db.runCommand({"group":{
"ns":"user",
"key":"day",
"initial":{"time":0},
"$reduce":function(doc,prev){
if(doc.time>prev.time){
prev.price = doc.price;
prev.time = doc.time;
}
},
"condition":{"day":{"$gt":"2014/12/21"}}
}})
"ns":"user":指定分组的集合为user
"key":"day":指定文档分组依据的键
"initial":{"time":0}每一组reduce函数调用的时间,会作为初始文档传递给后续过程。
"$reduce":每个文档都对应一次这个调用。系统会传递两个参数:当前文档和累加器文档。
"condition":指定条件
使用完成器:finalizer
完成器finalizer用于精简数据库传给用户的数据,group命令的输出一定要能放到单个数据库响应中。
>db.runCommand({"group":{
"ns":"post",
"key":"{"tags":true}", // 等同于"key":"tags"
"initial":{"tags":{}},
"$reduce":function(doc,prev){
for(i in doc.tags){
if(doc.tags[i] in prev.tags){
prev.tags[doc.tags[i]]++;
}else{
Prev.tags[doc.tags[i]]=1;
},
"finalize":function(prev){
var mostPopular = 0;
for(i in prev.tags){
if(prev.tags[i]>mostPopular){
prev.tag=i;
mostPopular=prev.tags[i];
}
}
Detete prev.tags
}
}}})
将$reduce处理后的结果再进行处理,然后返回给客户端。
将函数作为键使用
定义分组函数时使用"$keyf"代替"key":
"$keyf":function(x){return x.category.toLowerCase();}
…
MapReduce
count、distict、group能做的事,MapReduce都能做。MapReduce的基本使用如下:
>mr=db.runCommand({"mapreduce":"user","map":map,"reduce":reduce})
"mapreduce":对哪个集合作处理
"map":map函数,可以在上述命令前先定义
"reduce":reduce函数,可以在上述命令前先定义
map函数使用函数emit返回要处理的值,this表示对当前文档的引用:
>map=function(){
for(var key in this){
emit(key,{ "count":1});
}};
reduce能处理emit返回的文档和其他reduce结构的各种组合:
>reduce=function(key,emits){
total = 0;
for(var I in emits){
total+=emits[i].count;
}
return {"count":total};
}
MapReduce函数的返回文档类似如下:
result:存放mapreduce结果的集合名,为临时集合,mapreduce连接关闭后自动删除。
timeMillis:操作花费的时间,单位毫秒
input:发生到map函数的文档个数
emit:在map函数中emit被调用的次数
output:结果集合中创建的文档数量。
MapReduce的其他可选键
MapReduce命令除了必须的键:mapreduce、map、reduce之外,还有如下的可选键:
finalize:对reduce的输出结果作进一步处理
keeptemp:连接关闭时,临时集合是否保存。
output:结果集合的名字,设定该项则隐含着keeptemp:true。
query:会在发往map函数前,先用指定条件过滤文档。
sort:在发往map前先给文档排序。
limit:发往map函数的文档数量的上限。
scope:javaScript代码中要用到的变量(变量名:值)。
verbose:是否产生更加详细的服务器日志。
MongoDB学习笔记-05 聚合的更多相关文章
- MongoDB学习笔记05
count 返回集合中文档数量文档数量 db.foo.count() db.foo.count({}) distinct用来找出给定键的所有不同的值,使用时必须指定集合和键 db.runCommand ...
- mongodb 学习笔记05 --用户管理
csdn的markdown编辑器真有够烂的,这篇文章又给弄丢了 启用认证 mongod 启动默认没有开启权限,你须要指定 –auth 启动.或者在配置文件里设置security.authorizati ...
- mongoDB 学习笔记纯干货(mongoose、增删改查、聚合、索引、连接、备份与恢复、监控等等)
最后更新时间:2017-07-13 11:10:49 原始文章链接:http://www.lovebxm.com/2017/07/13/mongodb_primer/ MongoDB - 简介 官网: ...
- 【转】mongoDB 学习笔记纯干货(mongoose、增删改查、聚合、索引、连接、备份与恢复、监控等等)
mongoDB 学习笔记纯干货(mongoose.增删改查.聚合.索引.连接.备份与恢复.监控等等) http://www.cnblogs.com/bxm0927/p/7159556.html
- MongoDB 学习笔记(原创)
MongoDB 学习笔记 mongodb 数据库 nosql 一.数据库的基本概念及操作 SQL术语/概念 MongoDB术语/概念 解释/说明 database database 数据库 table ...
- MongoDB学习笔记:MongoDB 数据库的命名、设计规范
MongoDB学习笔记:MongoDB 数据库的命名.设计规范 第一部分,我们先说命名规范. 文档 设计约束 UTF-8 字符 不能包含 \0 字符(空字符),这个字符标识建的结尾 . 和 $ ...
- MongoDB学习笔记:快速入门
MongoDB学习笔记:快速入门 一.MongoDB 简介 MongoDB 是由C++语言编写的,是一个基于分布式文件存储的开源数据库系统.在高负载的情况下,添加更多的节点,可以保证服务器性能.M ...
- MongoDB学习笔记系列
回到占占推荐博客索引 该来的总会来的,Ef,Redis,MVC甚至Sqlserver都有了自己的系列,MongoDB没有理由不去整理一下,这个系列都是平时在项目开发时总结出来的,希望可以为各位一些帮助 ...
- PHP操作MongoDB学习笔记
<?php/*** PHP操作MongoDB学习笔记*///*************************//** 连接MongoDB数据库 **////*************** ...
随机推荐
- Zend Studio
下载地址:http://www.zend.com/en/products/studio/downloads#Windows 详情:http://baike.baidu.com/link?url=8rX ...
- 【Android端 APP 内存分析】使用工具进行APP的内存分析
Android端可以通过adb 命令直接获取内存信息,当然Android studio也提供了对内存的监控分析工具,并且后续可以结合MAT做分析 今天介绍的是通过Android studio和MAT工 ...
- 从SQL下载大量数据到Excel
之前不知设计原理,发生了大量数据(超过100w行)直接从数据库读取加载到网页中,直接导致内存溢出. Rediculous! 所以,现在改为分页查询到页面中. 由于其有全局逻辑,故折中每次加载1w条数据 ...
- SQL Server中 ldf 文件过大的解决方法
在SQL Server中经常遇到事务日志变大的情况,除了将数据库设置为"自动收缩"外,还可以使用下面的SQL命令进行快速清除数据库中的事务日志,命令如下: - 第一步:清空日志 ...
- Winfrom实现圆角设计
主要代码 public partial class Form1 : Form { public Form1() { InitializeComp ...
- 使用PHP发送email进行账号激活或者密码修改操作
使用PHPMailer编写发送邮件 PHPMailer需PHP的socket扩展支持,而PHPMailer链接qq域名邮箱时需要ssl加密方式(qq邮箱最近做了限制,新开域名邮箱不再允许通过smtp协 ...
- ELK日志管理之——logstash配置语法
Logstash 设计了自己的 DSL -- 有点像 Puppet 的 DSL,或许因为都是用 Ruby 语言写的吧 -- 包括有区域,注释,数据类型(布尔值,字符串,数值,数组,哈希),条件判断,字 ...
- Visual Studio 2010 插件之Resharper
这一系列不是对每个功能的中文帮助,而是我对开发中可能涉及的功能需求,利用Resharper来完成.有些是Visual Studio有的,但是做的不好,有些是没有而Resharper发明的.总的目的都只 ...
- Textrank算法介绍
先说一下自动文摘的方法.自动文摘(Automatic Summarization)的方法主要有两种:Extraction和Abstraction.其中Extraction是抽取式自动文摘方法,通过提取 ...
- 【笔记】Android项目添加项目引用方法
刚才在做phoneGap时,想试图自己添加phoneGap的lib组件(jar的源码),找了好多种方法,下面这种成功了 项目邮件 Properties, Android ,Add... ,然后Dep ...