MongoDB 深入学习 -- ReplSet,Sharding,Security,Aggregation,Command
萌新最近在对付MongoDB,因此每天都在翻官方文档,这里随便做点笔记
ReplSet 与 Sharding
ReplSet 是副本集,也就是主从集合。可以用来做负载均衡,数据热备份。副本集的配置相对简单,数据库的角色就只有主机和从机两个概念(加上仲裁机)
Sharding 是数据分片,用来做海量数据的分布式管理,也可以起到负载均衡的效果。数据分片需要配置分片服务器(3台以上sharding),路由服务器(mongos),配置服务器(config)。通常配合副本集使用做数据库集群
- 连接副本集:
mongodb://db1.example.com:27017,db1.example.com:27017,db1.example.com:27017/dbname?replicaSet=rs0&username=abc&password=123&dataSource=admin
- 连接分片库:
mongodb://mongos.example.com:27017/dbname?username=abc&password=123&dataSource=admin
- ReadConcern WriteConcern: 用来配置从集群读写策略,根据不同场景使用来平衡集群的实用性和可靠性
- Read Preference:配置副本集的读取策略,跟 Read Concern有区别。
Security 用户认证
创建用户必须指定角色,和用来认证这个用户的库。
db.createUser({
user: "username",
pwd: "pwd123",
roles: [
{role: "readWriteAnyDatabase", db: "admin"}
]
});
添加时指定了哪个db,在认证时必须指定这个db。一般来说全局的角色都指定到admin中,除非是单一数据库用户才指定为某个db。
在连接的时候就可以指定用户名密码和认证数据库,这样连接成功后直接可以访问需要的数据库。
Aggregation 聚合
mongodb的聚合可以达到类似mysql的分组,排序,连接等效果,主要通过管道Pipeline命令集来实现
MONGODB MANUAL - Aggregation
简单介绍几个管道操作集合命令
- $group 最常用的分组,内容是一个json文档指定分组后的各个字段,必须提供
_id
字段告诉mongodb来按哪个字段分组,比如按 a,b 字段分组,c求和,d计数,那么$group应该是这样
{
aggregate: 'table',
pipeline: [
{$group: {
_id: {a:1, b:1},
total: {$sum: "$c"},
count: {$sum: 1}
}}
]
}
// 结果
// [{_id: {a: "a", b: "b"}, total: 10, count: 2}, {_id: {a: "a", b: "c"}, total: 20, count: 3}]
- $addFields, $project 组合字段
$addFields 可以自定义新字段,如果要在$project中使用,需要带上$
// {_id: 1, name: "aa", class:"bbb", num: [2,5,3]}
{
aggregate: 'table',
pipeline: [
{$addFields: {
totalNum: {$sum: "$num"}
}},
{$project: {
name: 1, "$totalNum": 1 // 此处需要加$
}}
]
}
// 结果
// [{_id: 1, name: "aa", totalNum: 10}]
- $match,$limit,$skip,$count,$sort 不多介绍,看名字就知道什么意思
- $unwind 展开
这是个很有意思的命令,配合数组字段使用,按数组元素的每一项展开,其他字段保留。效果看起来相当于其他字段组成一个表 left join 这个数组字段
// { "_id" : 1, "item" : "ABC1", sizes: [ "S", "M", "L"] }
{
aggregate: 'table',
pipeline: [
{$unwind: "$size"}
]
}
// 结果
[
{ "_id" : 1, "item" : "ABC1", "sizes" : "S" }
{ "_id" : 1, "item" : "ABC1", "sizes" : "M" }
{ "_id" : 1, "item" : "ABC1", "sizes" : "L" }
]
可以通过配置参数达到left join , inner join , ifNull 等效果
另外,pipeline还有很多表达式操作符,可以很方便的组合使用来计算生成想要创建的新字段,随便举些例子:
- 数学函数 $add,$abs,$log,$sqrt
- 数组操作 $slice, $isArray
- 数值比较 $eq, $lt
- 非常实用的日期操作 $dateToString, $dateFromString
初用聚合格外注意
pipeline选项是一个数组
pipeline选项是一个数组
pipeline选项是一个数组
// db.aggregate()
db.collection.aggregate({
$match: {status: "1"},
$group: {_id: "$group", count: {$sum: 1}}
});// error
db.collection.aggregate([
{
$match: {status: "1"},
},{
$group: {_id: "$group", count: {$sum: 1}}
}
]);// 注意区别, $match 和 $group 是不同数组元素里的键,其他同理
db.runCommand({
aggregate: "tbname",
pipeline: [
{
$match: {status: "1"},
},{
$group: {_id: "$group", count: {$sum: 1}}
}
]
});
Command
其实mongodb的所有操作都可以通过构造一个 command document, 然后传给 runCommand 来实现
这与mongodb的设计也很一致,一切皆document.
MongoDB 深入学习 -- ReplSet,Sharding,Security,Aggregation,Command的更多相关文章
- NoSQL之【MongoDB】学习(三):配置文件说明
摘要: 继上一篇NoSQL之[MongoDB]学习(一):安装说明 之后,知道了如何安装和启动MongoDB,现在对启动时指定的配置文件(mongodb.conf)进行说明,详情请见官方. 启动Mon ...
- Mongodb分片 学习小结
前一篇 https://www.cnblogs.com/frx9527/p/mongodb.html 学会搭建复制集Replication之后,就可以学习分片Sharding了. 教程建议看官方文档: ...
- [转载]MongoDB开发学习(2)索引的基本操作
索引能够极大的提高查询的效率.在数据库中简历索引必不可少. 在MongoDB中可以很轻松的创建索引. 默认索引_id_ 开启MongoDB服务器,创建数据库cnblogs,创建集合Users .(关于 ...
- 双刃剑MongoDB的学习和避坑
双刃剑MongoDB的学习和避坑 MongoDB 是一把双刃剑,它对数据结构的要求并不高.数据通过key-value的形式存储,而value的值可以是字符串,也可以是文档.所以我们在使用的过程中非常方 ...
- MongoDB的学习--索引类型和属性(转)
原文链接:MongoDB的学习--索引类型和属性 索引类型 MongDB的索引分为以下几种类型:单键索引.复合索引.多键索引.地理空间索引.全文本索引和哈希索引 单键索引(Single Field I ...
- MongoDB 自动分片 auto sharding
MongoDB部署实验系列文章 MongoDB做为NoSQL数据库,最近几年持续升温,越来越多的企业都开始尝试用MongoDB代替原有Database做一些事情.MongoDB也在集群,分片,复制上也 ...
- mongodb数据库学习【安装及简单增删改查】
//@desn:mongodb数据库学习 //@desn:码字不宜,转载请注明出处 //@author:张慧源 <turing_zhy@163.com> //@date:2018/08/ ...
- 转】MongoDB 自动分片 auto sharding
原博文出自于: http://blog.fens.me/category/%E6%95%B0%E6%8D%AE%E5%BA%93/page/4/ 感谢! MongoDB 自动分片 auto shard ...
- Mongodb基础 学习小结
MongoDB是一个基于分布式文件存储的数据库.由C++语言编写.旨在为WEB应用提供可扩展的高性能数据存储解决方案.MongoDB是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当中功能 ...
随机推荐
- .Net 框架实现AOP(动态代理实现AOP,本文为翻译)
在上一节,我们将静态实现AOP,但是对于一个大型项目,要想为每个类,每个方法都去实现AOP ,进行日志记录和权限验证似乎是不可能的. 即使可能对于成百上千个类维护,也是很难维护.所以今天的主题就是如标 ...
- Py修行路 python基础 (二十五)线程与进程
操作系统是用户和硬件沟通的桥梁 操作系统,位于底层硬件与应用软件之间的一层 工作方式:向下管理硬件,向上提供接口 操作系统进行切换操作: 把CPU的使用权切换给不同的进程. 1.出现IO操作 2.固定 ...
- puclic 页面公共CSS样式
body, div, dl, dt, dd, ul, ol, li, pre, form, fieldset, blockquote, h1, h2, h3, h4, h5, h6,p{ paddin ...
- 【知识碎片】JavaScript篇
40.选择器组合 逗号是多选择器空格 是子子孙孙尖括号 只找儿子 39.失去焦点事件blur $("input").blur(function(){ $("input& ...
- git rm简介
本文翻译整理自:http://web.mit.edu/~mkgray/project/silk/root/afs/sipb/project/git/git-doc/git-rm.html 在git中我 ...
- QQ、邮箱、手机号 正则验证
邮箱:/^([a-zA-Z0-9_\.\-])+\@(([a-zA-Z0-9\-])+\.)+([a-zA-Z0-9]{2,4})+$/ 手机号:/^(((13[0-9]{1})|(15[0-9]{1 ...
- PHP自动加载配置ArrayAccess类
ArrayAccess是PHP的类,可以把对象当成数组来使用访问. Config.php 配置类 <?php namespace IMooc; class Config implements ...
- 【HDU3949】XOR
[题目大意] 给定一个数组,求这些数组通过异或能得到的数中的第k小是多少. 传送门:http://vjudge.net/problem/HDU-3949 [题解] 首先高斯消元求出线性基,然后将k按照 ...
- instanceof php
instdnceof php5 的一个新成员 功能: 使用这个关键字可以确定一个对象是否是类的实例,是否是累的子类 ,还是实现了某个特定的接口. <?php class A{} class B ...
- VBox 安装 Ubuntu Server 的那些坑,键盘乱码、网卡互连、共享目录等
1.更新,相信大家都是有强迫症的 sudo apt-get update sudo apt-get upgrade 出现错误:Could not open lock file /var/lib/dpk ...