1. MongoDB常见的部署架构
    * 单机版
    * 复制集
    * 分片集群
    
2. 为什么要使用分片集群
    * 数据容量日益增大，访问性能日渐下降，怎么破？
    * 新品上线异常火爆，如何支撑更多用户并发？
    * 单库已有10TB数据，恢复需要1-2天，如何加速？
    * 地理分布数据

3. 分片如何解决问题？
    银行交易表单内10亿笔资料超负荷运转，交易号 0-1,000,000,000
    
    把数据分成两两半，放到两个库里。
    
    交易号：0-500,000,000
    
    交易号：500,000,001-1,000,000,000
    
    mongodb 最多可以分成1024片
    
4. 完整的分片集群
    


    
5. 分片集群解剖：路由节点mongos
    * 提供集群单一入口
    * 转发应用端请求
    * 选择合适数据节点进行读写
    * 合并多个数据节点的返回
    * 无状态
    * 建议至少两个
6. 分片集群解剖：配置节点mongod
    * 提供集群元数据存储
    * 分片数据分布的映射
    
    普通复制集架构
    | Lower | Upper | Shard |
    |-------|-------|-------|
    | 0     | 1000  | Shard0 |
    | 1001  | 2000  | Shard1 |
    
7. 分片集群解剖：数据节点mongod
    * 以复制集为单位
    * 横向扩展
    * 最大1024分片
    * 分片之间数据不重复
    * 所有分片在一起才可以完整工作
8. MongoDB分片集群特点
    * 应用全透明，无特殊处理
    * 数据自动均衡
    * 动态扩容，无须下线
    * 提供三种分片方式
9. 分片集群数据分布方式
    * 基于范围
    


    * 基于Hash
    


    * 基于zone / tag
    

10. 小结
    * 分盘集群可以有效解决性能瓶颈及系统扩容问题
    * 分片额外消耗较多，管理复杂，尽量不要分片

MongoDB分片集群机制及原理的更多相关文章

  1. MongoDB 分片集群实战

    背景 在如今的互联网环境下,海量数据已随处可见并且还在不断增长,对于如何存储处理海量数据,比较常见的方法有两种: 垂直扩展:通过增加单台服务器的配置,例如使用更强悍的 CPU.更大的内存.更大容量的磁 ...

  2. MongoDB分片集群原理、搭建及测试详解

    随着技术的发展,目前数据库系统对于海量数据的存储和高效访问海量数据要求越来越高,MongoDB分片机制就是为了解决海量数据的存储和高效海量数据访问而生. MongoDB分片集群由mongos路由进程( ...

  3. 搭建MongoDB分片集群

    在部门服务器搭建MongoDB分片集群,记录整个操作过程,朋友们也可以参考. 计划如下: 用5台机器搭建,IP分别为:192.168.58.5.192.168.58.6.192.168.58.8.19 ...

  4. 分布式文档存储数据库之MongoDB分片集群

    前文我们聊到了mongodb的副本集以及配置副本集,回顾请参考https://www.cnblogs.com/qiuhom-1874/p/13953598.html:今天我们来聊下mongodb的分片 ...

  5. mongodb分片集群

    第一章 1.mongodb 分片集群解释和目的 一组Mongodb复制集,就是一组mongod进程,这些进程维护同一个数据集合.复制集提供了数据冗余和高等级的可靠性,这是生产部署的基础. 第二章 1. ...

  6. TiDB和MongoDB分片集群架构比较

    此文已由作者温正湖授权网易云社区发布. 欢迎访问网易云社区,了解更多网易技术产品运营经验. 最近阅读了TiDB源码的说明文档,跟MongoDB的分片集群做了下简单对比. 首先展示TiDB的整体架构 M ...

  7. 网易云MongoDB分片集群（Sharding）服务已上线

    此文已由作者温正湖授权网易云社区发布. 欢迎访问网易云社区,了解更多网易技术产品运营经验. MongoDB sharding cluster(分片集群)是MongoDB提供的数据在线水平扩展方案,包括 ...

  8. CentOS7+Docker+MangoDB下部署简单的MongoDB分片集群

    简单的在Docker上快速部署MongoDB分片集群 前言 文中使用的环境如下 OS:CentOS Linux release 7.5.1804 (Core) Docker:Docker versio ...

  9. Windows 搭建MongoDB分片集群（二）

    在本篇博客中我们主要讲描述分片集群的搭建过程.配置分片集群主要有两个步骤,第一启动所有需要的mongod和mongos进程.第二步就是启动一个mongos与集群通信.下面我们一步步来描述集群的搭建过程 ...

随机推荐

  1. spring注解-组件注册

    一.@Configuration+@Bean @Configuration:配置类==配置文件 @Bean:给容器中注册一个Bean:类型为返回值的类型,默认是用方法名作为id @Bean(" ...

  2. maven常用Java配置

    maven国内镜像 ------------------------------------------------------------------------------------------ ...

  3. spring boot 配置属性值获取注解@Value和@ConfigurationProperties比较

    功能比较 :     @ConfigurationProperties  @Value  映射赋值 批量注入配置文件中的属性 一个个指定 松散绑定(松散语法)① 支持 不支持 SpEL② 不支持 支持 ...

  4. grep命令输出显示高亮字

    grep命令执行后,终端上输出显示颜色可以加"--color=auto"的参数. 另外的两个办法是: 1.设置环境变量: export GREP_OPTIONS="--c ...

  5. MySQL慢日志优化

    慢日志的性能问题 造成 I/O 和 CPU 资源消耗:慢日志通常会扫描大量非目的的数据,自然就会造成 I/O 和 CPU 的资源消耗,影响到其他业务的正常使用,有可能因为单个慢 SQL 就能拖慢整个数 ...

  6. 【分布式技术专题】「OSS中间件系列」Minio的文件服务的存储模型及整合Java客户端访问的实战指南

    Minio的元数据 数据存储 MinIO对象存储系统没有元数据数据库,所有的操作都是对象级别的粒度的,这种做法的优势是: 个别对象的失效,不会溢出为更大级别的系统失效. 便于实现"强一致性& ...

  7. CF46B T-shirts from Sponsor 题解

    Content 有一家服装店,有 \(\texttt{S}\) 码的衣服 \(n_S\) 件.\(\texttt{M}\) 码的衣服 \(n_M\) 件,\(\texttt{L}\) 码的衣服 \(n ...

  8. .NET 6 优先队列 PriorityQueue 实现分析

    在最近发布的 .NET 6 中,包含了一个新的数据结构,优先队列 PriorityQueue, 实际上这个数据结构在隔壁 Java中已经存在了很多年了, 那优先队列是怎么实现的呢? 让我们来一探究竟吧 ...

  9. java 编程基础 注解 ：可重复的注解

    重复注解 Java8以前,同一个程序元素前最多只能使用一相同类型的注解;如果需要在同一个元素前使用多个相同类型的注解,则必须使用注解"容器".例如在Struts开发中,有时需要在 ...

  10. git 添加.gitignore文件不生效

    git rm -r --cached . #新增的忽略文件没有生效,是因为git是有缓存的,而之前的文件在缓存中,并不会清除掉,还会继续提交,所以更新.gitignore文件,要清除缓存文件 git ...