1、总的原则:选键的时候多考虑以下问题。
  1. 写操作是怎么样的,有多大?
  2. 系统每小时会写多少数据,每天呢,高峰期呢
  3. 那些字段是随机的,那些是增长的
  4. 读操作是怎么样的,用户在访问那些数据
  5. 数据索引做了吗?应不应该索引呢?
  6. 数据总量有多少
总的来说,在进行分片前,你需要清楚的了解你的数据。
 
2、注意事项:
分片后,片健不可改变;一个集合只能有一个片健;片健必须有索引。
 
3、工作案例讲解:
在工作的时候由于没有和研发沟通,按id分片了,后来研发发现没法update
先按id分片
激活数据库及集合的分片
mongos> use admin
mongos> db.runCommand({ enablesharding:"mobstat " })
mongos> db.runCommand({ shardcollection: "mobstat.datelocos", key: { _id:1 }})
mongos> use mobstat
mongos> db.datelocos.update({ "date" : 20170816 , "loc" : 0 , "event" : 5 , "os" : 1 , "strvalue" : "123.abc.com"}, { "$inc" : { "count" : 1}})
报错如下:For non-multi updates, must have _id or full shard key ({ _id: 1.0 }) in query
更改date做片健
mongos> db.runCommand({ shardcollection: "mobstat.datelocos", key: { date:1 }})
{ "ok" : 0, "errmsg" : "already sharded" }
 
那么问题来了,怎么更改片健呢?
先备份当前的集合,删除当前集合,再导入集合
mongodump  -d mobstat -c datelocos  --port 30000 -o /tmp
mongorestore  -d mobstat -c datelocos   --port 30000   /tmp/mobstat/datelocos.bson
 
mongos> use mobstat
mongos> db.datelocos.ensureIndex({date:1})
mongos> use admin
mongos> db.runCommand({ shardcollection: "mobstat.datelocos", key: {date:1 }})
再次update
mongos> db.datelocos.update({ "date" : 20170816 , "loc" : 0 , "event" : 5 , "os" : 1 , "strvalue" : "123.abc.com "}, { "$inc" : { "count" : 1}})
WriteResult({ "nMatched" : 1, "nUpserted" : 0, "nModified" : 1 })
看到已经成功更新了
 
再看下集合分片状态
mongos> db.datelocos.stats()
{
        "sharded" : true,
        "systemFlags" : 0,
        "userFlags" : 1,
        "ns" : "mobstat.datelocos",
        "count" : 164791,
        "numExtents" : 24,
        "size" : 58698512,
        "storageSize" : 131325952,
        "totalIndexSize" : 10980368,
        "indexSizes" : {
                "_id_" : 5543328,
                "date_1" : 5437040
        },
        "avgObjSize" : 356.1997439180538,
        "nindexes" : 2,
        "nchunks" : 112,
        "shards" : {
                "shard1" : {
                        "ns" : "mobstat.datelocos",
                        "count" : 53002,
                        "size" : 20424032,
                        "avgObjSize" : 385,
                        "storageSize" : 22507520,
                        "numExtents" : 7,
                        "nindexes" : 2,
                        "lastExtentSize" : 11325440,
                        "paddingFactor" : 1,
                        "systemFlags" : 0,
                        "userFlags" : 1,
                        "totalIndexSize" : 3744608,
                        "indexSizes" : {
                                "_id_" : 1806896,
                                "date_1" : 1937712
                        },
                        "ok" : 1
                },
                "shard2" : {
                        "ns" : "mobstat.datelocos",
                        "count" : 55952,
                        "size" : 21596800,
                        "avgObjSize" : 385,
                        "storageSize" : 22507520,
                        "numExtents" : 7,
                        "nindexes" : 2,
                        "lastExtentSize" : 11325440,
                        "paddingFactor" : 1,
                        "systemFlags" : 0,
                        "userFlags" : 1,
                        "totalIndexSize" : 3989888,
                        "indexSizes" : {
                                "_id_" : 1913184,
                                "date_1" : 2076704
                        },
                        "ok" : 1
                },
                "shard3" : {
                        "ns" : "mobstat.datelocos",
                        "count" : 55837,
                        "size" : 16677680,
                        "avgObjSize" : 298,
                        "storageSize" : 86310912,
                        "numExtents" : 10,
                        "nindexes" : 2,
                        "lastExtentSize" : 27869184,
                        "paddingFactor" : 1,
                        "systemFlags" : 1,
                        "userFlags" : 1,
                        "totalIndexSize" : 3245872,
                        "indexSizes" : {
                                "_id_" : 1823248,
                                "date_1" : 1422624
                        },
                        "ok" : 1
                }
        },
        "ok" : 1
}
看到集合已经均衡的分配到了3个shard上
 
 
 
 

mongodb片健的选取及更改的更多相关文章

  1. Mongodb百亿级数据添加,修改,删除,查询等性能测试【四】

    集群的结构,大家可以查看我的另一遍文章,Mongodb的三种集群  在最后一种集群中,介绍到. 目前使用的数据就是最后一个测试集群,留下的数据. 简单介绍一下,四个分片的配置 192.168.99.6 ...

  2. Mongodb 笔记08 了解应用的动态、数据管理、持久性

    了解应用的动态 1. 了解正在进行的操作:db.currentOp() , 可以加过滤条件,从而只显示符合条件的结果. 1). 寻找有问题的操作:db.currentOp() 最常见的操作就是用来寻找 ...

  3. [原创]Windows下更改特定后缀名以及特定URL前缀的默认打开方式

    Windows下,特定后缀名的文件会由特定的应用程序来运行,比如双击readme.txt,通常情况下会由Windows自带的notepad.exe(记事本)打开文件.如果现在安装了记事本以外的其他文本 ...

  4. mongodb分片集群

    第一章 1.mongodb 分片集群解释和目的 一组Mongodb复制集,就是一组mongod进程,这些进程维护同一个数据集合.复制集提供了数据冗余和高等级的可靠性,这是生产部署的基础. 第二章 1. ...

  5. MongoDB数据库初探 --- 认识与安装 && Mongoose安装

    注意: monogdb数据在使用之后必须及时 mongodb.close()否则后台崩溃. 第一部分: MySQL数据库是关系型数据库,但是使用node开发时多用MongoDB数据库,两者各有优势,所 ...

  6. Linux上安装MongoDB

    使用本教程使用.rpm 软件包在红帽企业Linux或CentOS Linux版本6和7上安装MongoDB Community Edition . 平台支持 本安装指南仅支持64位系统.详细信息请参见 ...

  7. MongoDB学习笔记(七、MongoDB总结)

    1.为什么要NoSQL:nosql能解决sql中那些解决不了的问题 NoSQL是什么:Not Only SQL,本质上还是数据库,但它不会遵循传统数据库的规则(如:SQL标准.ACID属性[事务].表 ...

  8. springboot 和 mongdb连接问题 Exception in thread "main" com.mongodb.MongoSecurityException:

    1 Exception in thread "main" com.mongodb.MongoSecurityException: Exception authenticating ...

  9. Mongodb安全防护

    1.Mongodb未授权访问 描述 MongoDB 是一个基于分布式文件存储的数据库.默认情况下启动服务存在未授权访问风险,用户可以远程访问数据库,无需认证连接数据库并对数据库进行任意操作,存在严重的 ...

随机推荐

  1. 400 Nth Digit 第N个数字

    在无限的整数序列 1, 2, 3, 4, 5, 6, 7, 8, 9, 10, 11, ...中找到第 n 个数字.注意:n 是正数且在32为整形范围内 ( n < 231).示例 1:输入:3 ...

  2. 分布式爬虫系统设计、实现与实战:爬取京东、苏宁易购全网手机商品数据+MySQL、HBase存储

    http://blog.51cto.com/xpleaf/2093952 1 概述 在不用爬虫框架的情况,经过多方学习,尝试实现了一个分布式爬虫系统,并且可以将数据保存到不同地方,类似MySQL.HB ...

  3. js执行顺序——学习笔记

    我们知道有个全局的 window对象,js的一切皆window上的属性和方法.window上有个window.document属性,记录了整个html的dom树,document是顶层. body 和 ...

  4. dubbo与springmvc的简单使用

    什么是Dubbo? dubbo是阿里巴巴公司开源的高性能优秀服务框架,通过高性能的RPC(远程服务调用)实现服务的输入输出功能,可以与spring框架无缝整合: 传统的架构所有的模块都在一台服务器上, ...

  5. dubbo与zookeeper学习中的问题

    环境: spring5.1.5 dubbo 2.6.2 异常信息: java.lang.NoClassDefFoundError: org/apache/curator/RetryPolicy at ...

  6. CF864D Make a Permutation!

    思路: 贪心,构造,模拟. 实现: #include <bits/stdc++.h> using namespace std; ], a[], vis[], n; int main() { ...

  7. python的机器学习之路

    2018-04-1712:22:40 这是python依靠计算机视觉进行的ocr手写字的识别. 通过KNN训练数据 kNN 可以说是最简单的监督学习分类器了.想法也很简单,就是找出测试数据在特征空间中 ...

  8. (转)淘淘商城系列——导入商品数据到索引库——Service层

    http://blog.csdn.net/yerenyuan_pku/article/details/72894187 通过上文的学习,我相信大家已经学会了如何使用Solrj来操作索引库.本文我们将把 ...

  9. Jmeter之关联——常用提取器

    Jmeter关联 所谓关联,从业务角度讲,即:某些操作步骤与其相邻步骤存在一定的依赖关系,导致某个步骤的输入数据来源于上一步的返回数据,这时就需要“关联”来建立步骤之间的联系. 简单来说,就是:将上一 ...

  10. jQuery,遍历表格每个单元格数据。

    <table class="table table-hover table-bordered"> <thead> <tr> <th > ...