MONGODB数据架构





升级解决.计划



发现问题 



应用server用户数的突然涌入,创建server反应慢 





检查server,我发现,每次反应非常慢,至30ops 





检查过程 





.发现数据库查询缓慢 

.检查索引 

.检查内存占.用量 

.检查TCP连接









对照測试1 





.硬件配置: 

.client: 

.阿.里云,2cpu,2g内存。windows2008 

.服务端: 

.阿.里云,router:4cpu,4g内存。centos6.5 64位 

.阿.里云。mongod:2cpu,8g内存,centos6.5 64位 

.1.对router进.行測试。每秒200qps。

.2.对mongod进.行測试,每秒500qps。 

.小结:使.用sharding架构,查询会.比直接对单台mongo查询慢。









对照測试2 





.硬件配置: 

.client: 

.阿.里云,2cpu,2.5g内存,windows2008 

.阿.里云,2cpu。2.0g内存,windows2008 

.服务端: 

.阿.里云。mongod:2cpu。2.5g内存,windows2008 

.1.在本地2cpu,2.5g内存。windows2008进.行測试。查询速度达到3000qps,甚至有时候能突破5000qps。 

.2.在2cpu,2.0g内存,windows2008对mongod进.行測试,查询速度500qps。 

.小结:tcp对..网络有非常.大的影响。

对照測试3 





.硬件配置: 

.client: 

.物理机,2cpu,4.0g内存,windows2008 

.服务端: 

.物理机,mongod:2cpu,4.0g内存,centos6.5 64位 

.物理机,router:2cpu。4.0g内存。centos6.5 64位 

.1.对mongod进.行測试。查询速度1000qps。

.2.对router进.行測试。查询速度500qps。 

.小结:阿.里云存在.一定的限制。使得速度有上限。









对照測试4 





.硬件配置: 

.client: 

. ucloud,2cpu。4.0g内存,windows2008 

.服务端: 

. ucloud,mongod:2cpu,4.0g内存。centos6.5 64位 

. ucloud,router:2cpu。4.0g内存,centos6.5 64位 

.1.对mongod进.行測试,查询速度2000qps。 

.2.对router进.行測试,查询速度1000qps。 

.小结:ucloud.比阿.里云的机器性能好。









对照測试5 





.硬件配置: 

.client: 

. ucloud,16cpu,64.0g内存,windows2008 

.服务端: 

. ucloud,mongod:16cpu,64.0g内存,centos6.5 64位 

. ucloud。router:16cpu,64.0g内存,centos6.5 64位 

.1.对mongod进.行測试,查询速度13000qps。

.2.对router进.行測试,查询速度10000qps。 

.小结:至此最终找到问题根结,clientcpu核数决定mongodb查询速度。









结论 





1.阿.里云的云主机有做某些限制,导致.不管怎样设定系统。数据库的配置,都.无法突破.一个数量级的qps。

2.clientcpu核数决定mongodb查询速度。 

3.tcp的限制通过.走内..网能够避免。 

4.linux操作系统胜过windows。

因此mongodb架构在linux上.比架构在windows上更好。





最新架构









最新架构









极限性能測试 





.以上.面最新架构进.行測试: 

.打开4个iisclient,同一时候对router进.行查询。 

router能够达到每秒20000次查询。

换成业务对照。即每秒能够应付2000个人。









性能结论 





.为了保证线上业务的正常运.行,数据库所在的server须要8cpu,16g内存。 

.为了保证备份的完整性。因此正确slave数据库备份,正确router备用。备份保留30天。

版权声明:本文博客原创文章,博客,未经同意,不得转载。

MongoDB---性能优化---(1)的更多相关文章

  1. MongoDB 性能优化五个简单步骤

    MongoDB 一直是最流行的 NoSQL,而根据 DB-Engines Ranking 最新的排行,时下 MongoDB 已经击败 PostgreSQL 跃居数据库总排行的第四位,仅次于 Oracl ...

  2. mongodb可以通过profile来监控数据 (mongodb性能优化)

    mongodb可以通过profile来监控数据 (mongodb性能优化)   开启 Profiling  功能 ,对慢查询进行优化: mongodb可以通过profile来监控数据,进行优化. 查看 ...

  3. MongoDB性能优化

    一.索引 MongoDB 提供了多样性的索引支持,索引信息被保存在system.indexes 中,且默认总是为_id创建索引,它的索引使用基本和MySQL 等关系型数据库一样.其实可以这样说说,索引 ...

  4. MongoDB性能优化指南

    一.索引 MongoDB 提供了多样性的索引支持,索引信息被保存在system.indexes 中,且默认总是为_id创建索引,它的索引使用基本和MySQL 等关系型数据库一样.其实可以这样说说,索引 ...

  5. 开发高性能的MongoDB应用—浅谈MongoDB性能优化(转)

    出处:http://www.cnblogs.com/mokafamily/p/4102829.html 性能与用户量 “如何能让软件拥有更高的性能?”,我想这是一个大部分开发者都思考过的问题.性能往往 ...

  6. 开发高性能的MongoDB应用—浅谈MongoDB性能优化

    关联文章索引: 大数据时代的数据存储,非关系型数据库MongoDB 性能与用户量 “如何能让软件拥有更高的性能?”,我想这是一个大部分开发者都思考过的问题.性能往往决定了一个软件的质量,如果你开发的是 ...

  7. 【MongoDB】MongoDB 性能优化 - BI查询聚合

    在BI服务中通过查询聚合语句分析定位慢查询/聚合分析,小结如下: 慢查询定位: 通过Profile分析慢查询 对于查询优化: 通过添加相应索引提升查询速度: 对于聚合大数据方案: 首先要说明的一个问题 ...

  8. Liunx下Mysql,MongoDB性能优化的配置

    场景 这几天在赶十一上线的项目,但是突然发现接口性能不好,高并发支持不住.又不想改代码,就在数据库层面进行优化. Mysql 分区:项目中有对40万条的数据进行时间查询的要求,就算对DateTime建 ...

  9. MongoDB 性能优化

    Read Preferences/读写分离 有时候为了考虑应用程序的性能或响应性,为了提高读取操作的吞吐率,一个常见的措施就是进行读写分离,MongoDB副本集对读写分离的支持是通过Read Pref ...

  10. MongoDB实战性能优化

    1. 性能优化分类 mongodb性能优化分为软件层面和操作系统层面. 软件层面,一般通过修改mongodb软件配置参数来达到,这个需要非常熟悉mongodb里面的各种配置参数: 而操作系统层面,相对 ...

随机推荐

  1. 51cto培训课程

    课程: 云计算: OpenStack | 虚拟化 | 云平台 | Office 365 | 云服务 | Docker | 其他 大数据: Spark | Hadoop | Storm | Hive | ...

  2. Linux多线程编程(一)---多线程基本编程

    线程概念 线程是指运行中的程序的调度单位.一个线程指的是进程中一个单一顺序的控制流,也被称为轻量级线程.它是系统独立调度和分配的基本单位.同一进程中的多个线程将共享该系统中的全部系统资源,比如文件描述 ...

  3. android面试题之一

    在接下来的一段时间,我将收集一些常见面试题,综合网上资料加自己测试与理解,将其总结出来和大家分享,里面难免有一些问题,希望大家提出宝贵意见以便及时更正. 一.Activity.Service.Broa ...

  4. window下如何搭建linux环境

    1.使用虚拟机 使用VMware虚拟机,下载linux内核系统,加载运行. 2.cygwin 安装cygwin,设置环境变量. 第二种方法还是比较简便的.优先考虑.

  5. 树莓派安装mysql

    首先我想启用root用户,所以我先启用root用户: sudo passwd root 这里会提示输入两次密码,然后: sudo passwd --unlock root 这样就可以启动root登录, ...

  6. Struts1的处理流程

    本文从收到一个请求开始讲述,忽略之前的filter等工作. 处理工作的主要承担者为RequestProcessor 1.处理请求的url. RequestProcessor.processPath(r ...

  7. HDU 1004 MAP【STL__map_的应用】

    强大的MAP,今天终于开始好好学习一次. map内部是用红黑树维持的有序结构. 定义:map<int,string>mapStudent; 查找的时间复杂度为对数级别. 1.构造方法学习两 ...

  8. django笔记(二)

    Model many-to-many可以通过through来定义详细信息. 表结构: property django可以用F和Q来配合查找,F可以用于同一个model不同field之间进行比较,可以对 ...

  9. 基于visual Studio2013解决C语言竞赛题之0416完数

       题目 解决代码及点评 完数的解决方案依旧是遍历,然后写出判断完数的函数进行处理 /************************************************** ...

  10. 保护DNS服务器3大方法

    保护DNS服务器3大方法       DNS全称DomainNameSystem域名解析系统,通俗地说,DNS就是帮助用户在Internet上寻找名称与IP对应的解析服务.为了更方便使用网络资源,DN ...