Liunx下Mysql,MongoDB性能优化的配置
场景
这几天在赶十一上线的项目,但是突然发现接口性能不好,高并发支持不住。又不想改代码,就在数据库层面进行优化。
Mysql
分区:项目中有对40万条的数据进行时间查询的要求,就算对DateTime建立了索引,也十分耗时。这个时候可以用分区,把一个表按一个字段分为多个区,比如创建时间(DateTime类型)。主要分区语句如下:
partition by range COLUMNS(CreateTime)(
PARTITION 08p1 VALUES LESS THAN ('2009-01-01'),
PARTITION 09p1 VALUES LESS THAN ('2010-04-01'),
PARTITION 09p2 VALUES LESS THAN ('2011-07-01'),
PARTITION 09p3 VALUES LESS THAN ('2012-10-01'),
PARTITION 09p4 VALUES LESS THAN ('2013-01-01'),
PARTITION 10p1 VALUES LESS THAN ('2014-04-01'),
PARTITION 10p2 VALUES LESS THAN ('2015-07-01'),
PARTITION 10p3 VALUES LESS THAN ('2016-10-01'),
PARTITION 10p4 VALUES LESS THAN ('2017-01-01'),
PARTITION 11p1 VALUES LESS THAN ('2018-04-01'),
PARTITION 11p2 VALUES LESS THAN ('2019-07-01'),
PARTITION 22p12 VALUES LESS THAN ('2020-01-01'),
PARTITION p12 VALUES less than MAXVALUE
);
在Create Table的sql语句中添加,这里采用的是RANGE 分区,还有其他类型的分区。注意:
1.之后可以对某一分区进行细分,不会影响数据;用reorganize语句
2.可以合并分区,不会影响数据;
3.一定要有less than MAXVALUE,避免有数据不能分配到分区中。
4.最好把分区的字段设为主键。
最后,MYSQL中40多万的数据查询耗时到100ms以内。
配置文件:主要修改以下参数:
1.innodb_buffer_pool_size。是InnoDB引擎中处理缓存的;
2.innodb_buffer_pool_instances。
MongoDB
异步:最好把代码中所有有关增加,查询等操作的都改为异步,可以减少耗时。
配置文件:主要修改以下参数:
1.wiredTigerCacheSizeGB。单位是GB,用来设置引擎所使用的缓存大小,默认单例下使用内存的一半。
2.maxConns = 2000。最大连接数。
Liunx
主要修改一些系统限制,在/etc/sysctl.conf文件中进行修改,重启生效。
1.vm.swappiness。值越大,表示越积极使用swap分区,越小表示越积极使用物理内存.
2.* soft nofile 65535 和 * hard nofile 65535 ,修改每个进程能打开的最大文件数
Liunx下Mysql,MongoDB性能优化的配置的更多相关文章
- Mysql数据库性能优化(一)
参考 http://www.jb51.net/article/82254.htm 今天,数据库的操作越来越成为整个应用的性能瓶颈了,这点对于Web应用尤其明显.关于数据库的性能,这并不只是DBA才需要 ...
- mysql数据库性能优化(包括SQL,表结构,索引,缓存)
优化目标减少 IO 次数IO永远是数据库最容易瓶颈的地方,这是由数据库的职责所决定的,大部分数据库操作中超过90%的时间都是 IO 操作所占用的,减少 IO 次数是 SQL 优化中需要第一优先考虑,当 ...
- MySQL 数据库性能优化之缓存参数优化
在平时被问及最多的问题就是关于 MySQL 数据库性能优化方面的问题,所以最近打算写一个MySQL数据库性能优化方面的系列文章,希望对初中级 MySQL DBA 以及其他对 MySQL 性能优化感兴趣 ...
- DB-MySQL:MySQL 语句性能优化
ylbtech-DB-MySQL:MySQL 语句性能优化 1.返回顶部 1. MySQL概述1.数据库设计 3范式2.数据库分表分库---会员系统() 水平分割(分页如何查询)MyChar .垂直3 ...
- MySQL“被动”性能优化汇总!
年少不知优化苦,遇坑方知优化难. --村口王大爷 本文内容导图如下: 我之前有很多文章都在讲性能优化的问题,比如下面这些: <switch 的性能提升了 3 倍,我只用了这一招!> < ...
- MySQL数据库性能优化与监控实战(阶段四)
MySQL数据库性能优化与监控实战(阶段四) 作者 刘畅 时间 2020-10-20 目录 1 sys数据库 1 2 系统变量 1 3 性能优化 1 3.1 硬件层 1 3.2 系统层 1 3.3 软 ...
- MySQL查询性能优化七种武器之索引下推
前面已经讲了MySQL的其他查询性能优化方式,没看过可以去了解一下: MySQL查询性能优化七种武器之索引潜水 MySQL查询性能优化七种武器之链路追踪 今天要讲的是MySQL的另一种查询性能优化方式 ...
- 1229【MySQL】性能优化之 Index Condition Pushdown
转自http://blog.itpub.net/22664653/viewspace-1210844/ [MySQL]性能优化之 Index Condition Pushdown2014-07-06 ...
- MySQL 数据库性能优化之索引优化
接着上一篇 MySQL 数据库性能优化之表结构,这是 MySQL数据库性能优化专题 系列的第三篇文章:MySQL 数据库性能优化之索引优化 大家都知道索引对于数据访问的性能有非常关键的作用,都知道索引 ...
随机推荐
- C#中Finalize方法的问题
ninputer在关于"值类型的Finalize不会被调用"中(http://blog.joycode.com/lijianzhong/archive/2005/01/13/429 ...
- python--接口自动化经常用到的pytest框架
pytest常用的方法和原理 1.pytest的原理 pytest插件基于pluggy模块:pluggy有三个重要概念:HookspecMarker(用来定义hook函数),HookimplMarke ...
- linux centos7 移动文件到指定目录
2021-08-26 在 centos7 环境下怎么移动一个文件到其他的目录下呢? 使用命令 mv 文件名 指定目录 即可完成该操作. 那么怎么将一个文件夹下的内容移动到另一个文件夹下呢?比如有时 ...
- 记一次 .NET 某机械臂智能机器人控制系统MRS CPU爆高分析
一:背景 1. 讲故事 这是6月中旬一位朋友加wx求助dump的故事,他的程序 cpu爆高UI卡死,问如何解决,截图如下: 在拿到这个dump后,我发现这是一个关于机械臂的MRS程序,哈哈,在机械臂这 ...
- junit5 yaml和json 数据驱动
使用yaml 数据驱动测试 新建用例数据类,用于动态修改测试数据 对应yaml文件,第一层结构为列表 第二层结构为具体序列化class对象 测试成功 public class TestYaml { @ ...
- Lambda表达式——注重过程的编程思想
一.使用匿名内部类的匿名对象创建线程和Lambda表达式写法 Lambda表达式写法不用去定义一个Runable接口的实现类: 二.方法入参是一个接口或者接口的实现类 三.对某个类的一些对象实例进行排 ...
- Devexpress 饼状图
<dxc:ChartControl Name="chart" BorderThickness="0&q ...
- lua中的随机数
Lua 生成随机数需要用到两个函数:math.randomseed(xx), math.random([n [, m]]) 1. math.randomseed(n) 接收一个整数 n 作为随机序列种 ...
- Java中short和int的转换
例子[1]: 第一种情况: short a = 1; a = a + 1; // 这一步会报错 System.out.print(a); 编译器会报错,原因如下: 第二种情况: short a = 1 ...
- .NET 中的HTTP 3支持
dotnet团队官方博客发布了一篇HTTP3的文章:HTTP/3 support in .NET 6.文章介绍了.NET 6 将预览支持HTTP3,.NET 7正式支持HTTP3,原因主要是HTTP/ ...