Mysql 数据库优化(一)
一 避免网页访问错误
1 数据库连接timeout产生页面5xx错误
2 慢查询造成页面无法加载
3 阻塞造成数据无法提交
二 增加数据库的稳定性
三 优化用户体验
1 流畅的页面访问速度
2 良好的网站功能体验
几个优化方面
硬件-系统配置-数据库表结构-SQL及索引
1 成本: 高 > 底
2 效果: 底 > 高
优化方面
一 SQL 语句优化
1 SQL及索引优化
如何发现有问题的SQL?
使用MySQL慢查询日志对有效率问题的SQL进行监控
下面语句可以开启满查询日志:
show variables like 'slow_query_log' 查看这个是否开启慢查询日志
set global slow_query_log_file='/home/mysql/sql_log/mysql-slow.log'慢查询日志存储的文件位置在哪里
set global log_queries_not_using_indexs=on 指定是否要把没有使用索引的sql,记录到慢查询的日志中
set global long_query_time =1 指定一个时间,超过这个时间如1s之后,查询记录到查询日志中
慢查询日志包含的内容
1 执行SQL的主机内容
2 SQL执行的信息
3 SQL执行的时间
4 SQL执行的内容
MySQL 慢查询日志
工具一
pt-query-digest
如何分析SQL语句
使用explain查询SQL的执行计划 如 explain select username from user;
Count() 和Max()优化
....
SQL及索引优化
如何选择合适的列建立索引?
1. 在where从句,group by 从句,order by 从句,on 从句中出现的列
2.索引字段越小越好
3 离散度大的列放到联合索引的前面
索引的维护及优化 --- 重复及冗余索引
索引的维护及优化 --- 重复及冗余索引
冗余索引是指多个索引的前缀列相同,或是在联合索引中包含了主键的索引,下面这个例子中key(name,id)
就是一个冗余索引。
索引的维护及优化 --- 查找重复及冗余索引
使用 pt-duplicate-key-checker 工具检查重复及冗余索引
索引的维护及优化 --- 删除不用索引
数据库结构优化
选择合适的数据类型
数据类型的选择,充电在于 合适二字,如何确定选择的数据类型是否合适?
1.使用可以存下你的数据的最小的数据类型。
2.使用简单的数据类型。Int要比varchar类型在MySQL处理上简单。
3.尽可能的使用 not null 定义字段。
4. 尽量少用text类型,非用不可时最好考虑分表。
选择合适的数据类型
使用int来存储日期时间,利用 FROM_UNIXTIME(),UNIX_TIMESTAMP()两个函数来进行转换
选择合适的数据类型
使用bigint来Ip 地址
表的范式化和反范式化
范式化是指数据库设计的规范,目前说到范式化一般是指第三设计范式,也就是要求数据表中不存在非关键字
段对任意候选关键字段的传递函数依赖则符合第三范式
表的范式化和反范式化
不符合第三范式要求的表存在下列问题:
1. 数据冗余:(分类,分类描述)对于每一个商品都会进行记录,
2.数据的插入异常
3.数据的更新异常
4.数据的删除异常
表的范式化和反范式化
反范式化是指为了查询效率的考虑把原本符合第三范式的表适当的增加冗余,已达到查询效率的目的,反
范式化是一种以空间来换时间的操作。
表的垂直拆分
所谓的垂直拆分,就是把原来一个有很多列的表拆分成多个表,这解决了表的宽度问题。通常
垂直拆分可以按一下原则进行:
1.把不常用的字段单独存放到一个表中。
2.把大字段独立存放到一个表中。
3.把经常一起使用的字段放到一起。
表的水平拆分
表的水平拆要是为了解决单表的数据量过大的问题,水平拆分的表每一个表的结构都是完全一致大的,
表的水平拆分
常用的水平拆分方法为:
1.对customer_id 进行hash运算,如果要拆分成5个表则使用mod(customer_id,5)取出0-4个值
2.针对不同的hashID把数据存到不同的表中。
Mysql 数据库优化(一)的更多相关文章
- 关于MySQL数据库优化的部分整理
在之前我写过一篇关于这个方面的文章 <[原创]为什么使用数据索引能提高效率?(本文针对mysql进行概述)(更新)> 这次,主要侧重点讲下两种常用存储引擎. 我们一般从两个方面进行MySQ ...
- 【MySQL】花10分钟阅读下MySQL数据库优化总结
1.花10分钟阅读下MySQL数据库优化总结http://www.kuqin.com2.扩展阅读:数据库三范式http://www.cnblogs.com3.my.ini--->C:\Progr ...
- 30多条mysql数据库优化方法,千万级数据库记录查询轻松解决(转载)
1.对查询进行优化,应尽量避免全表扫描,首先应考虑在 where 及 order by 涉及的列上建立索引. 2.应尽量避免在 where 子句中对字段进行 null 值判断,否则将导致引擎放弃使用索 ...
- 50多条mysql数据库优化建议
1.对查询进行优化,应尽量避免全表扫描,首先应考虑在 where 及 order by 涉及的列上建立索引. 缺省情况下建立的索引是非群集索引,但有时它并不是最佳的.在非群集索引下,数据在物理上随机存 ...
- 解开发者之痛:中国移动MySQL数据库优化最佳实践(转)
开源数据库MySQL比较容易碰到性能瓶颈,为此经常需要对MySQL数据库进行优化,而MySQL数据库优化需要运维DBA与相关开发共同参与,其中MySQL参数及服务器配置优化主要由运维DBA完成,开发则 ...
- 30多条mysql数据库优化方法【转】
1.对查询进行优化,应尽量避免全表扫描,首先应考虑在 where 及 order by 涉及的列上建立索引. 2.应尽量避免在 where 子句中对字段进行 null 值判断,否则将导致引擎放弃使用索 ...
- 百万行mysql数据库优化和10G大文件上传方案
百万行mysql数据库优化和10G大文件上传方案 最近这几天正在忙这个优化的方案,一直没时间耍,忙碌了一段时间终于还是拿下了这个项目?项目中不要每次都把程序上的问题,让mysql数据库来承担,它只是个 ...
- 从运维角度来分析mysql数据库优化的一些关键点【转】
概述 一个成熟的数据库架构并不是一开始设计就具备高可用.高伸缩等特性的,它是随着用户量的增加,基础架构才逐渐完善. 1.数据库表设计 项目立项后,开发部根据产品部需求开发项目,开发工程师工作其中一部分 ...
- 关于mysql数据库优化
关于mysql数据库优化 以我之愚见,数据库的优化在于优化存储和查询速度 目前主要的优化我认为是优化查询速度,查询速度快了,提高了用户的体验 我认为优化主要从两方面进行考虑, 优化数据库对象, 优化s ...
- mysql数据库优化 pt-query-digest使用
mysql数据库优化 pt-query-digest使用 一.pt-query-digest工具简介 pt-query-digest是用于分析 mysql慢查询的一个工具,它可以分析binlog.Ge ...
随机推荐
- 前端(jQuery)(2)-- JQuery选择器和事件
1.选择器 <!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF ...
- 从0开始学习 GitHub 系列之「02.加入 GitHub」
转载地址: http://blog.csdn.net/googdev/article/details/52787586 看完昨天的文章「从0开始学习 GitHub 系列之「初识 GitHub」」估计不 ...
- 书写更加高效的CSS,走出误区
根据一些CSS写作经验,如何提高渲染效率及所占用消耗的资源,我们来浅谈一下CSS的渲染效率,书写高效的CSS. 1.十六进制的颜色值对位数与大小写 编写十六进制颜色值时你可能会用小写字母或省略成3位数 ...
- 注解2 --- 自定义 Annotation --- 技术搬运工(尚硅谷)
定义新的 Annotation 类型使用 @interface 关键字 自定义注解自动继承了java.lang.annotation.Annotation接口 Annotation 的成员变量在 An ...
- docker.[5] 网络配置-1
docker[5] 网络配置-1 执行 ifconfig 可以看到有一个 docker01 ,这个其实就是容器的虚拟网桥,在执行指令:brctl show(如果该指令不能执行,请先安装: yum -y ...
- transform的兼容性写法
大多数浏览器都有自己的私有前缀,IE的私有前缀是 -ms- 但是大多数CSS3属性对IE低版本就不友好了,所以一般IE9+才能用上transform:rotate(7deg); -ms-transfo ...
- [PHPCMS V9二次开发]自定义字段模型-添加字段类型
步骤/方法 打开phpcms\modules\content\fields目录,复制文件夹downfiles,并改名为textgroups. 打开phpcms\modules\content\fiel ...
- CSS3圆环旋转效果
html结构: <div class="demo"></div> css结构: .demo{ width:250px; height:250px; bord ...
- ELK背景介绍1
一.elasticsearch背景介绍 1.问题引入:搜索所有天安门相关的内容,大数据量的判断,加索引orm,歌词怎么做?等等问题,大公司上亿条数据怎样开发处理日志? 2.ELK框架,目前先学习E(e ...
- poj2195&&hdu1533 最小费用流
这题也可以用km做,我写的代码km比费用流快很多. 最小费用流: #include<stdio.h> #include<string.h> #include<math.h ...