mysql性能优化学习笔记-存储引擎
mysql体系架构
- 客户端(java、php、python等)
- mysql服务层(连接管理器、查询解析器、查询优化器、查询缓存)
- mysql存储引擎(innodb、myisam等)
存储引擎针对表而言的,不针对库
mysql存储引擎
mysql存储引擎之MyISAM
5.5前默认的存储引擎、临时表(查询、排序时由查询优化器生成的表)、系统表
- 特性:
- 并发性与锁级别(表级锁),
- 表损坏修复,检查
check table tablename,修复repair table tablename
此外也可以通过myisamchk对表进行修复,但是必须注意的是使用该命令进行修复时需要将mysql服务停止后进行。否则有可能对数据表造成更大的损坏。
- myisam支持全文索引
- myisam表支持数据压缩,可以使用
myisampack命令进行压缩,如:myasimpack -b -f tablename.MYI。对已经压缩后的表不能进行写操作,因此要慎重操作。
- 限制:
- 5.0前,单表文件最大支持4G。如存储大表需要修改MAX_Rows和AVG_ROW_LENGTH;5.0后默认支持256TB
- 使用场景
- 非事务型应用
- 只读类应用
- 空间类应用
mysql存储引擎之Innodb
MySQL5.5及以后版本默认存储引擎
- Innodb使用表空间进行数据存储
由innodb_file_per_table参数的值进行控制,如果为ON,则独立表空间(tablename.ibd)。如果为OFF,则会存储到系统共享表空间ibdataX。
如何选择系统表空间和独立表空间
- 系统表空间无法简单的收缩文件大小
- 独立表空间可以通过optimize table命令收缩系统文件
- 系统表空间会产生IO瓶颈
- 独立表空间可以同时向多个文件刷新数据
建议对Innodb使用独立的表空间。5.6后已经是默认方式。
- 如何将系统表空间转换为独立表空间
- 1、使用mysqldump导出所有表数据
- 2、停止Mysql服务,修改参数,并删除Innodb相关文件。如果是主从架构可以先处理从库再处理主库。
- 3、重启Mysql服务,重建Innodb系统表空间
- 4、重新导入数据
- Innodb存储引擎的特性
Innodb数据字典信息
Innodb的特性
- 事务性存储引擎
- 完全支持事务的ACID特性,
- Redo Log(重做日志,已提交事务,实现事务的持久性)和Undo Log(未提交事务进行回滚)
- Innodb支持行级锁
- 支持更多的写并发
- 行级锁由存储引擎层实现的。
- 什么是锁?
- 管理资源的并发访问
- 实现事务的隔离性
- 锁的类型
- 共享锁(读锁)
- 独占锁(写锁),排他性
- 锁的粒度
行级锁、页级锁、表级锁
- 表级锁
- 行级锁
- 阻塞和死锁
- 什么是阻塞,不同锁之间的兼容性,不同锁之间需要等待锁响应。
- 什么是死锁,两个或两个以上,互相占用资源而互相等待。一般情况下系统会自动处理。
- Innodb状态检查
shown engine innodb status
- 使用场景
- Innodb适用于大多数OLTP应用
mysql存储引擎之CSV
文件存储特点:csv文件作为存储引擎。数据以文件方式存储在文件中。
- 特点
- 以csv格式进行数据存储
- 所有的列定义不能是NULL
- 不支持索引(不适用于大表及在线系统)
- 可以直接对数据文件进行编辑
- 使用场景
- 适用于数据交换的中间表
mysql存储引擎之Archive
- 特点
- 以zlib对表数据进行压缩,磁盘I/O更少
- 存储在ARZ为后缀的文件中
存储特点:
- 只支持insert和select操作,支持行级锁
- 只允许在自增ID列上添加索引
使用场景
- 日志和数据采集类应用
mysql存储引擎之Memory
- 特点
也成为Heap存储引擎,所有数据保存在内存中。一旦mysql重启,则数据会丢失,表结构会保存。
- 功能特点:
- 支持hash索引(等值查询)和btree(范围查询)索引,默认为hash索引
- 所有字段固定长度为char(10)
- 不支持blog和text等大字段
- 使用表级锁,因此性能也不一定会很高。
- 表最大大小由参数max_heap_table_size参数决定
- 容易混淆的概念
- 临时表,系统使用的临时表;create temporary table建立的表。
- 使用场景
- 用于查找或映射表,如邮编和地区的对应表。
- 保存数据的中间表
- 混存周期性聚合数据的结果表
mysql存储引擎之Federated
- 特点
- 提供了远程访问mysql服务器上表的方法
- 本地不存储数据,数据全部存储在远程服务器上
- 本地会保存远程数据库表结构和远程连接的信息
- 如何使用
由于可以通过其他方式替代,因而默认是禁止的。但可以在启动时通过federated参数
mysql://user_name[:password]@host_name[:port]/dbname/tablename
- 使用场景
- 偶尔的统计分析和手工查询
如何选择存储引擎
参考条件
- 事务
- 备份,热备
- 崩溃恢复
- 存储引擎的特性
尽量不要同时混合使用多种存储引擎
mysql性能优化学习笔记-存储引擎的更多相关文章
- mysql性能优化学习笔记
mysql性能优化 硬件对数据库的影响 CPU资源和可用内存大小 服务器硬件对mysql性能的影响 我们的应用是CPU密集型? 我们的应用的并发量如何? 数量比频率更好 64位使用32位的服务器版本 ...
- mysql性能优化学习笔记-参数介绍及优化建议
MySQL服务器参数介绍 mysql参数介绍(客户端中执行),尽量只修改session级别的参数. 全局参数(新连接的session才会生效,原有已经连接的session不生效) set global ...
- mysql性能优化学习笔记(1)优化目的、方向及数据库准备
前言: 最近参加面试,问到了很多关于mysql的优化方面的问题,回答的不是很好,也是因为原先做的项目流量不是很大,所以对mysql优化不是太了解,所以趁着周末,恶补一下. 本文来源于慕课网sqlerc ...
- mysql性能优化学习笔记(4)索引的优化
一.选择合适的索引列 1.在where,group by,order by,on从句中出现的列 2.索引字段越小越好(因为数据库的存储单位是页,一页中能存下的数据越多越好 ) ...
- mysql性能优化学习笔记(2)如何发现有问题的sql
一.使用mysql慢查询日志对有效率问题的sql进行监控 1)开启慢查询 show variables like ‘slow_query_log’;//查看是否开启慢查询日志 ...
- mysql性能优化学习笔记(6)数据库配置优化&硬件优化
一.操作系统配置优化: 1. 网络方面,修改/etc/sysctl.conf文件,增加tcp支持的队列数,减少断开连接时,资源的回收. 2. 打开文件数的限制.修改 ...
- mysql性能优化学习笔记(5)数据库结构优化
一.选择合适的数据类型 1.使用可存下数据的最小的数据类型 2.使用简单地数据类型,Int<varchar 3.尽可能使用not null定义字段 4.尽量少用text, ...
- mysql性能优化学习笔记(3)常见sql语句优化
一.max()优化mysql> explain select max(payment_date) from payment;+----+-------------+---------+----- ...
- MySql(十一):MySQL性能调优——常用存储引擎优化
一.前言 MySQL 提供的非常丰富的存储引擎种类供大家选择,有多种选择固然是好事,但是需要我们理解掌握的知识也会增加很多.本章将介绍最为常用的两种存储引擎进行针对性的优化建议. 二.MyISAM存储 ...
随机推荐
- “Transaction rolled back because it has been marked as rollback-only”
spring的声明事务提供了强大功能,让我们把业务关注和非业务关注的东西又分离开了.好东西的使用,总是需要有代价的.使用声明事务的时候,一 个不小心经常会碰到“Transaction rolled b ...
- html5 canvas(小树姐的牛掰到爆了的作品)
自从小树嫁了个牛逼的前端之后,canvas的境界超过我了!!! 小树demo 小编表示:这个境界,这个几何,让我有种跪舔的感觉... http://www.wow-trend.com/brand/in ...
- 黑客攻防技术宝典Web实战篇(一)Web应用程序技术基础
在开展Web应用程序渗透测试之前请先了解下面列出的这些内容,如果不是很懂的话,请读David Gourley & Brian Totty的HTTP权威指南也叫HTTP:The Definiti ...
- jQuery属性选择器.attr()和.prop()两种方法
在判断表单单选框是否被选中时,通常会想到使用$('#checkbox').attr('checked')来判断,但在一些情况下,你会发现这种方法并不管用,得到的是undefined. 原来jQuery ...
- AngularJS API之toJson 对象转为JSON
toJson()能把对象序列化为json 方法讲解 这个方法最多支持2个参数: angular.toJson(obj, pretty); obj 是想要转换的对象, pretty 可以调节格式化的样式 ...
- UESTC 1852 Traveling Cellsperson
找规律水题... Traveling Cellsperson Time Limit: 1000ms Memory Limit: 65535KB This problem will be judged ...
- Swift2.1 语法指南——类型转换
原档:https://developer.apple.com/library/prerelease/ios/documentation/Swift/Conceptual/Swift_Programmi ...
- JAVA 如何使JScrollPane中的JTextArea自动滚动到最后一行?
1.要使JTextArea带有滚动条,需将JTextArea对象添加到JScrollPane中. JTextArea logArea = new JTextArea(15, 35); //创建JTex ...
- Java VisualVM使用:堆OOM
背景 近期遇到了一个java.lang.OutOfMemoryError: Java heap space的问题,排除了堆设置过小的问题,代码走查没有头绪,所以使用VisualVM工具分析堆内存情况. ...
- C#GDI+编程基础(二)
pen类:绘制指定宽度和样式的直线.使用DashStyle属性绘制几种虚线,可以使用各种填充样式(包括纯色和纹理)来填充Pen绘制的直线,填充模式取决于画笔或用作填充对象的纹理. 创建画笔: //用指 ...