Mysql高性能笔记(一):Schema与数据类型优化
1、数据类型
1.1、几个参考优化原则
a、 更小的通常更好
i、更小的数据类型,占用更少磁盘、内存和CPU缓存,需要的CPU周期更少
ii、如果无法确定哪个数据类型是最好的,就选择不会超过范围的最小类型
b、 简单就好
i、简单数据类型的操作仅需少量的CPU周期,EX:整形比字符操作代价更低
c、 尽量避免null
i、null将使索引、索引统计和值比较更复杂。
ii、可null的列需要更多空间
iii、在MyISAM引擎里甚至还可能导致固定大小的索引变成可变大小的索引
1.2、整数类型
a、 unsigned 修饰的整数类型,不允许负值,使正数上限提高一倍,跟非unsigned修饰的整型所需空间一样。
b、 对于存储和计算来说,int(1)和int(20)是相同的,不会限制值的合法范围。
1.3、实数类型
a、 decimal类型,在5.0以上版本支持精确计算,早期版本因使用浮点计算实现,因此不支持精确计算
b、 CPU不支持decimal的直接计算,但支持原生浮点计算,所以5.0以后版本decimal效率没浮点计算速度快
c、 decimal在5.0版本中支持最多65个数字,早期版本则254个数字
d、 float和double支持标准的浮点运算进行近似计算,所需空间比decimal少
e、 Double是mysql内部浮点计算的类型
1.4、字符串类型
a、 各个存储引擎存储char或varchar的方式可能不同。
b、 varchar
i、如果mysql建表时使用ROW_FORMAT=FIXED创建的话,varchar会使用定长存储
ii、varchar需要1-2个额外字节记录长度,阀值为255字节
iii、varchar节省了存储空间,但使update效率降低
c、char
i、存储char时,mysql会删除所有末尾空格
ii、char类型适合update
iii、char适合短字符串或值长度相近
iv、长度不同,char会使用空格填充后进行比较
d、binary和varbinary
i、类似char和varchar,用于存储二进制字节码
ii、填充binary使用\0
iii、binary效率比char高
e、BLOB和TEXT
i、当BLOB和TEXT值太大时,InnoDB会使用外部存储区域
ii、BLOB存储二进制数据,没有排序规则或字符集
iii、TEXT有字符集和排序规则
iv、mysql只对BLOB和TEXT的最前max_sort_length字节排序而不是整个做排序
v、可设置max_sort_length配置,或使用order by substring()
vi、mysql不支持blob和TEXT全部字符串索引,也不能使用索引消除排序
vii、Memory引擎还没完美支持Blob和TEXT
f、 枚举(ENUM)类型
i、Mysq在存储枚举时非常紧凑,减少存储空间
ii、ENUM常量建议使用数字
iii、保存形式为 数字-字符串 映射形式
iv、枚举ENUM默认排序按照内部的数字排序,不是常量值排序
v、可使用field()函数显式指定排序,但会导致无法利用索引消除排序
vi、修改常量必须使用alter table,仅在末尾添加元素时,再5.1以上版本中可以部重建整个表
vii、关联查询效率ENUM&ENUM > VARCHAR&VARCHAR > ENUM&VARCHAR
1.5、日期和时间类型
a、 Mysql支持的最小时间粒度为秒
b、 MariaDB(mysql的派生数据库)支持微秒级别
c、 Datetime方位1001年至9999年,精度为秒,封装格式为yyyymmddhhmmss的整数,与时区无关,8字节
d、 ANSI标准定义的日期和时间表示法:yyyy-MM-DD HH:mm:ss
e、 Timestamp
i、范围从1907-01-01以来的秒数,同UNIX时间戳相同,4个字节
ii、范围1907年至2038年
iii、from_unixtime()函数转时间戳为日期,unix_timestamp()函数日期转为时间戳
iv、timestamp显示依赖时区
v、效率比Datetime高很多
1.6、 位数据类型
a、 bit
i、在5.0之前,bit和tinyint是同义词,在5.0之后是完全不同的类型
ii、bit可指定单个位数,最大长度64位
iii、bit存储方式因存储引擎而异,MyISAM会压缩bit,Memory和InnoDB则不会
iv、Mysql把bit当做字符串类型,不是数字类型。
v、直接检索bit字段和再上下文为数字场景中检索的结果不同,慎用
b、 set
i、适合存储多个Boolean值
ii、在Mysql内部以一系列打包的位集合表示,有效利用空间
iii、改变列定义代价高且无法索引查找
iv、FIND_IN_SET()、FIELD()查询
1.7、 选择主键类型的参考建议
a、 整数通常是最好的选择
b、 enum和set不建议作为主键类型,其适合存储固定信息
c、 尽量避免字符串类型作为主键类型,尤其是在MyISAM引擎中,默认对字符串使用压缩引擎,会导致查询变慢很多
d、 完全随机的字符串会导致性能更慢,比如,UUID,SHA1,MD5等
e、 如果存储UUID值,应移除 "-" 符号,或者用UNHEX函数转为16字节数字存储在BINARY(16)列中。检索时用HEX()转为16进制格式
2、schema设计中的陷阱
2.1、太多的列
服务器层和存储引擎层的数据拷贝成本提高。不同引擎之间数据转换代价提高。
2.2、太多关联
Mysql限制了每个关联操作最多61张表。单个查询关联最好控制在12个表以内。
2.3、Null of not Invet here
3、范式和反范式
Mysql高性能笔记(一):Schema与数据类型优化的更多相关文章
- 高性能mysql 第4章 Schema与数据类型优化
基本原则: 更小的通常更好:占用更少的磁盘 内存和cpu缓存.如varchar(2)和varchar(100). 简单就好:比如整形比字符型代价更低.使用日期型来存储日期而不是字符串.使用整形存储ip ...
- mysql笔记01 MySQL架构与历史、Schema与数据类型优化
MySQL架构与历史 1. MySQL架构推荐参考:http://www.cnblogs.com/baochuan/archive/2012/03/15/2397536.html 2. MySQL会解 ...
- MySQL Schema与数据类型优化
Schema与数据类型优化 选择优化的数据类型 1.更小的通常更好 更小的数据类型通常更快,因为它们占用更少的磁盘,内存和CPU缓存 2.简单就好 简单数据类型的操作通常需要更少的CPU周期.例如:整 ...
- Schema 与数据类型优化
这是<高性能 MySQL(第三版)>第四章<Schema 与数据类型优化>的读书笔记. 1. 选择优化的数据类型 数据类型的选择原则: 越小越好:选择满足需求的最小类型.注意, ...
- Mysql学习笔记(二)数据类型 补充
原文:Mysql学习笔记(二)数据类型 补充 PS:简单的补充一下数据类型里的String类型以及列类型... 学习内容: 1.String类型 2.列类型存储需求 String类型: i.char与 ...
- MYSQL基础笔记(六)- 数据类型一
数据类型(列类型) 所谓数据烈性,就是对数据进行统一的分类.从系统角度出发时为了能够使用统一的方式进行管理,更好的利用有限的空间. SQL中讲数据类型分成三大类:1.数值类型,2.字符串类型和时间日期 ...
- Mysql学习笔记(一)数据类型
原文:Mysql学习笔记(一)数据类型 学习内容: Mysql基本数据类型. 1.数字类型.. i.整型 Mysql数据类型 含义(有符号) tinyint(m ...
- schema与数据类型优化-高性能mysql
总结作为开发人员重点注意的内容!这是一篇有关高性能MYSQL第四章schema相关的笔记. 0.前言 在项目中,数据库表列有两个text字段,用来存储大文本,在数据规模达到40万后,如果查询没命中索引 ...
- MySQL之Schema与数据类型优化
选择优化的数据类型 MySQL支持的数据类型非常多,选择正确的数据类型对于获得高性能至关重要.不管存储哪种类型的数据,下面几个简单的原则都有助于做出更好的选择: 更小的通常更好一般情况下,应该尽量使用 ...
- 深入学习MySQL 03 Schema与数据类型优化
Schema是什么鬼 schema就是数据库对象的集合,这个集合包含了各种对象如:表.视图.存储过程.索引等.为了区分不同的集合,就需要给不同的集合起不同的名字,默认情况下一个用户对应一个集合,用户的 ...
随机推荐
- java反序列化漏洞实战
准备: 域名一个,用于增加NS解析,判断是否存在反序列化漏洞. 公网IP服务器一台,用于搭建DNS代理,抓包判断. dnschef,DNS代理 ysoserial.jar生成payload. 简单的p ...
- C#零基础入门-2-Visual Studio (VS)程序初始化及各组成部分
X:\Program Files (x86)\Microsoft Visual Studio 14.0\Common7\IDE\devenv.exe 可以使用桌面快捷方式启动,也可以从开始菜单启动,还 ...
- 项目案例【Net Core】如何注入多个服务实现类
需求 库表保存时,需要校验逻辑. 提交时有更深层次校验. **状态,还有特殊校验 接口 写一个通用的校验接口,这里定义了校验时间.每个阶段校验可能需要考虑顺序,增加一个顺序字段. public int ...
- IKAnalyzer结合Lucene实现中文分词
1.基本介绍 随着分词在信息检索领域应用的越来越广泛,分词这门技术对大家并不陌生.对于英文分词处理相对简单,经过拆分单词.排斥停止词.提取词干的过程基本就能实现英文分词,单对于中文分词而言,由于语义的 ...
- SQL Server系统视图sys.master_files不能正确显示数据库脱机状态
最近发现在SQL Server数据库(目前测试过SQL Server 2008, 2012,2014,2016各个版本)中,即使数据库处于脱机(OFFLINE)状态,但是sys.master_file ...
- JavaScript调试总结
一.vs调试 1.设置断点 2.设置浏览模式:一定要设置IE浏览器 3.设置起始页 4.运行 二.谷歌浏览器调试 1.运行项目,进入后F12,找到Sources
- VS2017内存占用高
我的环境和硬件参数 说明:本篇所提到的方法在我的机器上经过设置是能明显改善卡顿的,但可能你的VS卡顿的原因不一定是本文所提到的,可以通过排除法找到问题所在. 我的环境和硬件参数: vs 2017 pr ...
- win10下Resin安装--入门(1)
我个人采用是解压版的,直接解压亦可使用下载地址 开启该服务需要的环境:首先你的JDK必须安装成功 解压后你会看到 当我们运行程序时,需要修改配置文件中的相关配置: 1.端口:以免端口被占用 2.相应 ...
- 为什么作为下游的WSUS更新服务器总有一直处于下载状态的文件
/* Style Definitions */ table.MsoNormalTable {mso-style-name:普通表格; mso-tstyle-rowband-size:0; mso-ts ...
- Java基础系列--08_集合1
---恢复内容开始--- 集合当中有很多都是应用到泛型的技术,所以在讲集合之前,应该先将泛型的概念普及一下. 泛型: (1)泛型是一种类型,但是这种类型是在编译或者调用方法时才确定. (2 ...