15.3、mysql之InnoDB和MyISAM表空间详解
15.3.1、InnoDB引擎表空间:
1、表空间分类:
共享表空间: 某一个数据库的所有的表数据,索引文件全部放在一个文件中,默认这个共享表空间的文件路径在
data目录下。 默认的文件名为:ibdata1 初始化为10M。
独占表空间: 每一个表都将会生成以独立的文件方式来进行存储,每一个表都有一个.frm表描述文件,还有一个.ibd文件。
其中这个文件包括了单独一个表的数据内容以及索引内容,默认情况下它的存储位置也是在表的位置之中。
2、共享表空间的优缺点:
(1)优点:
可以将表空间分成多个文件存放到各个磁盘上,数据和文件放在一起方便管理。
(2)缺点:
所有的数据和索引存放到一个文件中意味着将有一个很常大的文件,虽然可以把一个大文件分成多个小文件,但是
多个表及索引在表空间中混合存储,这样对于一个表做了大量删除操作后表空间中将会有大量的空隙,特别是对于
统计分析,日值系统这类应用最不适合用共享表空间。
3、独立表空间的优缺点:
(1)优点:
1)每个表都有自已独立的表空间。
2)每个表的数据和索引都会存在自己的表空间中。
3)可以实现单表在不同的数据库中移动。
4)空间可以回收:
Drop table操作自动回收表空间,如果对于统计分析或是日值表,删除大量数据后可以通过:alter table TableName engine=innodb;回缩不用的空间。
对于使innodb-plugin的Innodb使用turncate table也会使空间收缩。
对于使用独立表空间的表,不管怎么删除,表空间的碎片不会太严重的影响性能,而且还有机会处理。
(2)缺点:
单表增加过大,如超过100个G;
4、共享表空间存放什么东西:
当你启用了innodb_file_per_table,表被存储在他们自己的表空间里,但是共享表空间仍然在存储其它的 InnoDB 内部数据;
(1)数据字典,也就是 InnoDB 表的元数据;
(2)change缓冲区;
(3)双写缓冲区;
(4)回滚段;
(5)undo空间;
(6)外键约束系统表;
因此,我们在初始化ibdata1时,最好设置大一些,这样就可以避免因为在高并发情景下导致ibdata1急剧增大,大大影响性能。
5、什么原因引起ibdata1大小迅速增加:
当设置innodb_file_per_table=1启用独立表空间后,ibdata1变很大;
(1)原因:
1)出现Bug;
2)清除事务的速度跟不上,主要是磁盘IO;
3)大事务undo,即使kill了,空间也不能回收;
(2)如何快速解决:
1)并发innodb_thread_concurrency线程够不;
2)磁盘IO;
3)不要用32位系统;
4)尽量减少大事务执行,将大事务进行分拆多个小事务执行;
5)常见的原因都是有大活动事务执行很久没有完成或是存在回滚空间中的未清除事务数,可以
在show engine innodb status\G;的TRANSACTIONS部分查看正在执行的活动事务或History list length值来确认原因。
6、如何给共享表空间扩容:
(1)情形一:
在同一磁盘中给共享表空间的ibdata1扩容操作;
#innodb_data_home_dir = /data/3306/data
#InnoDB共享表空间的位置,默认是data目录;
innodb_data_file_path = ibdata1:1000M:autoextend
#设置innodb共享表空间的初始值大小;
1)扩容有两个注意的地方:
使用ls -lh /data/3306/data/ibdata1 命令查看共享表空间的实际大小;
-rw-rw---- 1 mysql mysql 1.0G 2月 28 22:03 ibdata1
若ibdata1的实际大小没有超过1000M,那么扩容的配置文件中直接写1000M;
若ibdata1的实际大小超过了1000M,则扩容的配置文件中写实际的精确大小值,如上面这个场景的操作:
innodb_data_file_path = ibdata1:1024M;ibdata2:1000M:autoextend
重启mysql后,检查新增的ibdata2是否生效;
(2)情形二:
在不同磁盘中给共享表空间的ibdata1扩容操作;
根据情形一中扩容的两点注意,更改my.cnf配置,在不同磁盘中增加一个ibdata3,如下:
innodb_data_file_path=ibdata1:1704M;ibdata2:1000M;/dbdata/ibdata3:100M:autoextend
提示:挂载的磁盘目录权限必须是改为chown -R mysql.mysql /dbdata/
7、innodb单表的大小:
(1)共享表空间存储方式:
Innodb的所有数据保存在一个单独的表空间里面,而这个表空间可以由很多个文件组成,一个表
可以跨多个文件存在,所以其大小限制不再是文件系统大小的限制,而是mysql软件的限制。
从Innodb的官方文档中可以看到,其表空间的最大限制为64TB,也就是说,Innodb的单表限制基本上也在
64TB左右了,当然这个大小是包括这个表的所有索引等其他相关数据。
(2)独享表空间存储方式:
每个表的数据以一个单独的文件来存放,这个时候的单表限制,又变成文件系统的大小限制了。
15.3.2、MyISAM表空间:
1、存储方式:
MyISAM:每个MyISAM在磁盘上存储成三个文件。第一个文件的名字以表的名字开始,扩展名指出文件类型。
.frm文件存储表定义。数据文件的扩展名为.MYD (MYData)。索引文件的扩展名是.MYI (MYIndex)。
2、myasim单表大小:
MySQL 3.23起,MySQL 的存储引擎是 MyISAM,单表最大限为 64PB。
15.3.3、文件系统和磁盘的关系:
文件系统 |
平台 |
单个文件大小支持 |
支持的最大磁盘 |
ext3 |
linux |
16TB |
32TB |
ext4 |
linux |
16TB |
1EB |
xfs |
linux |
9EB |
18EB |
ntfs |
windows |
无限制 |
无限制 |
15.3、mysql之InnoDB和MyISAM表空间详解的更多相关文章
- Oracle表空间详解
Oracle表空间详解 1.表空间的分类 Oracle数据库把表空间分为两类:系统表空间和非系统表空间. 1.1系统表空间指的是数据库系统创建时需要的表空间,这些表空间在数据库创建时自动创建,是每个数 ...
- ORACLE结构体系篇之表空间详解.md
表空间详解一.系统表空间SYSTEM 表空间是Oracle 数据库最重要的一个表空间,存放了一些DDL 语言产生的信息以及PL/SQL 包.视图.函数.过程等,称之为数据字典,因此该表空间也具有其特殊 ...
- MySQL数据库系列(四)- InnoDB下的共享表空间和独立表空间详解
一.概念 共享表空间: Innodb的所有数据保存在一个单独的表空间里面,而这个表空间可以由很多个文件组成,一个表可以跨多个文件存在,所以其大小限制不再是文件大小的限制,而是其自身的限制.从Innod ...
- MySql中innodb存储引擎事务日志详解
分析下MySql中innodb存储引擎是如何通过日志来实现事务的? Mysql会最大程度的使用缓存机制来提高数据库的访问效率,但是万一数据库发生断电,因为缓存的数据没有写入磁盘,导致缓存在内存中的数据 ...
- mysql-5.7 扩展innodb系统表空间详解
一.innodb系统表空间的简介: innodb 系统表空间是由若干个文件组成的,表空间的大小就是对应文件的大小,表空间文件是由innodb_data_file_path 这人参数来定义的.下面我们来 ...
- mysql-5.7 收缩系统表空间详解
innodb 系统表空间是一个逻辑上的概念,它的物理表现就是innodb系统表空间文件:在讲扩展系统表空间时我们说到 可以用增加文件,增加autoextend标记 这两种方式来解决:但是问题到了收缩表 ...
- 【Oracle XE系列之四】创建OracleXE表空间详解
创建OracleXE表空间示例 sqlplus /nolog connect sys as sysdba SQL> create tablespace OPFOCN datafile 'C:\ ...
- Oracle 表空间详解
目录 目录 表空间概述 表空间的分类 默认表空间 查看默认的永久表空间 查看默认的TEMP表空间 查看默认的表空间类型 逻辑结构到物理结构的映射 对表空间的操作 查看表空间使用情况 查看数据库拥有的表 ...
- mysql InnoDB引擎 共享表空间和独立表空间(转载)
PS:innodb这种引擎,与MYISAM引擎的区别很大.特别是它的数据存储格式等.对于innodb的数据结构,首先要解决两个概念性的问题: 共享表空间以及独占表空间. 1.什么是共享表空间和独占表空 ...
随机推荐
- [DB] Kafka
介绍 一种高吞吐量的分布式发布订阅消息系统 消息类型:主体Topic(广播).队列Queue(一对一) 消息系统类型:同步消息系统.异步消息系统 常见消息产品:Redis.Kafka.JMS 术语 P ...
- [刷题] 416 Partition Equal Subset Sum
要求 非空数组的所有数字都是正整数,是否可以将这个数组的元素分成两部分,使得每部分的数字和相等 最多200个数字,每个数字最大为100 示例 [1,5,11,5],返回 true [1,2,3,5], ...
- Linux下script命令录制、回放和共享终端操作script -t 2> timing.log -a output.session # 开始录制
Linux下script命令录制.回放和共享终端操作 [日期:2018-09-04] 来源:cnblogs.com/f-ck-need-u 作者:骏马金龙 [字体:大 中 小] 另一篇终端会话共 ...
- 013.Kubernetes认证授权
一 Kubernetes认证系统介绍 1.1 访问控制 Kubernetes API的每个请求都会经过多阶段的访问控制之后才会被接受,这包括认证.授权以及准入控制(Admission Control) ...
- 7.json&pickle及软件目录结构规范
json(可以序列化简单数据类型,用于不同语言之间的数据交换传输)import jsonjson.dumps() 写入json.loads() 读取json.dump(info,f) == f.wri ...
- IDEA 创建 Vue 文件(Day_41)
IDEA 创建 Vue 文件 1. 在setting-->plugins里安装vue插件,安装成功之后重启IDEA 如图 2. 在setting-->Editor-->File Ty ...
- 大数据学习之路——MySQL基础(一)——MySQL的基础知识与常见操作
一.存储引擎 1.含义 存储引擎是数据库底层软件组织,数据库管理系统(DBMS)使用数据引擎进行创建.查询.更新和删除数据.不同的存储引擎提供不同的存储机制.索引技巧.锁定水平等功能,使用不同的存储引 ...
- SpringBoot实现整合mybatis-generator-maven-plugin 1.4.0
创建 Maven 工程 网上有很多教程且 Idea 可以直接创建 这里就不进行 pom.xml 引入依赖和插件 pom中generalto-maven-plugs中必须指定mysql驱动,并且明确版本 ...
- DDD中限界上下文与通用语言的作用
什么是通用语言 通用语言, 最主要的目的就是减少交流中信息丢失, 在实际开发中, 可能关联很多人, 例如有业务层面的业务细节制定者.领域专家.产品经理.项目经理 .架构师.开发经理.测试经理等等, 即 ...
- 重新整理 .net core 实践篇—————服务的配置更新[十三]
前言 前文讲述了,服务和配置直接的配合,这一节写一下,当配置文件修改了,每个服务如何感知自己的配置. 正文 服务感知到自己的配置发生变化,这就牵扯出两个东西: IoptionsMonitor<o ...