mysql的备份工具通常有 mysqldump ,mysqlpump(5.7后新特性)等备份工具,这里我们可以尝试使用表空间进行传递

方式是:拷贝数据文件+拷贝表空间   对应innodb引擎就是 ibd文件和cfg文件

.cfg: 该文件存储了表的数据字典信息

执行此种方式的要求

(1)需要使用独立表空间,开启innodb_file_per_table参数;
(2)在做表导出时,该表只允许读不允许写;
(3)导入导出的数据data page size必须一样;
(4)在 MySQL 5.7.4 之前的版本是不能对分区表做分区迁移;
(5)使用外键的表,需要使用 set foreign_key_check=0强制忽略外键,否则不支持表空间的导入导出,分布表不支持外键表空间的导入导出;

使用这种的方式的几个限制

源库和目标库版本一致
只适用于 innodb 引擎表
源库执行 flush tables t for export 时,该表会不可写

对于移动一个大表我们来思考一下

使用mysqldump+source的方式:考虑逻辑备份的语句是不是很多,对于一个大表,如果用了很长时间的话,操作频繁,耗时也长

使用select into outfile + load infile 会快一点,但是在生产上主从的环境,要知道主库会将所有的数据当作一个事务执行,只有把数据全部成功插入后,才会将 binlog 复制到从库,
这样会造成从库严重延迟,而且生成的单个 binlog 大小严重超标,在磁盘空间不足时可能会把磁盘占满。
使用xtraback增量备份的话,如何之前一直有备份最好,合并就行,临时使用的话,io消耗比较大,备份的文件大小也比mysqldump的大 使用移动表空间,消耗的时间较短,但是要考虑锁表的问题,并且目标数据库需要提前建库建表

下面举个例子进行说明

1 普通表空间的传递

准备两个mysql,源+目标,同时进行建表命令,一个我们称呼为源mysql,一个称呼为目标mysql

create table first(id int,name char(16));

在源mysql中插入数据

insert into first values(1,'ni'),(2,'wo'),(3,'ta');

在目标mysql上面释放表空间

alter table first discard tablespace;  #相当于删除了first.ibd文件,留下了 first.frm
此时你可以对 frm 文件操作,例如:rename table,drop table ,但是不能对 ibd 文件操作,比如:dml
验证结果:
select * from first;
ERROR 1814 (HY000): Tablespace has been discarded for table 'first'

在源mysql上面创建.cfg元数据文件,注意,不要关闭当前窗口,否则消失

flush tables first for export;  #此时,源MySQL有了first.cfg文件,
验证情况:
insert into first values(10,'hehe'); DML 操作是阻塞的 ERROR 1099 (HY000): Table 'first' was locked with a READ lock and can't be updated

复制first.cfg文件和first.ibd文件到目标mysql

cp  源mysql路径/first.{cfg,ibd}  目标mysql/
修改权限
chown mysql.mysql *

源mysql释放锁

UNLOCK TABLES;

目标mysql导入表空间

alter table first  import tablespace;

目标mysql查看结果

select * from first;

注意:如果是加密的表空间,传递的文件就是 .cfp  .cfg  .ibd三个文件

2 分区表空间传递(mysql5.7.4之后的版本)

接替上一篇博客建立的分区表 test_range_partition 我们来做分区表的迁移

在目标服务器上面建立database和表test_range_partition

mysql> CREATE TABLE test_range_partition(
-> id INT auto_increment,
-> createdate DATETIME,
-> primary key (id,createdate)
-> )
-> PARTITION BY RANGE (TO_DAYS(createdate) ) (
-> PARTITION p201801 VALUES LESS THAN ( TO_DAYS('') ),
-> PARTITION p201802 VALUES LESS THAN ( TO_DAYS('') ),
-> PARTITION p201803 VALUES LESS THAN ( TO_DAYS('') ),
-> PARTITION p201804 VALUES LESS THAN ( TO_DAYS('') ),
-> PARTITION p201805 VALUES LESS THAN ( TO_DAYS('') ),
-> PARTITION p201806 VALUES LESS THAN ( TO_DAYS('') ),
-> PARTITION p201807 VALUES LESS THAN ( TO_DAYS('') ),
-> PARTITION p201808 VALUES LESS THAN ( TO_DAYS('') ),
-> PARTITION p201809 VALUES LESS THAN ( TO_DAYS('') ),
-> PARTITION p201810 VALUES LESS THAN ( TO_DAYS('') ),
-> PARTITION p201811 VALUES LESS THAN ( TO_DAYS('') ),
-> PARTITION p201812 VALUES LESS THAN ( TO_DAYS('') )
-> );
Query OK, 0 rows affected (0.06 sec)

在目标服务器上面删除表的指定分区表空间

alter table test_range_partition discard partition p201802 tablespace;

查看

[root@localhost target]# ls
db.opt test_range_partition#P#p201805.ibd test_range_partition#P#p201810.ibd
test_range_partition.frm test_range_partition#P#p201806.ibd test_range_partition#P#p201811.ibd
test_range_partition#P#p201801.ibd test_range_partition#P#p201807.ibd test_range_partition#P#p201812.ibd
test_range_partition#P#p201803.ibd test_range_partition#P#p201808.ibd
test_range_partition#P#p201804.ibd test_range_partition#P#p201809.ibd

源服务器上面导出表空间,并复制到目标服务器上面

mysql> flush tables test_range_partition for export;
Query OK, 0 rows affected (0.00 sec) scp 源服务器ip/test_range_partition#P#p201802.{cfg,ibd} 目标服务器/

查看目标服务器的内容,并修改权限,否则导入的时候报错

[root@localhost target]# ls
db.opt test_range_partition#P#p201803.ibd test_range_partition#P#p201808.ibd
test_range_partition.frm test_range_partition#P#p201804.ibd test_range_partition#P#p201809.ibd
test_range_partition#P#p201801.ibd test_range_partition#P#p201805.ibd test_range_partition#P#p201810.ibd
test_range_partition#P#p201802.cfg test_range_partition#P#p201806.ibd test_range_partition#P#p201811.ibd
test_range_partition#P#p201802.ibd test_range_partition#P#p201807.ibd test_range_partition#P#p201812.ibd chown mysql.mysql *

源服务器释放锁

mysql> unlock tables;
Query OK, 0 rows affected (0.00 sec)

目标服务器导入表空间

mysql> alter table test_range_partition import partition p201802 tablespace;  #这里报错是因为没有修改属主
ERROR 1812 (HY000): Tablespace is missing for table `target`.`test_range_partition`.
mysql> alter table test_range_partition import partition p201802 tablespace;
Query OK, 0 rows affected (0.02 sec) mysql> select * from test_range_partition; #只有两个数据,是因为导入了一个分区表空间,可以尝试导入所有的表空间
+----+---------------------+
| id | createdate |
+----+---------------------+
| 2 | 2018-02-05 00:00:00 |
| 3 | 2018-02-06 00:00:00 |
+----+---------------------+
2 rows in set (0.00 sec)

mysql通过表空间来恢复或者传递数据的更多相关文章

  1. mysql 案例 ~ 表空间迁移数据与数据导入

    一  简介:mysql5.6+的表空间传输二 目的:复制数据到另一个表三 步骤   1 create table b like a ->创建一个空表   2 alter table b disc ...

  2. Oracle误删除表空间的恢复

    对于误删除表空间的恢复,本文通过基于数据库的时间点恢复和基于表空间的时间点恢复分别加以讨论 一 通过基于数据库的时间点恢复被误删除的表空间 1 需要注意的事项 a 基于数据库的时间点恢复将会回退整个数 ...

  3. MySQL的表空间管理

    表空间: MySQL没有真正意义上的表空间管理. MySQL的Innodb包含两种表空间文件模式,默认的共享表空间和每个表分离的独立表空间. 一般来说,当数据量很小的时候建议使用共享表空间的管理方式. ...

  4. ORACLE表空间offline谈起,表空间备份恢复

    从ORACLE表空间offline谈起,表空间备份恢复将表空间置为offline,可能的原因包括维护.备份恢复等目的:表空间处于offline状态,那么Oracle不会允许任何对该表空间中对象的SQL ...

  5. 谈谈什么是MySQL的表空间?

    今天我要跟你分享的话题是:"大家常说的表空间到底是什么?究竟什么又是数据表?" 这其实是一个概念性的知识点,当作拓展知识.涉及到的概念大家了解一下就好,涉及的参数,留个印象就好. ...

  6. WCF分布式开发步步为赢(8):使用数据集(DataSet)、数据表(DataTable)、集合(Collection)传递数据

    数据集(DataSet).数据表(DataTable).集合(Collection)概念是.NET FrameWork里提供数据类型,在应用程序编程过程中会经常使用其来作为数据的载体,属于ADO.NE ...

  7. MySQL 独立表空间恢复案例

    创建表的时候就会得到元数据.可以通过定义的方式对表的元数据进行生成 这个地方要注意的是 独立表空间当中   ibd & frm分别存储的是什么数据? 表空间:文件系统,为了更好的扩容数据库的存 ...

  8. mysql共享表空间转独立表空间

    使用innodb_export_import.py脚本: https://github.com/thecpaneladmin/innodb-tools 安装MySQL-python模块: shell ...

  9. mysql之 表空间传输

    说明:MySQL(5.6.6及以上),innodb_file_per_table开启. 1.1. 操作步骤: 0. 目标服务器创建相同表结构1. 目的服务器: ALTER TABLE t DISCAR ...

随机推荐

  1. C语言集成开发环境使用小记

    时隔6年,我又重操C语言,是什么让我如此再下定决心?就是不想让自己所学过的知识就此荒废了,我重新以一个C语言初学者的身份(当然,稍稍有点基础,以前的知识忘得没这么快^_^)温故C语言,学习了几天,果真 ...

  2. Delphi DBGrid 实现复选框

    1 在数据库对应的表中加入  bit 列验证是否被选中 然后dbgrid第一列的filedname是bit列 在DBgrid的onDrawColumnCell事件中写: procedure DBGri ...

  3. springbootboot 语句

    -- ------------------------------ Table structure for `user`-- ----------------------------DROP TABL ...

  4. boot、cloud

    最近在学习Spring Boot也整理了一些文章,有需要的可以参考一下 https://www.zhihu.com/question/39483566 Spring Cloud是一系列框架的有序集合. ...

  5. ribbon学习

    spring cloud 中的负载均衡有ribbon和feign 引入ribbon依赖 <!--ribbon相关--> <dependency> <groupId> ...

  6. paper 134:结构张量structure tensor(二)

    根据结构张量能区分图像的平坦区域.边缘区域与角点区域. 此算法也算是计算机科学最重要的32个算法之一了.链接的文章中此算法名称为Strukturtensor算法,不过我搜索了一下,Strukturte ...

  7. jquery实现给循环的每一项加上不同的样式

    项目中需要实现这样的效果,模块中需要展示若干的商品,这些商品的分类名称需要显示不同的背景色,一共提供了三种背景色做选择, 这样的话就需要用这三种颜色做循环,一开始我的思路是做随机分配颜色,但是这样的话 ...

  8. Emgucv图像处理工具

    此工具是当年自己在学习Emgucv的时候,慢慢积累的,包含了常用的图像处理算法,非常适合新人学习,现放出源码,由于是以前做的,功能不全. 当时Emgucv的学习资料非常之少,没有一本书是讲Emgucv ...

  9. VMware 虚拟机NAT模式如何设置网络连接,从头到尾全过程~!!

    一.首先查看自己的虚拟机服务有没有开启,选择电脑里面的服务查看: 1.计算机点击右键选择管理  2.进入管理选择VM开头的服务如果没有开启的话就右键开启  二.虚拟机服务开启后就查看本地网络虚拟机的网 ...

  10. shell从字符串中提取子串(正则表达式)

    通过试验,可以通过grep.sed两种方式实现. 假设需要提取libgcc-4.8.5-4.h5.x86_64.rpm中的版本号. grep echo "libgcc-4.8.5-4.h5. ...