mariadb数据库备份学习笔记
备份类型:
完全备份
部分备份:仅备份其中的一张表或多张表
增量备份:仅备份从上次完全备份或增量备份之后变化的数据部分
热备份:在线备份,读写操作不受影响
温备份:在线备份,读操作可继续进行,但写操作不允许
冷备份:离线备份,数据库服务器离线,备份期间不能为业务提供读写服务
物理备份:直接复制数据文件进行的备份
逻辑备份:从数据库中“导出”数据另存而进行的备份
MyISAM: 支持温备,不支持
InnoDB: 既能热备又能温备
备份什么:数据、额外的数据(二进制日志和InnoDB的事务日志)、代码(存储过程和存储函数、触发器、事件调度器等),服务器配置文件
备份时需要考虑的因素:
持锁的时长
备份过程时长
备份负载
恢复过程时长
备份方案:完全备份+增量备份
备份方案之备份工具的选择:
mysqldump:完全备份,通过备份二进制日志实现增量备份(InnoDB热备和温备,MyISAM温备)注意数据库大于1GB的话不推荐这种备份,因为还原时间会过长
xtrabackup:对InnoDB:热备,支持完全备份和增量备份,对MyISAM:温备,只支持完全备份
补充:以下操作都在centos6上进行
Usage: mysqldump [OPTIONS] database [tables]
mysqldump -uroot --database hellodb > /tmp/hellodb.sql(单个数据库文件备份)
注意这种方式对MyISAM和InnoDB只支持温备,先要锁定备份的数据库,如果不锁定备份的同时有写入数据的操作,会导致恢复时数据不一致
在实际生产环境中一定要加一个-l参数,表示对单个数据库进行备份时,锁定此数据库的所有表,-x当对所有数据库备份时锁定所有数据库的所有表
所以使用方式应该是这样: mysqldump -uroot -l --database hellodb > /tmp/hellodb.sql
对InnoDB要支持热备的话:mysqldump -uroot --single-transaction --database hellodb > /tmp/hellodb.sql(只有
在开始备份那一刻时已经存在的数据会被备份,备份过程中新加入的数据不会被备份,InnoDB内部有每个数据的时间戳,如果时间戳
大于备份开始时的时间,该数据就会被忽略。如果有数据被删除且被删除的时间戳大于备份开始时的时间,该数据就会在备份中被还
原。这样保证了所有数据的可靠性)
其他选项: -E, --events:备份指定库的事件调度器
-R, --routines:备份存储过程和存储函数
--triggers:备份触发器
但是这样备份过后,数据库进行了读写操作,当数据库奔溃后,只能还原到备份的时间点,后面的对数据库的操作不能还原,如果在上
面的命令中加入--master-data=2,就可结合二进制日志还原到奔溃前的时间点了,此参数的作用是会在备份的sql文件中加入一条数
据:(使用less命令查看sql文件)
MASTER_LOG_FILE备份那一刻二进制文件是哪个,MASTER_LOG_POS备份到了哪个位置
要还原到奔溃前的那一刻:
(1)mysqlbinlog --start-position=20434 (备份那刻起的二进制文件) > 某个目录下的sql文件
注意如果二进制日志产生了滚动,这需要多次使用mysqlbinlog将后面滚动的二进制日志导入到sql文件中
(2)还原前面备份的sql文件
(3)将第(1)步中的sql文件逐个还原,还原命令mysql -u用户 -p密码 < sql文件
所以在生产环境中真正要使用的备份命令类似:mysqldump -uroot --all-databases --single-transaction --master-data=2 > /tmp/all.sql
补充:mysqldump做的备份,数据还原时也会产生二进制日志,这些日志是不需要的,使用mysql> SET SESSION sql_log_bin=0
命令关闭二进制日志,登陆mysql,使用source /path/somefile.sql依次还原, 还原后再开启二进制志SET SESSION
sql_log_bin=1
接下来说说怎么使用xtrabackup:www.percona.com上有该软件的下载(此处我下载的是centos6的rpm包)
yum -y install epel-release (xtrabackup有些依赖的包在epel源中)
yum -y install percona-xtrabackup-2.3.4-1.el6.x86_64.rpm
查看生成了哪些包
使用xtrabackup对innodb做热备,为了使xtrabackup的某些功能能够实现(即对单张表备份本文不做介绍),得先在mariadb的配置文件中开启一个参数innodb_file_per_table=ON 在配置文件中定义,这个参数的作用是把innodb的单张表存储为单个的文件
首先对整个数据库进行全库备份: innobackupex --user=root --password='' /root/backup/
在备份的文件中找到xtrabackup_checkpoints这个文件,less xtrabackup_checkpoints
backup_type = 说明此次备份是完全备份还是增量备份 full-backuped 表示完全备份,看到最后的completed ok就表示备份成功
了:
现在只需根据以前的数据库创建一个全新的空数据库和一个跟原始数据库相同的配置文件,保证数据目录为空
还原之前首先得对原来备份的文件进行整理,使用命令:innobackupex --apply-log /root/backup/2016-04-27_05-25-45/,最
后同样要看到completed ok 才表示整理完毕,再去查看xtrabackup_checkpoints文件:
backup_type = full-prepared,整理完毕
还原前要先停掉mariadb,使用还原命令: innobackupex --copy-back /root/backup/2016-04-27_05-25-45/,同样要看到
completed ok才算还原成功,注意我是使用默认的root用户还原的,因此数据目录所属的用户组和用户都是root,使用chown -R
mysql.mysql ./* 将属组和用户都改为mysql(不然mariadb会启动不了)
使用xtrabackup做增量备份,同样跟上面一样先执行一次完全备份,执行增量备份命令:
innobackupex --incremental /root/backup/ --incremental-basedir=/root/backup/2016-04-27_06-37-51
--incremental 指定增量备份的存储位置 --incremental-basedir 基于哪个备份文件做增量备份
还原的时候,先去整理完全备份innobackupex --apply-log --redo-only /root/backup/2016-04-27_06-37-51/
补充:当mariadb使用Innodb存储引擎时会使用内存中的一段空间取名叫做buffer pool,是mariadb用来存储产生的事务(包含已提
交和未提交的事务),所有内存中的事务都会被立即记录到磁盘中的事务日志文件中 数据库奔溃或终止时产生一个结果:提交的事务可
能只保存在内存当中,但没有同步到磁盘文件中去,当mariadb重启时会根据磁盘中的事务日志文件自动将已提交的事务同步到磁盘文
件中去,未能正常提交的事务做回滚操作 使用inobackupex备份时,内存中的事务(包括已经提交的事务和未提交的事务)也会被记
录下来,当使用xtrabackup还原时会将已提交的事务同步到磁盘文件中去,未能正常提交的事务做回滚操作,做增量备份时第一次完
全备份未提交的事务不应该回滚,因为到最后增量备份还原时此前未提交的事务可能已经提交了因此上面--redo-only的作用就是只“重
放”已经提交的事务,将已提交的事务同步到磁盘文件,而不做回滚操作
整理第一次增量备份:innobackupex --apply-log /root/backup/2016-04-27_06-37-51/ --incremental-dir=/root/backup/2016-04-27_06-42-59/
每次对增量的整理时前面都得先是完全备份的目录,然后才是增量备份的目录
我这里只做了一次增量备份,如果有多次增量备份只有最后一次整理不用--redo-only,也就是最后一次整理把所有未提交的事务都回滚
最后的还原#innobackupex --copy-back /root/backup/2016-04-27_06-37-51/ (最后指定的目录是完全备份的目录)
这就是使用xtrabackup对整个数据库进行备份
补充:如果要还原到某个时间点(比如奔溃前的时间点)还得借助二进制日志
更正:buffer pool 不只缓存事务,还缓存其他数据
mariadb数据库备份学习笔记的更多相关文章
- mySQl数据库的学习笔记
mySQl数据库的学习笔记... ------------------ Dos命令--先在记事本中写.然后再粘贴到Dos中去 -------------------------------- mySQ ...
- 数据库MySQL学习笔记高级篇
数据库MySQL学习笔记高级篇 写在前面 学习链接:数据库 MySQL 视频教程全集 1. mysql的架构介绍 mysql简介 概述 高级Mysql 完整的mysql优化需要很深的功底,大公司甚至有 ...
- Mysql数据库基础学习笔记
Mysql数据库基础学习笔记 1.mysql查看当前登录的账户名以及数据库 一.单表查询 1.创建数据库yuzly,创建表fruits 创建表 ) ) ,) NOT NULL,PRIMARY KEY( ...
- Oracle数据库备份还原笔记
Oracle数据库备份还原笔记 通过查阅资料知道Oracle备份还原的方式有三种.分别的是导出/导入.热备份和冷备份.导出/导入是一种逻辑备份.而热备份和冷备份是物理备份.[参考资料(https:// ...
- 【Mysql数据库】学习笔记
一.数据库的创建 create database database_name DEFAULT CHARACTER SET utf8; //创建一个数据库 drop database database ...
- MySQL/MariaDB数据库备份与恢复之mysqlpump入门操作
创建测试用表:MariaDB [music]> create table summary(id int,info char(128));Query OK, 0 rows affected (0 ...
- mariadb主从复制架构学习笔记
复制功用: 数据分布 负载均衡:读操作,适用于读密集型的应用 备份 高可用和故障切换 MySQL升级测试 在从服务器上有两个线程: I/O线程:从master请求二进制日志信息,并保存至中继日志 SQ ...
- MariaDb数据库管理系统学习(二)使用HeidiSQL数据库图形化界面管理工具
HeidiSQL 是一款用于简单化的 MySQL server和数据库管理的图形化界面.该软件同意你浏览你的数据库,管理表,浏览和编辑记录,管理用户权限等等.此外,你能够从文本文件导入数据,执行 SQ ...
- java 数据库编程 学习笔记 不断更新
最近开始学习java,感觉java的数据库编程需要发个随笔记录一下,话不多说 切入正题. 一.数据库访问技术的简介 应用程序 → 执行SQL语句 →数据库 → 检索数据结果 → 应用程序 ( ...
随机推荐
- 数组排序-冒泡排序-选择排序-插入排序-希尔排序-快速排序-Java实现
这五种排序算法难度依次增加. 冒泡排序: 第一次将数组相邻两个元素依次比较,然后将大的元素往后移,像冒泡一样,最终最大的元素被移到数组的最末尾. 第二次将数组的前n-1个元素取出,然后相邻两个元素依次 ...
- java学习_文件工具类
工具类里面的方法全部都是静态的,调用的时候不需要实例化
- 编写一个go gRPC的服务
前置条件: 获取 gRPC-go 源码 $ go get google.golang.org/grpc 简单例子的源码位置: $ cd $GOPATH/src/google.golang.org/gr ...
- BC之Run
Problem Description AFA is a girl who like runing.Today,he download an app about runing .The app can ...
- 下载和使用 Open XML PowerTools
安装 Open XML SDK 2.5 首先,需要安装 Open XML SDK 2.5 ,从这个地址下载安装程序:http://www.microsoft.com/en-in/download/de ...
- LoadRunner界面分析(三)
1.Anaysis基础知识 2.Analysis 报告 3.Analysis分析基础 4.IP欺骗 需要使用ip欺骗的原因:1.当某个IP的访问过于频繁,或者访问量过大是,服务器会拒绝访问请求,这时候 ...
- 使用Donut Caching和Donut Hole Caching在ASP.NET MVC应用中缓存页面
Donut Caching是缓存除了部分内容以外的整个页面的最好的方式,在它出现之前,我们使用"输出缓存"来缓存整个页面. 何时使用Donut Caching 假设你有一个应用程序 ...
- 【翻译习作】 Windows Workflow Foundation程序开发-第一章02
1.2 Windows Workflow概览 微软的Windows Workflow Foundation(简称WF)是.NET框架3.0版的一部分..NET3.0其它主要部分是Window ...
- FPGA中的时序分析(四)
常用约束语句说明 关于Fmax 上述是实现Fmax的计算公式,clock skew delay的计算如下图, 就是两个时钟的差值.到头来,影响Fmax的值的大小就是组合逻辑,而Fmax是针对 ...
- dom4j操作xml对象
// 获取Documen对象 public static Document getDocument(String path) throws Exception{ ...