mysql之 innobackupex备份+binlog日志的完全恢复【转】
前言:
MySQL的完全恢复,我们可以借助于完整的 备份+binlog 来将数据库恢复到故障点。
备份可以是热备与逻辑备份(mysqldump),只要备份与binlog是完整的,都可以实现完全恢复。
1. 准备实验环境
mysql> select version();
+------------+
| version() |
+------------+
| 5.6.-log |
+------------+
row in set (0.00 sec)
mysql> create database com_rec;
Query OK, row affected (0.00 sec)
mysql> use inc_rec;
Database changed
mysql> create table andy (id int);
Query OK, rows affected (0.08 sec)
mysql> insert into andy values(),();
Query OK, rows affected (0.00 sec)
Records: Duplicates: Warnings:
2. 全备
[root@mysql02 full]# innobackupex --defaults-file=/etc/my.cnf --user=root --password=oracle --port= /xtrabackup/full/
xtrabackup: Transaction log of lsn () to () was copied.
:: completed OK!
3. 查看全备生成文件
[root@mysql02 full]# ll /xtrabackup/full/
total
drwxr-x---. root root Jun : --09_17--
4. 模拟业务新数据
mysql> insert into andy values(),();
Query OK, rows affected (0.14 sec)
Records: Duplicates: Warnings:
mysql> commit;
Query OK, rows affected (0.00 sec)
5. 增量备份
-- 创建存放增量备份目录并赋权
[root@mysql02 full]# mkdir -p /xtrabackup/incr/
[root@mysql02 full]# chown -R mysql:mysql /xtrabackup/incr/
[root@mysql02 full]# ll /xtrabackup/
total
drwxr-xr-x. mysql mysql Jun : full
drwxr-xr-x. mysql mysql Jun : incre
-- 正式开始增量备份
[root@mysql02 full]# innobackupex --defaults-file=/etc/my.cnf --user=root --password=oracle --incremental \
--incremental-basedir=/xtrabackup/full/--09_17--/ /xtrabackup/incr/
########################################下面是增量备份输出
。。。省略
xtrabackup: Transaction log of lsn () to () was copied.
:: completed OK!
6. 再模拟新业务,该记录在保存在binlog,而不会存在于任何备份,这条记录用于验证完全恢复
mysql> insert into andy values();
Query OK, row affected (0.00 sec)
7. 记下操作后的 position 点
mysql> show master status;
+---------------+----------+--------------+------------------+-------------------+
| File | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+---------------+----------+--------------+------------------+-------------------+
| binlog. | | | | |
+---------------+----------+--------------+------------------+-------------------+
row in set (0.00 sec)
8. 切换binlog日志
mysql> flush logs;
Query OK, rows affected (0.00 sec)
9. 使用binlog events命令来查看我们最后insert的一条记录
mysql> show binlog events in 'binlog.000005';
+---------------+------+-------------+-----------+-------------+-----------------------------------------------+
| Log_name | Pos | Event_type | Server_id | End_log_pos | Info |
+---------------+------+-------------+-----------+-------------+-----------------------------------------------+
| binlog. | | Format_desc | | | Server ver: 5.6.-log, Binlog ver: |
| binlog. | | Query | | | drop database inc_rec |
| binlog. | | Query | | | create database com_rec |
| binlog. | | Query | | | use `com_rec`; create table andy (id int) |
| binlog. | | Query | | | BEGIN |
| binlog. | | Query | | | use `com_rec`; insert into andy values(),() |
| binlog. | | Xid | | | COMMIT /* xid=67 */ |
| binlog. | | Query | | | BEGIN |
| binlog. | | Query | | | use `com_rec`; insert into andy values(),() |
| binlog. | | Xid | | | COMMIT /* xid=81 */ |
| binlog. | | Query | | | BEGIN |
| binlog. | | Query | | | use `com_rec`; insert into andy values() |
| binlog. | | Xid | | | COMMIT /* xid=96 */ |
| binlog. | | Rotate | | | binlog.;pos= |
+---------------+------+-------------+-----------+-------------+-----------------------------------------------+
rows in set (0.00 sec)
10. 查看binlog的位置 与 datadir 的位置, 防止 mv datadir时误操作 binlog ,影响恢复 (binlog与datadir一定要分开放置)
mysql> show variables like '%log_bin%';
+---------------------------------+------------------------------------+
| Variable_name | Value |
+---------------------------------+------------------------------------+
| log_bin | ON |
| log_bin_basename | /data/mysql/binarylog/binlog |
| sql_log_bin | ON |
+---------------------------------+------------------------------------+
rows in set (0.00 sec) mysql> show variables like '%datadir%';
+---------------+--------------+
| Variable_name | Value |
+---------------+--------------+
| datadir | /data/mysql/ |
+---------------+--------------+
row in set (0.00 sec)
11. 恢复
11.1 先做基于全备的apply,注意,此时使用了--redo-only
[root@mysql02 full]# innobackupex --defaults-file=/etc/my.cnf --user=root --apply-log --redo-only /xtrabackup/full/--09_17--/
:: completed OK!
11.2 在恢复增量备份集: --此时没有--redo-only,如果有多个增备,仅仅最后一个增备无需指定--redo-only
[root@mysql02 full]# innobackupex --defaults-file=/etc/my.cnf --user=root --apply-log /xtrabackup/full/--09_17--/ --incremental-dir=/xtrabackup/incr/--09_17--/
:: completed OK! #结果出现completed OK表示完全成功
说明: /xtrabackup/full/--09_17--/ 为全备基目录 , incremental-dir 为增量备份目录
12. 关闭要恢复的实例
[root@mysql02 data]# /etc/init.d/mysql stop -p3306
netstat -nltp|grep mysql|grep
13.将原有文件夹重命名到新位置,并创建原文件夹
[root@mysql02 full]# mv /data/mysql /data/mysqlbak
[root@mysql02 full]# mkdir -p /data/mysql
14.执行拷贝恢复的文件到原来的数据位置
[root@mysql02 full]# innobackupex --defaults-file=/etc/my.cnf --user=root --copy-back /xtrabackup/full/--09_17--/
:: completed OK! #结果出现completed OK表示完全成功
说明: /xtrabackup/full/--09_17--/ 为全备基目录
15. 权限修改
[root@mysql02 ~]# mkdir -p /data/mysql/binarylog (说明:这里我binlog在datadir在路径下,所以要单独为binlog创建目录)
-- 将binlog日志mv回原位置 (如果binlog不在datadir下,就不用操作)
[root@mysql02 xtrabackup]# ll /data/mysqlbak/binarylog/
total
-rw-rw----. mysql mysql Jun : binlog.
-rw-rw----. mysql mysql Jun : binlog.
-rw-rw----. mysql mysql Jun : binlog.
-rw-rw----. mysql mysql Jun : binlog.
-rw-rw----. mysql mysql Jun : binlog.
-rw-rw----. mysql mysql Jun : binlog.
-rw-rw----. mysql mysql Jun : binlog.index [root@mysql02 data]# mv /data/mysqlbak/binarylog/* /data/mysql/binarylog/
[root@mysql02 xtrabackup]# ll /data/mysql/binarylog/
total 28
-rw-rw----. 1 mysql mysql 164 Jun 9 06:12 binlog.000001
-rw-rw----. 1 mysql mysql 386 Jun 9 06:14 binlog.000002
-rw-rw----. 1 mysql mysql 143 Jun 9 06:53 binlog.000003
-rw-rw----. 1 mysql mysql 143 Jun 9 07:35 binlog.000004
-rw-rw----. 1 mysql mysql 1148 Jun 9 17:45 binlog.000005
-rw-rw----. 1 mysql mysql 143 Jun 9 17:48 binlog.000006
-rw-rw----. 1 mysql mysql 216 Jun 9 17:45 binlog.index [root@mysql02 data]# chown -R mysql:mysql /data/mysql
16. 启动恢复后的实例
mysqld_safe --defaults-file=/etc/my.cnf &
17. 登录检查
[root@mysql02 ~]# mysql -uroot -poracle
mysql> use com_rec
mysql> select * from andy;
+------+
| id |
+------+
| |
| |
| |
| | > 恢复成功,但是没有恢复到最新,缺少 id= , 'Inbinlog'记录并没有被恢复 。
+------+
18. 使用binlog做完全恢复
[root@mysql02 ~]# cd /xtrabackup/incr/--09_17--/
--从innobackupex获得binlog的位置
[root@mysql02 --09_17--]# more xtrabackup_binlog_info
binlog.
--使用mysqlbinlog 追加的最新
[root@mysql02 --09_17--]# mysqlbinlog --start-position= --stop-position= /data/mysql/binarylog/binlog. | mysql -uroot -poracle
补充:
这样做确实可以,而且row模式的binlog,也可以通过这种方式来执行。但是这样做有几个缺点
a. 如果解析出来的binlog在执行的过程中报错,如何处理?直接加 -f 强制执行吗?
b. 执行中途如何停下来,下次接着跑? 比如我想调整一下MySQL的参数(需要重启)后继续跑?
c. 只能单线程执行。而且mysqlbinlog解析再通过管道执行,有比较高的性能开销。
19. 验证,可以看到最后一条记录以及被恢复
mysql> select * from andy;
+------+
| id |
+------+
| |
| |
| |
| |
| |
+------+
rows in set (0.00 sec)
总结
a、对于完全恢复,我们需要使用备份加binlog两者结合的方式来实现
b、在恢复期间,首先使用带read-only的apply-log方式来prepare全备
c、接下来使用带read-only的apply-log方式来prepare增备,仅最后一个增备可以不用read-only
d、停止原有实例,并copy-back后启动恢复后的实例
e、从Innobakcupex备份信息中获取最后的binlog日志及位置信息
f、使用mysqlbinlog方式将日志追加到最新时刻
转自
mysql之 innobackupex备份+binlog日志的完全恢复(命令行执行模式) - CSDN博客 https://blog.csdn.net/zhang123456456/article/details/72954519
参考
mysqldump+binlog的备份与恢复和xtrabackup备份工具-13007865-51CTO博客 http://blog.51cto.com/13017865/2046944
mysql之 innobackupex备份+binlog日志的完全恢复【转】的更多相关文章
- mysql之 innobackupex备份+binlog日志的完全恢复(命令行执行模式)
前言:MySQL的完全恢复,我们可以借助于完整的 备份+binlog 来将数据库恢复到故障点.备份可以是热备与逻辑备份(mysqldump),只要备份与binlog是完整的,都可以实现完全恢复. 1. ...
- innobackupex基于binlog日志的恢复 -- 模拟slave恢复
说明:一般来说,如果恢复的binlog量不大,可以使用此方法来恢复:mysqlbinlog /data/mysqlbak/binlogbak/restoredb-bin.000018 |mysql - ...
- innobackupex基于binlog日志的恢复 -- 使用mysqlbinlog恢复
备份先做一次完整备份: innobackupex --defaults-file=/etc/my.cnf --user root --password chengce243 /data/mysqlba ...
- MySQL用户授权 和 bin-log日志 详解和实战(http://www.cnblogs.com/it-cen/p/5234345.html)
看 了上一篇博文的发布时间,到目前已经有三个月没更新博文了.这三个月经历了很多事情,包括工作.生活和感情等等.由于个人发展的原因,这个月准备换工作 啦.在这段时间,我会把Web大型项目中所接触到的技术 ...
- MySQL用户授权 和 bin-log日志 详解和实战
看了上一篇博文的发布时间,到目前已经有三个月没更新博文了.这三个月经历了很多事情,包括工作.生活和感情等等.由于个人发展的原因,这个月准备换工作啦.在这段时间,我会把Web大型项目中所接触到的技术都总 ...
- MySQL按天备份二进制日志
#!/usr/bin/env python # -*- coding:utf-8 -*- # Author:guozhen.zhang import MySQLdbimport timeimp ...
- 清理300多台MySQL数据库的过期binlog日志
早晨睡梦中,被 on-call了,说磁盘报警,赶紧起来打开email,收到上百封email报警,数据库磁盘不够了,查询了原因 [xxx@xxxx cacti]$ ssh xxxx "df - ...
- MySQL 开启和查看bin-log日志
1.5.7版本前修改my.cnf文件,添加log-bin=my-bin(my.cnf的位置根据自己安装的路径查看)# vi /usr/local/mysql/my.cnflog-bin=my-bin ...
- 查看MySQL还原出来的binlog日志中内容方法
用mysqlbinlog查出需要查看的数据后,可以用more来查看: [root@yoon data]# more recover_sakila.sql | grep --ignore-case -E ...
随机推荐
- 【BZOJ3413】匹配(后缀自动机,线段树合并)
[BZOJ3413]匹配(后缀自动机,线段树合并) 题面 BZOJ 题解 很好的一道题目. 做一个转化,匹配的次数显然就是在可以匹配的区间中,每个前缀的出现次数之和. 首先是空前缀的出现次数,意味着你 ...
- BZOJ 4754 [JSOI2016]独特的树叶 | 树哈希判同构
题目链接 这道题是一道判断无根树同构的模板题,判断同构主要的思路就是哈希. 一遇到哈希题,一百个人能有一百零一种哈希方式,这篇题解随便选用了一种--类似杨弋<Hash在信息学竞赛中的一类应用&g ...
- windows安装redis的正确姿势
安装: 1,redis官方下载地址:https://redis.io/download,redis 64位下载地址:https://github.com/ServiceStack/redis-wind ...
- 爬虫json数据的处理
在爬网页的过程中,最喜欢遇到的就是json数据接口,省了不少麻烦,但是json数据也有多种格式. 类型一:标准的json result = json.loads(html.text),将str转成py ...
- java date总结
Java 8 中 Date与LocalDateTime.LocalDate.LocalTime互转 Java 8中 java.util.Date 类新增了两个方法,分别是from(Instant ...
- SQL: 从一个表随机读取一行或几行记录的问题
比如ms sql 2000,随机读取了一行记录: SELECT TOP 1 * FROM [tablename] ORDER BY NEWID() 遇到的问题是,如果这个表记录不多,比如几十或几百.几 ...
- c++11并发之std::thread
知识链接: https://www.cnblogs.com/lidabo/p/7852033.html 构造函数如下: ) thread() noexcept; initialization() te ...
- Skype 使用小技巧
原文发布在个人独立博客上,链接:http://maxpeng.vipcloud.me/2016/09/01/skype-tricks-tips/ Skype 作为一个即时聊天工具,相信大家都不陌生 ...
- Apache Shiro 用户信息保存在session方案
描述 在使用shiro的时候,经常会有一种需求: 把登录成功后的用户对象存放到session中,方面其他地方调用.存放到session这个步骤到底应该在哪里去做,有几个地方比较合适: 调用 Subje ...
- Makefile ------ := ?= += =的区别
Makefile 中:= ?= += =的区别 新建一个Makefile,内容为: ifdef DEFINE_VRE VRE = “Hello World!” endif ifeq ($(OPT),d ...