mysql增量备份(2/2)
前言
这是在百度文库里看到的文章,原名叫做《MYSQL 完全与增量备份及恢复文档 》,是关于完全备份和增量备份以及恢复文档的......
文档介绍
本文档采用 mysqldump 对数据库进行备份,mysqldump 是采用 SQL 级别的备份机制,它将数据表导成 SQL 脚本文件,在不同的 MySQL 版本之间升级时相对比较合适,这也是最常用的备份方法,mysqldump 比直接拷贝要慢些。
本文描述 Mysql 数据库的自动备份,包括完全备份和增量备份。其中,完全备份每周六执行一次,系统自动保存最近一个月的备份文件,增量备份每天都会执行,系统自动保存最近 35 天的备份文件。
备份策略布置
(1). 创建备份目录与文件
Shell> mkdir /srv/bakmysql
Shell> mkdir /srv/bakmysql/daily
Shell> touch /srv/bakmysql/mysqlbak.log
Shell>
(2). 启用二进制日志
采用 binlog 的方法相对来说更灵活,省心省力,而且还可以支持增量备份。
启用 binlog 时必须要重启 mysqld。首先,关闭 mysqld,打开 /etc/my.cnf,加入以下
几行:
[mysqld]
log‐bin
然后启动 mysqld 就可以了。
运行过程中会产生 HOSTNAME‐bin.000001 以及 HOSTNAME‐bin.index,前面的文件是 mysqld 记录所有对数据的更新操作,后面的文件则是
所有 binlog 的索引,都不能轻易删除。关于 binlog 的更详细信息请查看手册。
(3). 设置 crontab 任务,每天执行备份脚本
shell> vi /etc/crontab
添加以下:
#每个星期六凌晨 : 执行完全备份脚本
* * root /usr/sbin/mysqlfullbak
#每天凌晨 : 做增量备份
* * *root /usr/sbin/mysqldailybak
(4). 使用 SSH 将 mysqldailybak mysqlfullbak rmbackup 三个文本内容放到系统/usr/sbin
目录下相应的文件中,并且添加可执行权限,如:chmod +x rmbackup
脚本内容
完全备份脚本:
#!/bin/bash
# Name:mysqlfullbak
# This is mysql mysqlfullbak scripts
# By song
# Last Modify:‐‐ #定义脚本存放路径
scriptsDir=/usr/sbin
#定义用户名及密码
user=root
userPWD=
#定义要备份的数据库
database=castor
#定义完全备份文件存放路径
bakDir=/srv/bakmysql eMailFile=$bakDir/email.txt
eMail=sdesong@.com
#定义日志文件
LogFile=$bakDir/mysqlbak.log DATE=`date +%Y%m%d`
echo " " >> $LogFile
echo " " >> $LogFile
echo "‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐" >> $LogFile
echo $(date +"%y‐%m‐%d %H:%M:%S") >>$LogFile
echo "‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐" >> $LogFile cd $bakDir
DumpFile=$DATE.sql
#GZDumpFile=$DATE.sql.tgz
mysqldump ‐‐flush‐logs ‐u$user ‐p$userPWD ‐‐quick $database >$DumpFile
echo "Dump Done" >> $LogFile
#tar cvzf $GZDumpFile $DumpFile >> $LogFile >&
#echo "[$GZDumpFile]Backup Success!" >> $LogFile
echo "[$DumpFile]Backup Success!" >> $LogFile #Delete old backup files(mtime>)
$scriptsDir/rmbackup #Delete previous daily backup files:完整备份后,删除增量备份的文件,只保留最近 天的增量备份文件
daily_databakDir=$bakDir/daily
cd $bakDir/daily
find $daily_databakDir ‐name "daily*" ‐type f ‐mtime + ‐exec rm {} \; > /dev/null >& #发送邮件通知
#cat $eMailFile | mail ‐s "MySQL Backup" $eMail
增量备份脚本:
#!/bin/bash
# Name:mysqldailybak
# This ia mysql mysqldailybak scripts
# By songdesong
# Last modify:‐‐
#定义用户名及密码
user=root
userPWD=
#定义数据库
database=castor /usr/bin/mysqladmin ‐u$user ‐p$userPWD flush‐logs
daily_databakDir=/srv/bakmysql/daily
#定义 MYSQL 数据目录
mysqlDataDir=/srv/mysql/ eMailFile=$daily_databakDir/email.txt
eMail=sdesong@.com DATE=`date +%Y%m%d`
logFile=$daily_databakDir/mysql$DATE.log
echo " " > $eMailFile
echo "‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐" >> $eMailFile
echo $(date +"%y‐%m‐%d %H:%M:%S") >> $eMailFile
echo "‐‐‐‐‐‐‐ ‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐" >> $eMailFile
TIME=$(date "‐d 10 day ago" +%Y%m%d%H%M%S)
StartTime=$(date "‐d 1 day ago" +"%Y‐%m‐%d %H:%M:%S")
echo “Delete days before the log” >>$eMailFile
mysql ‐u$user ‐p$userPWD ‐e "purge master logs before ${TIME}" && echo "delete 10 days
before log" |tee ‐a $eMailFile #删除 10 天前的 2 进制文件 filename=`cat $mysqlDataDir/mysqld‐bin.index |awk ‐F "/" '{print $2}'` # 进制文件
for i in $filename
do
echo "$StartTime start backup binlog" >> $eMailFile
mysqlbinlog ‐u$user ‐p$userPWD ‐d $database ‐‐start‐datetime="$StartTime"
$mysqlDataDir/$i >> $daily_databakDir/daily$DATE.sql |tee ‐a $eMailFile
done
if [ $? = ]
then # 删除 mtime> 的增量日志备份文件
find $daily_databakDir ‐name "*.log" ‐type f ‐mtime + ‐exec rm {} \; > /dev/null >& cd $daily_databakDir
#tar ‐cvzf $daily_databakDir/$database$DATE.tar.gz daily$DATE.sql >>/dev/null &
#scp 至另一台服务器
echo "Daily backup succeed" >> $eMailFile
else
echo "Daily backup fail" >> $eMailFile
mail ‐s "MySQL Backup" $eMail < $eMailFile #备份失败之后发送邮件通知
fi
cat $eMailFile > $logFile # 删除 mtime> 的增量日志备份文件
find $daily_databakDir ‐name "*.log" ‐type f ‐mtime + ‐exec rm {} \; > /dev/null >&
删除完全备份文件脚本:
#!/bin/sh
# Name:rmBackup
# PS:Delete old Backup.
# By:song
# Last Modify:‐‐
#
# 定义备份目录
dataBackupDir=/srv/bakmysql
# 删除 mtime> 的日志备份文件
find $dataBackupDir ‐name "*.sql" ‐type f ‐mtime + ‐exec rm {} \; > /dev/null >&
数据库恢复:
完全备份文件的恢复
完全备份文件的格式为:20110301.sql
登录 MYSQL(mysql –uroot –proot)
use castor;
source /home/20110301.sql
增量备份文件的恢复
增量备份文件的格式为:daily20110302.sql
use castor;
source /home/ daily20110302.sql
mysql增量备份(2/2)的更多相关文章
- innobackupex做MySQL增量备份及恢复【转】
创建备份用户 mysql> grant process,reload,lock tables,replication client on *.* to 'backup'@'localhost' ...
- MYSQL数据库自动本地/异地双备份/MYSQL增量备份
构建高安全电子商务网站之(网站文件及数据库自动本地/异地双备份)架构图 继续介绍Linux服务器文件备份,数据库备份,数据安全存储相关的电子商务系统架构.针对安全性有多种多样的解决方案,其中数据备份是 ...
- windows下mysql增量备份与全备份批处理
win下的全备批处理 批处理用于游戏服务器,经过严格测试,且正式使用,主要用来完全备份数据库,当然.这只是将数备份出来 ,至于如何将备份出来的数据远程传送的远程服务器上可以调用ftp的功能,此脚本并未 ...
- mysql增量备份 percona-xtrabackup
先说下实际环境 阿里云买的ESC跑的mysql服务,目前由于数据量过大,数据库目前有800多GB,每次全备需要等20多个小时才能够完成,然后就想到做增量备份,写下此文档 一.测试环境 [root@lo ...
- 【转】mysql增量备份恢复实战企业案例
来源地址:http://seanlook.com/2014/12/05/mysql_incremental_backup_example/ 小量的数据库可以每天进行完整备份,因为这也用不了多少时间,但 ...
- mysql增量备份脚本
#!/bin/sh ############################### # 此脚本用来增量备份 # 此文件名:mysqldailybackup.sh # # Author: zhangro ...
- mysql增量备份(1/2)
转自:http://www.centos.bz/2012/11/mysql-incremental-backup/ 小量的数据库我们可以每天进行完整备份,因为这也用不了多少时间,但当数据库很大时,我们 ...
- Mysql 增量备份和全量备份
全量备份: # vim /root/DBFullyBak.sh //添加以下内容 #!/bin/bash # Program # use mysqldump to Fully backup mysql ...
- python:mysql增量备份
模块:MySQLdb Crypto加密 ConfigParser加载配置 mydb.py #!/usr/bin/env python #coding=utf-8 import MySQLdb as m ...
随机推荐
- SQL按多个字段排序时的实现规则
1.在使用SQL中的ORDER BY按照表中的多个列对表做排序是,会按照第一个列的排序条件作为排序基准,当第一个列的值都相同时,才会按照后面的列的排序条件作为排序基准: 案例如下: 图一和图二展示的是 ...
- MYSQL使用外键进行优化
#转载请联系 假如你是京东的数据库管理员,你现在管理着这样一个数据库. mysql> select * from goods; +----+--------------------------- ...
- TimeUnit 笔记
TimeUnit笔记 1.TimeUnit 简介 TimeUnit是java.util.concurrent包下的一个枚举类,其主要封装了时间单位之间的转换以及基于时间上对线程的基本操作(sleep, ...
- mybatis-config.xml的解释(zz)
<!-- xml标准格式 --><?xml version="1.0" encoding="UTF-8"?> <!DOCTYPE ...
- Django基础之路由系统
Django的路由系统 Django 1.11版本 URLConf官方文档 URL配置(URLconf)就像Django 所支撑网站的目录.它的本质是URL与要为该URL调用的视图函数之间的映射表. ...
- 安装配置Elasticserch的方法
1.安装java环境 先查看环境是否安装 yum list installed |grep java 如果存在自带的环境则卸载 yum -y remove java--openjdk* 查看安装包 y ...
- HDU 6333.Problem B. Harvest of Apples-组合数C(n,0)到C(n,m)求和-组合数学(逆元)+莫队 ((2018 Multi-University Training Contest 4 1002))
2018 Multi-University Training Contest 4 6333.Problem B. Harvest of Apples 题意很好懂,就是组合数求和. 官方题解: 我来叨叨 ...
- 蒟蒻的9个背包的浩大工程(更新中)(无限延期)(太长了不舍删虽然写的lj的一匹)
所以说这就是一篇写炸的废文!!!! 所以说背包直接看dd大神的就好了,算了瞎写写吧. 0/1背包 有n件物品和一个容量为C的背包.第i件物品的重量是w[i],价值是v[i].求解将哪些物品放入背包可使 ...
- hdu6166
hdu6166 题意 给出一个有向图,选择 \(k\) 个点,问这 \(k\) 个点任意两点距离的最小值. 分析 按结点编号的二进制位,每次可以把所有点分到两个集合,那么求两个集合的点间的最短路即可( ...
- ASP.NET Core 2.2 基础知识(六) 配置(内含MySql+EF)
先上一段代码,了解一下 .NET Core 配置数据的结构. 新建一个 控制台项目,添加一个文件 json.json ,文件内容如下: { "country": "cn& ...