mysql增量备份(2/2)
前言
这是在百度文库里看到的文章,原名叫做《MYSQL 完全与增量备份及恢复文档 》,是关于完全备份和增量备份以及恢复文档的......
文档介绍
本文档采用 mysqldump 对数据库进行备份,mysqldump 是采用 SQL 级别的备份机制,它将数据表导成 SQL 脚本文件,在不同的 MySQL 版本之间升级时相对比较合适,这也是最常用的备份方法,mysqldump 比直接拷贝要慢些。
本文描述 Mysql 数据库的自动备份,包括完全备份和增量备份。其中,完全备份每周六执行一次,系统自动保存最近一个月的备份文件,增量备份每天都会执行,系统自动保存最近 35 天的备份文件。
备份策略布置
(1). 创建备份目录与文件
Shell> mkdir /srv/bakmysql
Shell> mkdir /srv/bakmysql/daily
Shell> touch /srv/bakmysql/mysqlbak.log
Shell>
(2). 启用二进制日志
采用 binlog 的方法相对来说更灵活,省心省力,而且还可以支持增量备份。
启用 binlog 时必须要重启 mysqld。首先,关闭 mysqld,打开 /etc/my.cnf,加入以下
几行:
[mysqld]
log‐bin
然后启动 mysqld 就可以了。
运行过程中会产生 HOSTNAME‐bin.000001 以及 HOSTNAME‐bin.index,前面的文件是 mysqld 记录所有对数据的更新操作,后面的文件则是
所有 binlog 的索引,都不能轻易删除。关于 binlog 的更详细信息请查看手册。
(3). 设置 crontab 任务,每天执行备份脚本
shell> vi /etc/crontab
添加以下:
#每个星期六凌晨 : 执行完全备份脚本
* * root /usr/sbin/mysqlfullbak
#每天凌晨 : 做增量备份
* * *root /usr/sbin/mysqldailybak
(4). 使用 SSH 将 mysqldailybak mysqlfullbak rmbackup 三个文本内容放到系统/usr/sbin
目录下相应的文件中,并且添加可执行权限,如:chmod +x rmbackup
脚本内容
完全备份脚本:
#!/bin/bash
# Name:mysqlfullbak
# This is mysql mysqlfullbak scripts
# By song
# Last Modify:‐‐ #定义脚本存放路径
scriptsDir=/usr/sbin
#定义用户名及密码
user=root
userPWD=
#定义要备份的数据库
database=castor
#定义完全备份文件存放路径
bakDir=/srv/bakmysql eMailFile=$bakDir/email.txt
eMail=sdesong@.com
#定义日志文件
LogFile=$bakDir/mysqlbak.log DATE=`date +%Y%m%d`
echo " " >> $LogFile
echo " " >> $LogFile
echo "‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐" >> $LogFile
echo $(date +"%y‐%m‐%d %H:%M:%S") >>$LogFile
echo "‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐" >> $LogFile cd $bakDir
DumpFile=$DATE.sql
#GZDumpFile=$DATE.sql.tgz
mysqldump ‐‐flush‐logs ‐u$user ‐p$userPWD ‐‐quick $database >$DumpFile
echo "Dump Done" >> $LogFile
#tar cvzf $GZDumpFile $DumpFile >> $LogFile >&
#echo "[$GZDumpFile]Backup Success!" >> $LogFile
echo "[$DumpFile]Backup Success!" >> $LogFile #Delete old backup files(mtime>)
$scriptsDir/rmbackup #Delete previous daily backup files:完整备份后,删除增量备份的文件,只保留最近 天的增量备份文件
daily_databakDir=$bakDir/daily
cd $bakDir/daily
find $daily_databakDir ‐name "daily*" ‐type f ‐mtime + ‐exec rm {} \; > /dev/null >& #发送邮件通知
#cat $eMailFile | mail ‐s "MySQL Backup" $eMail
增量备份脚本:
#!/bin/bash
# Name:mysqldailybak
# This ia mysql mysqldailybak scripts
# By songdesong
# Last modify:‐‐
#定义用户名及密码
user=root
userPWD=
#定义数据库
database=castor /usr/bin/mysqladmin ‐u$user ‐p$userPWD flush‐logs
daily_databakDir=/srv/bakmysql/daily
#定义 MYSQL 数据目录
mysqlDataDir=/srv/mysql/ eMailFile=$daily_databakDir/email.txt
eMail=sdesong@.com DATE=`date +%Y%m%d`
logFile=$daily_databakDir/mysql$DATE.log
echo " " > $eMailFile
echo "‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐" >> $eMailFile
echo $(date +"%y‐%m‐%d %H:%M:%S") >> $eMailFile
echo "‐‐‐‐‐‐‐ ‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐" >> $eMailFile
TIME=$(date "‐d 10 day ago" +%Y%m%d%H%M%S)
StartTime=$(date "‐d 1 day ago" +"%Y‐%m‐%d %H:%M:%S")
echo “Delete days before the log” >>$eMailFile
mysql ‐u$user ‐p$userPWD ‐e "purge master logs before ${TIME}" && echo "delete 10 days
before log" |tee ‐a $eMailFile #删除 10 天前的 2 进制文件 filename=`cat $mysqlDataDir/mysqld‐bin.index |awk ‐F "/" '{print $2}'` # 进制文件
for i in $filename
do
echo "$StartTime start backup binlog" >> $eMailFile
mysqlbinlog ‐u$user ‐p$userPWD ‐d $database ‐‐start‐datetime="$StartTime"
$mysqlDataDir/$i >> $daily_databakDir/daily$DATE.sql |tee ‐a $eMailFile
done
if [ $? = ]
then # 删除 mtime> 的增量日志备份文件
find $daily_databakDir ‐name "*.log" ‐type f ‐mtime + ‐exec rm {} \; > /dev/null >& cd $daily_databakDir
#tar ‐cvzf $daily_databakDir/$database$DATE.tar.gz daily$DATE.sql >>/dev/null &
#scp 至另一台服务器
echo "Daily backup succeed" >> $eMailFile
else
echo "Daily backup fail" >> $eMailFile
mail ‐s "MySQL Backup" $eMail < $eMailFile #备份失败之后发送邮件通知
fi
cat $eMailFile > $logFile # 删除 mtime> 的增量日志备份文件
find $daily_databakDir ‐name "*.log" ‐type f ‐mtime + ‐exec rm {} \; > /dev/null >&
删除完全备份文件脚本:
#!/bin/sh
# Name:rmBackup
# PS:Delete old Backup.
# By:song
# Last Modify:‐‐
#
# 定义备份目录
dataBackupDir=/srv/bakmysql
# 删除 mtime> 的日志备份文件
find $dataBackupDir ‐name "*.sql" ‐type f ‐mtime + ‐exec rm {} \; > /dev/null >&
数据库恢复:
完全备份文件的恢复
完全备份文件的格式为:20110301.sql
登录 MYSQL(mysql –uroot –proot)
use castor;
source /home/20110301.sql
增量备份文件的恢复
增量备份文件的格式为:daily20110302.sql
use castor;
source /home/ daily20110302.sql
mysql增量备份(2/2)的更多相关文章
- innobackupex做MySQL增量备份及恢复【转】
创建备份用户 mysql> grant process,reload,lock tables,replication client on *.* to 'backup'@'localhost' ...
- MYSQL数据库自动本地/异地双备份/MYSQL增量备份
构建高安全电子商务网站之(网站文件及数据库自动本地/异地双备份)架构图 继续介绍Linux服务器文件备份,数据库备份,数据安全存储相关的电子商务系统架构.针对安全性有多种多样的解决方案,其中数据备份是 ...
- windows下mysql增量备份与全备份批处理
win下的全备批处理 批处理用于游戏服务器,经过严格测试,且正式使用,主要用来完全备份数据库,当然.这只是将数备份出来 ,至于如何将备份出来的数据远程传送的远程服务器上可以调用ftp的功能,此脚本并未 ...
- mysql增量备份 percona-xtrabackup
先说下实际环境 阿里云买的ESC跑的mysql服务,目前由于数据量过大,数据库目前有800多GB,每次全备需要等20多个小时才能够完成,然后就想到做增量备份,写下此文档 一.测试环境 [root@lo ...
- 【转】mysql增量备份恢复实战企业案例
来源地址:http://seanlook.com/2014/12/05/mysql_incremental_backup_example/ 小量的数据库可以每天进行完整备份,因为这也用不了多少时间,但 ...
- mysql增量备份脚本
#!/bin/sh ############################### # 此脚本用来增量备份 # 此文件名:mysqldailybackup.sh # # Author: zhangro ...
- mysql增量备份(1/2)
转自:http://www.centos.bz/2012/11/mysql-incremental-backup/ 小量的数据库我们可以每天进行完整备份,因为这也用不了多少时间,但当数据库很大时,我们 ...
- Mysql 增量备份和全量备份
全量备份: # vim /root/DBFullyBak.sh //添加以下内容 #!/bin/bash # Program # use mysqldump to Fully backup mysql ...
- python:mysql增量备份
模块:MySQLdb Crypto加密 ConfigParser加载配置 mydb.py #!/usr/bin/env python #coding=utf-8 import MySQLdb as m ...
随机推荐
- 3个js函数 变成数组本身的3个方法
<!DOCTYPE html> 3个js函数 变成数组本身的3个方法 /** * 稀疏数组 变成不稀疏数组 * @params array arr 稀疏数组 * @return arry ...
- Linux下挂载存储设备
1. 安装iscsi (文件iscsi-initiator-utils-6.2.0.871-0.10.el5.x86_64.rpm在系统光盘可以找到) rpm -ivh iscsi-initiat ...
- django使用celery进行耗时任务的优化
# 原创,转载请留言联系 在用django做项目的时候,做到注册模块时,需要发送短信验证码.本来简简单单的做好了,后来优化的时候发现,发送短信验证码的时候需要一点时间,在这个时间之内程序是阻塞的,用户 ...
- Java 的初始化顺序
初始化顺序: 1.将对象内存空间初始化为二进制0(所有的数据成员被设为默认值) 2.如果该类有基类则初始化其基类(调用默认基类构造器,也可在子类构造器中指定调用基类的某个构造器) 3. 静态成员和静态 ...
- kafka 分区数
Kafka的分区,相当于把一个Topic再细分成了多个通道(对应 多个线程) 部署的时候尽量做到一个消费者(线程)对应一个分区. 如何确定Kafka的分区数,key和consumer线程数,以及不消费 ...
- 主席树 STL+二分【p3939】数颜色
Description 小 C 的兔子不是雪白的,而是五彩缤纷的.每只兔子都有一种颜色,不同的兔子可能有 相同的颜色.小 C 把她标号从 \(1\) 到 \(n\) 的 \(n\) 只兔子排成长长的一 ...
- 循环节(BFS)
循环节 时间限制: 1 Sec 内存限制: 64 MB提交: 56 解决: 16[提交][状态][讨论版] 题目描述 第一节是英语课.今天,老师又教了桐桐很多单词.桐桐发现所有单词都有循环节(大写 ...
- WebApi 的三种寄宿方式 (二) - 宿主和控制器不在一个程序集
新建一个类库: SelfHost: 方法一: 1.添加对MyControllers类库的引用. 2.在控制台代码中加入一行代码: 当然,可以添加多个程序集.(记得引用) var config = ne ...
- [BZOJ 2756] 奇怪的游戏
Link:https://www.lydsy.com/JudgeOnline/problem.php?id=2756 Algorithm: 比较新颖的题目 首先发现是对矩阵中相邻两数进行操作 & ...
- HDOJ 2582 f(n)
Discription This time I need you to calculate the f(n) . (3<=n<=1000000) f(n)= Gcd(3)+Gcd(4)+… ...