使用perconna xtrabackup备份脚本
使用percona xtrabackup对两个数据库实例进行备份,备份的脚本如下所示:
#!/bin/bash
BASEDIR="/usr/local/mysql"
BIN="$BASEDIR/bin"
MYDUMPE="/usr/local/bin/mydumper"
XTRABACKUP="/usr/bin/xtrabackup"
DATA1_HOME="$BASEDIR/mysqldata/data1"
DATA1_MYCNF="$DATA1_HOME/my.cnf"
DATA1_SOCK=`grep socket $DATA1_MYCNF|awk '{print $3}'`
DATA1_PORT=`grep port $DATA1_MYCNF|awk '{print $3}'`
DATA1_IP=`grep bind-address $DATA1_MYCNF|awk '{print $3}'` DATA2_HOME="$BASEDIR/mysqldata/data2"
DATA2_MYCNF="$DATA2_HOME/my.cnf"
DATA2_SOCK=`grep socket $DATA2_MYCNF|awk '{print $3}'`
DATA2_PORT=`grep port $DATA2_MYCNF|awk '{print $3}'`
DATA2_IP=`grep bind-address $DATA2_MYCNF|awk '{print $3}'` USER="root"
PASSWORD=""
BACKUPPATH_LOCAL="/usr/local/mysql/mysqldata/databak"
BACKUPPATH_REMOTE="/usr/local/mysql/databak"
#get the first day of one week,all backup directory is named by date,the incremental-basedir is the first day of the week
DATE="`date +%F`"
# get the day number of today in this week,monday is ,sunday is as the first day of this week
WEEKDAY="`date +%u`"
AGO="$WEEKDAY days ago"
WEEKNUM=`date +%U`
#get the first day of one week,as the incremental_back_base
WEEK_FIRST_DAY=`date -d "$AGO" +%F`
TODAY_DIR="$BACKUPPATH_LOCAL/today" # the full backup function
full_backup(){
local DEFAULTS_FILE=$
local USER=$
local PASSWORD=$
local SOCKET=$
local TARGET_DIR=$
local LOG_FILE=$
$BIN/mysql --user=$USER --password=$PASSWORD -S $SOCKET -e "stop slave;"
$XTRABACKUP --defaults-file=$DEFAULTS_FILE --backup --user=$USER --password=$PASSWORD --socket=$SOCKET --target-dir=$TARGET_DIR >$LOG_FILE >&
$BIN/mysql --user=$USER --password=$PASSWORD -S $SOCKET -e "start slave;" }
# the incremental backup function
incremental_backup(){
local DEFAULTS_FILE=$
local USER=$
local PASSWORD=$
local SOCKET=$
local TARGET_DIR=$
local LOG_FILE=$
local BASE_DIR=$
local NAME=$
$BIN/mysql --user=$USER --password=$PASSWORD -S $SOCKET -e "stop slave;"
$XTRABACKUP --defaults-file=$DEFAULTS_FILE --backup --user=$USER --password=$PASSWORD --socket=$SOCKET --incremental-basedir=$BASE_DIR --target-dir=$TARGET_DIR >$LOG_FILE >&
#$XTRABACKUP --defaults-file=$DEFAULTS_FILE --backup --user=$USER --password=$PASSWORD --socket=$SOCKET --compression --stream=xbstream --incremental-basedir=$BASE_DIR --target-dir=$TARGET_DIR >$DATE-$NAME.tar
$BIN/mysql --user=$USER --password=$PASSWORD -S $SOCKET -e "start slave;"
}
# check the mysql is running or not,if mysql is not running ,the backup will cancel
mysql_check(){
local SOCKET=$
local IP=$
local PORT=$
local NAME=$
if [ `ps -ef|grep $SOCKET|grep -Ev grep|wc -l` -ge ] && [ `netstat -ltnp|grep $IP:$PORT|grep -Ev grep|wc -l` -eq ]
then
echo " THE MYSQL SERVER $NAME IS RUNNING"
return
else
echo "THE MYSQL SERVER $NAME IS NOT RUNNING"
return
fi
} # main
# delete yesterday backup in TODAY directory
/bin/mv $TODAY_DIR/* $BACKUPPATH_LOCAL [ -e $TODAY_DIR ] || mkdir -p $TODAY_DIR
[ -e "$BACKUPPATH_LOCAL/$DATE" ] || mkdir -p "$BACKUPPATH_LOCAL/$DATE"
cd "$BACKUPPATH_LOCAL/$DATE" TARGET_DIR="$BACKUPPATH_LOCAL/$DATE" # if today is sunday,the backup type is full_backup,else the backup type is delta backup on the sunday full backup
if [ $WEEKDAY -eq 7 ]
then
mysql_check $DATA1_SOCK $DATA1_IP $DATA1_PORT "DATA1"
[ $? -eq 1 ] && full_backup $DATA1_MYCNF $USER $PASSWORD $DATA1_SOCK $TARGET_DIR/data1 "$TARGET_DIR/data1.log"
mysql_check $DATA2_SOCK $DATA2_IP $DATA2_PORT "DATA2"
#echo $TARGET_DIR
[ $? -eq 1 ] && full_backup $DATA2_MYCNF $USER $PASSWORD $DATA2_SOCK $TARGET_DIR/data2 "$TARGET_DIR/data2.log"
else
BASE_DIR=$BACKUPPATH_LOCAL/$WEEK_FIRST_DAY
mysql_check $DATA1_SOCK $DATA1_IP $DATA1_PORT "DATA1"
[ $? -eq 1 ] && incremental_backup $DATA1_MYCNF $USER $PASSWORD $DATA1_SOCK $TARGET_DIR/data1 $TARGET_DIR/data1.log $BASE_DIR/data1 data1
mysql_check $DATA2_SOCK $DATA2_IP $DATA2_PORT "DATA2"
[ $? -eq 1 ] && incremental_backup $DATA2_MYCNF $USER $PASSWORD $DATA2_SOCK $TARGET_DIR/data2 $TARGET_DIR/data2.log $BASE_DIR/data2 data2
fi
# copy today backup to TODAY directory,the NBU server will catch TODAY directory
#/bin/mv -ar $TARGET_DIR $TODAY_DIR /bin/mv $TARGET_DIR $TODAY_DIR
主要实现的功能是,每周日早上进行一次全备份操作,然后周内的每天,基于周日的全备,做一个增量备份的操作,每个实例备份的结果,放在以实例命名的目录下,每天忙备份的结果,放在以当前日期命名的目录下。
备份脚本对应的删除脚本,实现的功能是这样的,每周日,也就是全备的时候,去删除上上周的所有备份,保留上周的所有备份,这个时候要判断上上周的日期,并且找到所有这些目录,实现的脚本如下:
# delete the backup ,delete days ago full backup and the incremental backup based on that full backup BACKUPPATH=/usr/local/mysql/mysqldata/databak
DATE=`date +%F` DELETE_DATE_SUNDAY=`date -d "14 days ago" +%F`
for index in {-,-,-,-,-,-}
do
DELETE_DATE_WEEKDAY=`date -d "$index days ago $DELETE_DATE_SUNDAY" +%F`
DELETE_DATE_DIR=$BACKUPPATH/$DELETE_DATE_WEEKDAY
[ -e $DELETE_DATE_DIR ] && rm -rf $DELETE_DATE_DIR
done [ -e $BACKUPPATH/$DELETE_DATE_SUNDAY ] && rm -rf $BACKUPPATH/$DELETE_DATE_SUNDAY
在做主从备份的同时,需要对主服务器上面的binlog进行实时同步到从服务器上,因为主服务器上的binlog会被覆盖掉,所以需要在备份的从服务器上保留完整的binlog信息。具体的操作命令是
/usr/local/mysql/bin/mysqlbinlog --raw --read-from-remote-server --stop-never --host=*.*.*.* --port=**** --user=replication --password=**** mysql-bin. --result-file=/usr/local/mysql/mysqldata/master_binlog_bak/data1/back- &
这行命令的主要功能是从远方的服务器上同步binlog,-raw是指binlog 的格式,stop-never是指不中断的去同步,host和port、user和passeord是有replication权限的用户,后面要跟一个binlog 名称,也就是master主机上的binlog.index中存在的binlog文件名,result-file是要写一个目录名,如果除了目录名,还有其他的字段,那就是定义了目标文件的命名规则。比如/usr/local/mysql/mysqldata/databak/back-,则文件名称为back-mysql-bin.0000*.
使用perconna xtrabackup备份脚本的更多相关文章
- MySQL XtraBackup备份脚本
#backup.sh #!/bin/sh #on xtrabackup 2.1.8 # 第一次执行它的时候它会检查是否有完全备份,否则先创建一个全库备份 # 当你再次运行它的时候,它会根据脚本中的设 ...
- xtrabackup备份脚本
背景:现网环境全备份脚本:基于xtrabackup命令 #!/bin/sh # MySQL端口 PORT=' # 备份用户 USER='bkpuser' PAWD='bkpuser' Time=`da ...
- centos shell编程6一些工作中实践脚本 nagios监控脚本 自定义zabbix脚本 mysql备份脚本 zabbix错误日志 直接送给bc做计算 gzip innobackupex/Xtrabackup 第四十节课
centos shell编程6一些工作中实践脚本 nagios监控脚本 自定义zabbix脚本 mysql备份脚本 zabbix错误日志 直接送给bc做计算 gzip innobacku ...
- Xtrabackup每周增量备份脚本程序
Xtrabackup每周增量备份脚本程序(含附件) 程序描述 本程序是一个对percona xtrabackup使用的脚本,它完成了MySQL每周的备份. 程序结构 此程序包含了4个目录(bin. ...
- xtrabackup备份和恢复数据脚本
该脚本用于备份和恢复MySQL数据库. 总结xtrabackup备份的两个坑: 1.在恢复数据的过程中,如果中途出错,则数据将会被破坏,后续很难再恢复. 2.在恢复过程中,如果版本过低,在准备全量数据 ...
- Percona XtraBackup 备份原理说明【转】
本文来自:http://mysql.taobao.org/monthly/2016/03/07/ 前言 Percona XtraBackup(简称PXB)是 Percona 公司开发的一个用于 MyS ...
- XtraBackup备份笔记
安装 rpm -Uhv http://www.percona.com/downloads/percona-release/percona-release-0.0-1.x86_64.rpm yum in ...
- Python 生产环境MySQL数据库增量备份脚本
MySQL数据库常用的办法是通过MySQLdump导出sql进行备份,但是不适合数据量很大的数据库,速度,锁表是两个严重的问题.前面写了一遍文章介绍xtrabackup的热备工具,见 http://w ...
- Percona Xtrabackup备份mysql(转)
add by zhj:另外,参考了Xtrabackup之innobackupex备份恢复详解,我用的是Xtrabackup2.2.6版本, 可以成功备份和恢复指定的数据库. 原文:http://www ...
随机推荐
- Log4j2配置与使用
依赖包: <!-- https://mvnrepository.com/artifact/org.apache.logging.log4j/log4j-api --> <depend ...
- python numpy笔记(重要)
1.np.array 的shape (2,)与(2,1)含义 ndarray.shape:数组的维度.为一个表示数组在每个维度上大小的整数元组.例如二维数组中,表示数组的“行数”和“列数”. ndar ...
- 数据库语法group by
因为在做pgsql和mysql数据库时group by 有报错,但是在以前做mysql5.6的时候没有问题,虽然知道时违反了sql的语法问题,但是没有搞清楚什么原因,也找了不少资料,查找原因,在盆友的 ...
- jQuery方法区别:click() bind() live() delegate()区别
今天看到一篇jquery 事件的文章,自己写了个小例子,虽然2种方式都可以实现,但是不太明白,找了点资料 $("#box1").delegate("p",&qu ...
- Lodop“对象不支持SET__LICENSES属性或方法”SET__LICENSES is not a function”
Lodop中的方法如果书写错误,就会报错:“对象不支持XXX属性或方法”调试JS会报错”SET__LICENSES is not a function” LODOP.SET_LICENSES是加注册语 ...
- C 语言----- 指针
指针是一个值为内存地址的变量, 指针的核心是它是一个变量, 只不过它是用来存放内存地址的, 所以在了解指针之前,先说一下什么是变量.变量就是在内存中开辟的一个空间.如int year, 就是在内存中开 ...
- load加载层-layui
加载样式 //eg1 var index = layer.load(); //eg2 var index = layer.load(1); //换了种风格 //eg3 var index = laye ...
- ZIP压缩包加密破解
python多线程破解zip文件,废话不多说直接上代码 # -*- coding: UTF-8 -*- #使用多线程和接受参数的形式去破解指定的zip文件 #python3 zip_file_cack ...
- html概念
一.前端 1.什么是前端 前端即网站前台部分,运行在PC端等浏览器上展现给用户浏览的网页.随着互联网技术的发展, HTML5,CSS3,前端框架的应用,跨平台响应式网页设计能够适应各种屏幕分辨率,完美 ...
- C# Timer 的区别
首先,我们看一下 3种Timer 1.System.Threading.Timer 2.System.Timers.Timer 3.System.Windows.Forms.Timer 主要区别,其实 ...