使用perconna xtrabackup备份脚本
使用percona xtrabackup对两个数据库实例进行备份,备份的脚本如下所示:
#!/bin/bash
BASEDIR="/usr/local/mysql"
BIN="$BASEDIR/bin"
MYDUMPE="/usr/local/bin/mydumper"
XTRABACKUP="/usr/bin/xtrabackup"
DATA1_HOME="$BASEDIR/mysqldata/data1"
DATA1_MYCNF="$DATA1_HOME/my.cnf"
DATA1_SOCK=`grep socket $DATA1_MYCNF|awk '{print $3}'`
DATA1_PORT=`grep port $DATA1_MYCNF|awk '{print $3}'`
DATA1_IP=`grep bind-address $DATA1_MYCNF|awk '{print $3}'` DATA2_HOME="$BASEDIR/mysqldata/data2"
DATA2_MYCNF="$DATA2_HOME/my.cnf"
DATA2_SOCK=`grep socket $DATA2_MYCNF|awk '{print $3}'`
DATA2_PORT=`grep port $DATA2_MYCNF|awk '{print $3}'`
DATA2_IP=`grep bind-address $DATA2_MYCNF|awk '{print $3}'` USER="root"
PASSWORD=""
BACKUPPATH_LOCAL="/usr/local/mysql/mysqldata/databak"
BACKUPPATH_REMOTE="/usr/local/mysql/databak"
#get the first day of one week,all backup directory is named by date,the incremental-basedir is the first day of the week
DATE="`date +%F`"
# get the day number of today in this week,monday is ,sunday is as the first day of this week
WEEKDAY="`date +%u`"
AGO="$WEEKDAY days ago"
WEEKNUM=`date +%U`
#get the first day of one week,as the incremental_back_base
WEEK_FIRST_DAY=`date -d "$AGO" +%F`
TODAY_DIR="$BACKUPPATH_LOCAL/today" # the full backup function
full_backup(){
local DEFAULTS_FILE=$
local USER=$
local PASSWORD=$
local SOCKET=$
local TARGET_DIR=$
local LOG_FILE=$
$BIN/mysql --user=$USER --password=$PASSWORD -S $SOCKET -e "stop slave;"
$XTRABACKUP --defaults-file=$DEFAULTS_FILE --backup --user=$USER --password=$PASSWORD --socket=$SOCKET --target-dir=$TARGET_DIR >$LOG_FILE >&
$BIN/mysql --user=$USER --password=$PASSWORD -S $SOCKET -e "start slave;" }
# the incremental backup function
incremental_backup(){
local DEFAULTS_FILE=$
local USER=$
local PASSWORD=$
local SOCKET=$
local TARGET_DIR=$
local LOG_FILE=$
local BASE_DIR=$
local NAME=$
$BIN/mysql --user=$USER --password=$PASSWORD -S $SOCKET -e "stop slave;"
$XTRABACKUP --defaults-file=$DEFAULTS_FILE --backup --user=$USER --password=$PASSWORD --socket=$SOCKET --incremental-basedir=$BASE_DIR --target-dir=$TARGET_DIR >$LOG_FILE >&
#$XTRABACKUP --defaults-file=$DEFAULTS_FILE --backup --user=$USER --password=$PASSWORD --socket=$SOCKET --compression --stream=xbstream --incremental-basedir=$BASE_DIR --target-dir=$TARGET_DIR >$DATE-$NAME.tar
$BIN/mysql --user=$USER --password=$PASSWORD -S $SOCKET -e "start slave;"
}
# check the mysql is running or not,if mysql is not running ,the backup will cancel
mysql_check(){
local SOCKET=$
local IP=$
local PORT=$
local NAME=$
if [ `ps -ef|grep $SOCKET|grep -Ev grep|wc -l` -ge ] && [ `netstat -ltnp|grep $IP:$PORT|grep -Ev grep|wc -l` -eq ]
then
echo " THE MYSQL SERVER $NAME IS RUNNING"
return
else
echo "THE MYSQL SERVER $NAME IS NOT RUNNING"
return
fi
} # main
# delete yesterday backup in TODAY directory
/bin/mv $TODAY_DIR/* $BACKUPPATH_LOCAL [ -e $TODAY_DIR ] || mkdir -p $TODAY_DIR
[ -e "$BACKUPPATH_LOCAL/$DATE" ] || mkdir -p "$BACKUPPATH_LOCAL/$DATE"
cd "$BACKUPPATH_LOCAL/$DATE" TARGET_DIR="$BACKUPPATH_LOCAL/$DATE" # if today is sunday,the backup type is full_backup,else the backup type is delta backup on the sunday full backup
if [ $WEEKDAY -eq 7 ]
then
mysql_check $DATA1_SOCK $DATA1_IP $DATA1_PORT "DATA1"
[ $? -eq 1 ] && full_backup $DATA1_MYCNF $USER $PASSWORD $DATA1_SOCK $TARGET_DIR/data1 "$TARGET_DIR/data1.log"
mysql_check $DATA2_SOCK $DATA2_IP $DATA2_PORT "DATA2"
#echo $TARGET_DIR
[ $? -eq 1 ] && full_backup $DATA2_MYCNF $USER $PASSWORD $DATA2_SOCK $TARGET_DIR/data2 "$TARGET_DIR/data2.log"
else
BASE_DIR=$BACKUPPATH_LOCAL/$WEEK_FIRST_DAY
mysql_check $DATA1_SOCK $DATA1_IP $DATA1_PORT "DATA1"
[ $? -eq 1 ] && incremental_backup $DATA1_MYCNF $USER $PASSWORD $DATA1_SOCK $TARGET_DIR/data1 $TARGET_DIR/data1.log $BASE_DIR/data1 data1
mysql_check $DATA2_SOCK $DATA2_IP $DATA2_PORT "DATA2"
[ $? -eq 1 ] && incremental_backup $DATA2_MYCNF $USER $PASSWORD $DATA2_SOCK $TARGET_DIR/data2 $TARGET_DIR/data2.log $BASE_DIR/data2 data2
fi
# copy today backup to TODAY directory,the NBU server will catch TODAY directory
#/bin/mv -ar $TARGET_DIR $TODAY_DIR /bin/mv $TARGET_DIR $TODAY_DIR
主要实现的功能是,每周日早上进行一次全备份操作,然后周内的每天,基于周日的全备,做一个增量备份的操作,每个实例备份的结果,放在以实例命名的目录下,每天忙备份的结果,放在以当前日期命名的目录下。
备份脚本对应的删除脚本,实现的功能是这样的,每周日,也就是全备的时候,去删除上上周的所有备份,保留上周的所有备份,这个时候要判断上上周的日期,并且找到所有这些目录,实现的脚本如下:
# delete the backup ,delete days ago full backup and the incremental backup based on that full backup BACKUPPATH=/usr/local/mysql/mysqldata/databak
DATE=`date +%F` DELETE_DATE_SUNDAY=`date -d "14 days ago" +%F`
for index in {-,-,-,-,-,-}
do
DELETE_DATE_WEEKDAY=`date -d "$index days ago $DELETE_DATE_SUNDAY" +%F`
DELETE_DATE_DIR=$BACKUPPATH/$DELETE_DATE_WEEKDAY
[ -e $DELETE_DATE_DIR ] && rm -rf $DELETE_DATE_DIR
done [ -e $BACKUPPATH/$DELETE_DATE_SUNDAY ] && rm -rf $BACKUPPATH/$DELETE_DATE_SUNDAY
在做主从备份的同时,需要对主服务器上面的binlog进行实时同步到从服务器上,因为主服务器上的binlog会被覆盖掉,所以需要在备份的从服务器上保留完整的binlog信息。具体的操作命令是
/usr/local/mysql/bin/mysqlbinlog --raw --read-from-remote-server --stop-never --host=*.*.*.* --port=**** --user=replication --password=**** mysql-bin. --result-file=/usr/local/mysql/mysqldata/master_binlog_bak/data1/back- &
这行命令的主要功能是从远方的服务器上同步binlog,-raw是指binlog 的格式,stop-never是指不中断的去同步,host和port、user和passeord是有replication权限的用户,后面要跟一个binlog 名称,也就是master主机上的binlog.index中存在的binlog文件名,result-file是要写一个目录名,如果除了目录名,还有其他的字段,那就是定义了目标文件的命名规则。比如/usr/local/mysql/mysqldata/databak/back-,则文件名称为back-mysql-bin.0000*.
使用perconna xtrabackup备份脚本的更多相关文章
- MySQL XtraBackup备份脚本
#backup.sh #!/bin/sh #on xtrabackup 2.1.8 # 第一次执行它的时候它会检查是否有完全备份,否则先创建一个全库备份 # 当你再次运行它的时候,它会根据脚本中的设 ...
- xtrabackup备份脚本
背景:现网环境全备份脚本:基于xtrabackup命令 #!/bin/sh # MySQL端口 PORT=' # 备份用户 USER='bkpuser' PAWD='bkpuser' Time=`da ...
- centos shell编程6一些工作中实践脚本 nagios监控脚本 自定义zabbix脚本 mysql备份脚本 zabbix错误日志 直接送给bc做计算 gzip innobackupex/Xtrabackup 第四十节课
centos shell编程6一些工作中实践脚本 nagios监控脚本 自定义zabbix脚本 mysql备份脚本 zabbix错误日志 直接送给bc做计算 gzip innobacku ...
- Xtrabackup每周增量备份脚本程序
Xtrabackup每周增量备份脚本程序(含附件) 程序描述 本程序是一个对percona xtrabackup使用的脚本,它完成了MySQL每周的备份. 程序结构 此程序包含了4个目录(bin. ...
- xtrabackup备份和恢复数据脚本
该脚本用于备份和恢复MySQL数据库. 总结xtrabackup备份的两个坑: 1.在恢复数据的过程中,如果中途出错,则数据将会被破坏,后续很难再恢复. 2.在恢复过程中,如果版本过低,在准备全量数据 ...
- Percona XtraBackup 备份原理说明【转】
本文来自:http://mysql.taobao.org/monthly/2016/03/07/ 前言 Percona XtraBackup(简称PXB)是 Percona 公司开发的一个用于 MyS ...
- XtraBackup备份笔记
安装 rpm -Uhv http://www.percona.com/downloads/percona-release/percona-release-0.0-1.x86_64.rpm yum in ...
- Python 生产环境MySQL数据库增量备份脚本
MySQL数据库常用的办法是通过MySQLdump导出sql进行备份,但是不适合数据量很大的数据库,速度,锁表是两个严重的问题.前面写了一遍文章介绍xtrabackup的热备工具,见 http://w ...
- Percona Xtrabackup备份mysql(转)
add by zhj:另外,参考了Xtrabackup之innobackupex备份恢复详解,我用的是Xtrabackup2.2.6版本, 可以成功备份和恢复指定的数据库. 原文:http://www ...
随机推荐
- HTTP协议 - 使用php模拟get/post请求
首先 有个疑问, 是不是只有浏览器才能发送http 请求? 答案肯定是错的,第一篇就说了,http是由请求行,请求头,请求主体三个部分组成,那么我们可不可以用代码来模拟一下get和post请求呢: 首 ...
- Base64 总结
Base64编码是解决一些无法打印的字符无法显示的问题,将8位的ascii编码转换为6位的表示64个可见字符的算法. 具体而言,首先将编码每三个分成一组,将三个字符转换为总长为24位的二进制 数字,将 ...
- Photoshop独立安装包下载页面
下载页面地址:https://helpx.adobe.com/cn/creative-cloud/kb/creative-cloud-apps-download.html
- 以@GetMapping为例,SpringMVC 组合注解
@GetMapping是一个组合注解,是@RequestMapping(method = RequestMethod.GET)的缩写.该注解将HTTP Get 映射到 特定的处理方法上.
- B - I Hate It HDU - 1754 线段树区间最大值板子(单点更新,区间最大)
第一次打 改了半天 各种小错误 难受 #include<cstdio> #include<iostream> using namespace std; +; int a[ma ...
- 【Gym 100812C】Story of Princess (走完图所有边)
BUPT2017 wintertraining(15) #7A 题意 给你一个图,n个点m条边,求走遍所有边,至少经过几次点,及输出依次经过的点.n and m (2 ≤ n ≤ 10^5, 1 ≤ ...
- zabbix 自定义 nginx 监控模板
打开zabbix首页→配置→模板→创建模板模板名称:Template App NGINXagent 需添加自定义监控项:UserParameter=nginx.status[*],/bin/bash ...
- 【NowCoder368E】车站(线段树)
[NowCoder368E]车站(线段树) 题面 牛客网 题解 链交的结果显然和求解的顺序无关,因此我们可以拿线段树维护区间链的链交结果. 然后怎么求解最远点. 维护链交的时候再记录两个点表示到达链交 ...
- 【博弈论】浅谈泛Nim游戏
Nim游戏在ACM中碰到了,就拎出来写写. 一般Nim游戏:有n堆石子,每堆石子有$a_i$个,每次可以取每堆石子中$[0,a_i-1]$,问先手是否有必胜策略. 泛Nim游戏:每堆石子有$a_i$个 ...
- GCC online documentation
@2019-02-21 [小记] 编译规则.关键字属性等一些参考手册说明 GCC online documentation