一条命令解决分库分表备份:

[root@db01 data]# mysql -uroot -p123456  -e "show databases;"|egrep -v "Data|sche|mysql|inf"|sed -r 's#^(.*)#mysqldump -uroot -p123456 -B \1 >/data/db/\1.sql.gz#g'|bash

实现思路

1)编程思想

mysqldump db1>db1.sql

mysqldump db2>db2.sql

.............

2)显示要备份的数据库

[root@web03 ~]# mysql -uroot -p123456 -S /data//mysql.sock  -e "show databases;"|grep -Evi "database|infor|perfor"
abcdocker
cnsyk
mysql
oldboy
syk_utf8
test

3)循环db,dump

实现脚本如下:

#!/bin/bash
#created by yangqiqi -- USERNAME=root #备份的用户名
PASSWORD= #备份的密码
HOST=localhost #备份主机
DATE=`date +%Y-%m-%d` #用来做备份文件名字的一部分
OLDDATE=`date +%Y-%m-%d -d '-10 days'` #本地保存天数 #指定命令所用的全路径
MYSQL=/application/mysql/bin/mysql
MYSQLDUMP=/application/mysql/bin/mysqldump
MYSQLADMIN=/application/mysql/bin/mysqladmin #创建备份的目录和文件
BACKDIR=/data/backup/db
[ -d ${BACKDIR} ] || mkdir -p ${BACKDIR}
[ -d ${BACKDIR}/${DATE} ] || mkdir ${BACKDIR}/${DATE}
[ ! -d ${BACKDIR}/${OLDDATE} ] || rm -rf ${BACKDIR}/${OLDDATE} #保存10天 多余的删除最前边的
#开始备份 for循环想要备份的数据库
MYSQLDUMP_LIST=`mysql -uroot -p'' -S /data//mysql.sock -e "show databases"| grep -Evi "database|infor|perfor"` for DBNAME in ${MYSQLDUMP_LIST} ##使用for依次罗列需要备份的数据库
do
${MYSQLDUMP} -B -F --master-data= --single-transaction -u${USERNAME} -p${PASSWORD} -S /data//mysql.sock ${DBNAME} | gzip > ${BACKDIR}/${DATE}/${DBNAME}-backup-${DATE}.sql.gz
/bin/sleep
logger "${DBNAME} has been backup successful - $DATE"
done
脚本出处:https://www.cnblogs.com/lazyball/p/8662586.html

脚本注意点:

MYSQLDUMP_LIST=`mysql -uroot -p'123456'  -e "show databases"| grep -Evi "database|infor|perfor"` 过滤掉不需要备份的数据库,这里需要注意,过滤完成
后拿到的库名是自己需要备份的库名,如果自建的库有的也叫infor开头或者perfor的可能会被过滤掉,按照个人情况调整。

每天的备份样式如下:

[root@web03 ~]# cd /data/backup/db/
[root@web03 db]# ll
总用量
drwxr-xr-x root root 7月 : --
[root@web03 db]# cd --/
[root@web03 --]# ll
总用量
-rw-r--r-- root root 7月 : abcdocker-backup--
-rw-r--r-- root root 7月 : cnsyk-backup---
-rw-r--r-- root root 7月 : mysql-backup---
-rw-r--r-- root root 7月 : oldboy-backup---
-rw-r--r-- root root 7月 : syk_utf8-backup--
-rw-r--r-- root root 7月 : test-backup---

logger解释

logger 是一个shell 命令接口,可以通过该接口使用Syslog的系统日志模块,还可以从命令行直接向系统日志文件写入一行信息。
日志的级别
日志的级别分为七级,从紧急程度由高到底:
emerg 系统已经不可用,级别为紧急
alert 警报,需要立即处理和解决
crit 既将发生,得需要预防。事件就要发生
warnig 警告
err 错误信息,普通的错误信息
notice 提醒信息,很重要的信息
info 通知信息,属于一般信息
debug 这是调试类信息

上边的脚本备份完毕后  就可以在   看到每个数据库备份的信息  logger的作用

[root@web03 ~]# tail -f /var/log/messages
Jul :: web03 rpc.statd[]: Version 1.2. starting
Jul :: web03 sm-notify[]: Version 1.2. starting
Jul :: web03 root: abcdocker has been backup successful - --
Jul :: web03 root: cnsyk has been backup successful - --
Jul :: web03 root: abcdocker has been backup successful - --
Jul :: web03 root: cnsyk has been backup successful - --
Jul :: web03 root: mysql has been backup successful - --
Jul :: web03 root: oldboy has been backup successful - --
Jul :: web03 root: syk_utf8 has been backup successful - --
Jul :: web03 root: test has been backup successful - --

生成场景需求:

每天凌晨1点把 A服务器上/data/backup/db/下的数据备份文件放到 B服务器里的/data/backup/db_192.168.1.11/目录下 
不是累加 是增量更新 (--delete)
 
A服务器:
数据源服务器:
yum install rsync
 
打开防火墙 关闭seLinux:
-A INPUT -p tcp -m state --state NEW -m tcp --dport 873 -j ACCEPT
 
B服务器:ssh-keygen
把公钥文件里的id_rsa.pub内容复制到 A服务器里的authorized_keys 
文件中准备脚本文件  :
#!/bin/bash
usr/bin/rsync -avz --delete -e "ssh -p 4396" root@192.168.1.11:/data/backup/db /data/backup/db_192.168.1./
logger "Successful backup file transfer - $DATE"

mysql数据库使用脚本实现分库备份过程的更多相关文章

  1. mysql数据库备份脚本

    mysql数据库备份脚本 mysql数据库分库备份脚本:[root@localhost tmp]# cat mysql.sh #!/bin/bash USER=root PASSWORD=joy4yo ...

  2. Windows下MySQL数据库备份脚本(一)

    说明: MySQL数据库安装目录:C:\Program Files\MySQL\MySQL Server 5.0 MySQL数据库存放目录:C:\Program Files\MySQL\MySQL S ...

  3. Windows下MySQL数据库备份脚本(二)

    说明: MySQL数据库安装目录:C:\Program Files\MySQL\MySQL Server 5.0 MySQL数据库存放目录:C:\Program Files\MySQL\MySQL S ...

  4. Ubuntu Server下MySql数据库备份脚本代码

    明: 我这里要把MySql数据库存放目录/var/lib/mysql下面的pw85数据库备份到/home/mysql_data里面,并且保存为mysqldata_bak_2012_04_11.tar. ...

  5. mysql数据库备份脚本一例

    例子,mysql数据库备份脚本.vim mysql.sh #!/bin/bash DAY=`date +%Y-%m-%d` //日期以年月日显示并赋予DAY变量 SIZE=`du -sh /var/l ...

  6. MySQL 数据库备份脚本

    MySQL 数据库备份脚本 #!/bin/bash # 数据库连接信息 DB_HOST="127.0.0.1" DB_PORT="3306" DB_USER=& ...

  7. MYSQL数据库数据拆分之分库分表总结

    数据存储演进思路一:单库单表 单库单表是最常见的数据库设计,例如,有一张用户(user)表放在数据库db中,所有的用户都可以在db库中的user表中查到. 数据存储演进思路二:单库多表 随着用户数量的 ...

  8. <转>MYSQL数据库数据拆分之分库分表总结

    数据存储演进思路一:单库单表 单库单表是最常见的数据库设计,例如,有一张用户(user)表放在数据库db中,所有的用户都可以在db库中的user表中查到. 数据存储演进思路二:单库多表 随着用户数量的 ...

  9. MYSQL数据库数据拆分之分库分表总结 (转)

      数据存储演进思路一:单库单表 单库单表是最常见的数据库设计,例如,有一张用户(user)表放在数据库db中,所有的用户都可以在db库中的user表中查到. 数据存储演进思路二:单库多表 随着用户数 ...

随机推荐

  1. asp.net mvc 3高级编程文摘

    第一章 入门 M:模型,组类,描述了要处理的数据以及修改和操作数据的业务规则 V:视图,定义应用程序用户界面的显示方式 C:控制器,一组类,用于处理来自用户,整个应用程序流以及特定应用程序逻辑的通信 ...

  2. Android 密匙库导出

    导出debug 签名----------------------------- C:\Documents and Settings\Administrator>keytool -list -v ...

  3. span和input同一行布局的时候,高度偏移解决方案

    input标签或收盘标签 添加代码: vertical-align:top;

  4. HDU 5120 Intersection (圆的面积交)

    题意:给定两个圆环,求两个圆环的面积交. 析:很容易知道,圆环面积交就是,大圆与大圆面积交 - 大圆和小圆面积交 - 小圆和大圆面积交 + 小圆和小圆面积交. 代码如下: #pragma commen ...

  5. fakeapp, faceswap, deepfacelab等deepfakes换脸程序的简单对比

    https://deepfakes.com.cn/index.php/95.html https://www.cnblogs.com/zackstang/p/9011753.html

  6. 机器学习—集成学习(XGBoost)

    一.原理部分: 二.xgboost实现 看看大神的博客瞬间了解:https://blog.csdn.net/han_xiaoyang/article/details/52665396

  7. docker 版本变化及说明

    Docker从1.13.x版本开始,版本分为企业版EE和社区版CE,版本号也改为按照时间线来发布,比如17.03就是2017年3月,有点类似于ubuntu的版本发布方式. 企业版自然会提供一些额外的服 ...

  8. php 图像处理库ImageMagick windows下的安装

    http://blog.sina.com.cn/s/blog_966e43000101bgqj.html

  9. 30个你 “ 不可能全部会做 ” 的javascript题目-答案解释

    题目链接:http://www.cnblogs.com/0603ljx/p/4458127.html 1,D map对数组的每个元素调用定义的回调函数并返回包含结果的数组.["1" ...

  10. k8s 常用指令

    kubectl rolling-update redis-master --image=redis-master:2.0 基于镜像灰度发布 推荐链接