5、rsync全网备份
定时备份rsync(增量备份,无差异备份,daemon进程)+crontab,主要备份一些任务脚本和配置文件,如果此时有用户增加数据,
如果是增量备份的话不会备份下来,因为在备份的那一刻,数据已经被锁定了,所以定时的备份最好备份点为用户不操作数据时进行;
tar命令 和rsync命令使用时如果相同的文件更新时,会自动覆盖,mkdir -p:有目录就用现有的目录,无目录会创建,
touch当有相同的文件时只改变时间戳,而不改变内容,不报错有助于随时随地的备份,sync对比后没有更新的文件不会传送,
对比很浪费时间,因此需要优化这个;
5.1、在rsync备份服务器上,配置rsync服务:
服务端成功配置rsync,并在客户端成功推送
5.2、在客户端nfs服务器上,实现打包,推送,删除,定时任务推送:
打包:tar zcvfh /backup/backup_$(date +%F).tar.gz var/spool/cron/root etc/rc.local etc/sysconfig/iptables var/www/html app/logs
#h表示打包这个软链接对应的原文件
推送:rsync -avz /backup/ rsync_backup@172.16.1.41::backup/ --password-file=/etc/rsync.password
删除: find /backup/ -type f -name "*.tar.gz" -mtime +7| xargs rm -vf
(1)写入脚本文件:
[root@nfs01 /]# mkdir -p /server/scripts
[root@nfs01 /]# cd /server/scripts
[root@nfs01 scripts]# vim bak.sh
#!/bin/sh
export PATH=/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin:/root/bin
Ip=$(ifconfig eth1 | awk -F "[ :]+" 'NR==2 {print $4}')
Path=/backup
if [ $(date +%w) -eq 0 ]
then
Time=week_$(date +%F_%w -d -1day)
else
Time=$(date +%F -d -1day)
fi
cd /
mkdir $Path/$Ip/ -p
tar zcfh $Path/$Ip/backup_${Time}.tar.gz var/spool/cron/root etc/rc.local etc/sysconfig/iptables var/www/html app/logs
md5sum $Path/$Ip/backup_${Time}.tar.gz >$Path/$Ip/flag_${Time}.log
rsync -az $Path/ rsync_backup@172.16.1.41::backup/ --password-file=/etc/rsync.password
find $Path/ -type f -mtime +7 \( -name "*.tar.gz" -o -name "*.log" \) |xargs rm -f
chmod u+x /server/scripts/bak.sh
(2)定时任务:
crontab -e
00 00 * * * /bin/sh /server/scripts/bak.sh >/dev/null 2>&1
#每天的零点启动脚本如果更改日期比如2018/10/20 此时会导致脚本直接运行
[root@m01 ~]# date +%Y_%m_%d\ %H:%M:%S
2018_10_20 14:33:52
5.3、在rsync备份服务器上做检查,发邮件给管理员 (只对当天备份的内容进行校验和发送,删除除180天以前除周六的备份文件和数据)
(1)写入脚本:
[root@nfs01 /]# mkdir -p /server/scripts
[root@nfs01 /]# cd /server/scripts
[root@nfs01 scripts]# vim check_del_data.sh
#!/bin/sh
export PATH=/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin:/root/bin
LANG=en
Path=/backup
if [ $(date +%w) -eq 0 ]
then
Time=week_$(date +%F_%w -d -1day)
else
Time=$(date +%F -d -1day)
fi
find $Path/ -type f -name "flag_${Time}.log" |xargs md5sum -c >>$Path/flag_${Time}_md5sum_result.log 2>&1
mail -s "$Time bak result" hyjy2504164765@163.com <$Path/flag_${Time}_md5sum_result.log
find $Path/ -type f -mtime +180 ! -name "*week*6*" |xargs rm -f
chmod u+x /server/scripts/bak.sh
(2)定时任务:
crontab -e
00 06 * * * /bin/sh /server/scripts/check_del_data.sh >/dev/null 2>&1 #在数据传输完成时再校验和删除
(3)发送邮件:
A、163邮箱设置:
B、
vim /etc/mail.rc
set from=hyjy2504164765@163.com smtp=smtp.163.com smtp-auth-user=hyjy2504164765 smtp-auth-password=linux123 smtp-auth=login #163邮箱
5.4、邮箱服务介绍:
#安装mailx邮件服务
yum install mailx -y
#配置文件追加信息(/etc/mail.rc)
vim /etc/mail.rc
#发件人信息
set from=hyjy2504164765@163.com smtp=smtp.163.com smtp-auth-user=hyjy2504164765 smtp-auth-password=linux123 smtp-auth=login
from=hyjy2504164765@163.com #发件人邮箱地址(163设置得开起允许代理)
smtp=smtp.163.com #smtp地址
smtp-auth-user=hyjy2504164765 #邮箱用户名,不用加域名
smtp-auth-password=linux123 #邮箱密码(邮件密码是smtp代理授权码)
smtp-auth=login #邮箱验证方式
#测试发送
echo "邮件内容" | mail -s "标题" 邮箱地址
echo "hello world" | mail -s "hello" hyjy2504164765@163.com
#最好把你的发送邮件地址加入你接收邮箱的白名单,不然发多了可能被认为发送垃圾邮件而被163拒绝,这是真的
5、rsync全网备份的更多相关文章
- rsync全网备份low方法
要求: 1.基本备份要求已知3 台服务器主机名分别为web01.backup .nfs01,主机信息见下表:服务器说明外网IP(NAT) 内网IP(NAT) 主机名称nginx web 服务器10.0 ...
- day10、nfs+rsync全网备份及实时同步
题目要求 注意:博主使用的系统为: [root@web01 ~]# uname -a Linux web01 2.6.32-696.el6.x86_64 #1 SMP Tue Mar 21 19:29 ...
- rsync全网备份
rsync备份企业方案 企业有Linux服务器又有windows服务器,备份用rsync(服务端),Linux(客户端),Windows(客户端,cwrsync,旧版本有免费版)打包压缩数据往服务器上 ...
- 全网备份脚本rsync
一,服务端配置 #!/bin/sh ######################################################### #by:kingle # #use: confi ...
- Centos6.9 搭建rsync服务端与客户端 案例:全网备份项目
rsync的企业工作场景说明 1)定时备份 1.1生产场景集群架构服务器备份方案项目 借助cron+rsync把所有客户服务器数据同步到备份服务器 2)实时复制 本地数据传输模式(local-only ...
- ansible-playbook 实战案例 全网备份 实时备份
目录 ansible-playbook 基础介绍 1.YAML三板斧 2. ansible playbook 安装apache 示例 案例 全网备份 实时备份 环境规划 目录规划 base.yaml ...
- rsync实时备份备份服务搭建和使用指南
一.Rsync企业工作场景说明: 1.利用定时任务+rsync方式实现数据同步 对于网站内部技术人员创建的数据,可以采取定时任务的方式 2.利用实时任务+rsync方式实现数据同步 对于网站外部访问用 ...
- nfs详解及实现全网备份
1.统一hosts cat /etc/hosts 172.16.1.5 lb01 172.16.1.6 lb02 172.16.1.7 web02 172.16.1.8 web01 172.16.1. ...
- linux运维、架构之路-全网备份项目方案
一.项目需求说明 某公司有多台服务器,里面的数据很重要,如果磁盘坏了,数据就会丢失,所以公司要求把重要服务器数据备份以便出现问题时可以进行恢复,要求:每天晚上00点整在所有服务器上打包备份系统配置文件 ...
随机推荐
- CSS中常用的函数
一.CSS函数的用法 设置css的属性值时可以使用css函数,如果color:rgba(20,30,50,0.5),css中有很多这样的函数. 二.常用的CSS函数 a.calc()函数 这个函数 ...
- QT相关书籍
文章转载自:http://www.cctry.com/thread-290005-1-1.html 最近一段时间,陆陆续续给大家更新了不少基于Qt开发的不错的书籍,可以说每本都不错.不过放在这一堆大家 ...
- linux操作系统故障处理-ext4文件系统超级块损坏修复
linux操作系统故障处理-ext4文件系统超级块损坏修复 背景 前天外面出差大数据测试环境平台有7台服务器挂了,同事重启好了五台服务器,但是还有两台服务器启动不起来,第二天回来后我和同事再次去机 ...
- Mysql数据库基础增删改查常用语句命令
Mysql增删改查常用语句命令 一.增删改查语句总览 创建: create(创建数据库) 增:insert(插入表数据) 删:drop.delete(删除表.删除表数据) 改:update.alter ...
- Mysql 数据库基本操作
1.数据库设置密码 [root@db02 scripts]# mysqladmin -uroot password 123 2.使用密码登录 #1.正确的方式(不规范) [root@db02 scri ...
- Idea项目上传到gitlab(以新建项目为例)
1.首先,需要你自己登录GitLab,并新建一个项目的链接,如下图所示: 图一: 图二: 图三(idea上传时用到此链接): 2.在idea上新建一个demo项目,创建一个Git仓库: 3.点击创建后 ...
- 基础BaseController
1.依赖状态枚举 /** * status enum */ public enum Status { SUCCESS(0, "success", "成功"), ...
- 对抗性鲁棒性与模型压缩:ICCV2019论文解析
对抗性鲁棒性与模型压缩:ICCV2019论文解析 Adversarial Robustness vs. Model Compression, or Both? 论文链接: http://openacc ...
- TensorFlow单层感知机实现
TensorFlow单层感知机实现 简单感知机是一个单层神经网络.它使用阈值激活函数,正如 Marvin Minsky 在论文中所证明的,只能解决线性可分的问题.虽然限制了单层感知机只能应用于线性可分 ...
- NVIDIA Jarvis:一个GPU加速对话人工智能应用的框架
NVIDIA Jarvis:一个GPU加速对话人工智能应用的框架 Introducing NVIDIA Jarvis: A Framework for GPU-Accelerated Conversa ...