定时备份rsync(增量备份,无差异备份,daemon进程)+crontab,主要备份一些任务脚本和配置文件,如果此时有用户增加数据,

如果是增量备份的话不会备份下来,因为在备份的那一刻,数据已经被锁定了,所以定时的备份最好备份点为用户不操作数据时进行;

tar命令 和rsync命令使用时如果相同的文件更新时,会自动覆盖,mkdir -p:有目录就用现有的目录,无目录会创建,

touch当有相同的文件时只改变时间戳,而不改变内容,不报错有助于随时随地的备份,sync对比后没有更新的文件不会传送,

对比很浪费时间,因此需要优化这个;

5.1、在rsync备份服务器上,配置rsync服务:

服务端成功配置rsync,并在客户端成功推送

5.2、在客户端nfs服务器上,实现打包,推送,删除,定时任务推送:

打包:tar zcvfh /backup/backup_$(date +%F).tar.gz var/spool/cron/root etc/rc.local etc/sysconfig/iptables var/www/html app/logs

#h表示打包这个软链接对应的原文件

推送:rsync -avz /backup/ rsync_backup@172.16.1.41::backup/ --password-file=/etc/rsync.password

删除: find /backup/ -type f -name "*.tar.gz" -mtime +7| xargs rm -vf

(1)写入脚本文件:

[root@nfs01 /]# mkdir -p /server/scripts

[root@nfs01 /]# cd /server/scripts

[root@nfs01 scripts]# vim bak.sh

#!/bin/sh

export PATH=/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin:/root/bin

Ip=$(ifconfig eth1 | awk -F "[ :]+" 'NR==2 {print $4}')

Path=/backup

if [ $(date +%w) -eq 0 ]

then

Time=week_$(date +%F_%w -d -1day)

else

Time=$(date +%F -d -1day)

fi

cd /

mkdir $Path/$Ip/ -p

tar zcfh $Path/$Ip/backup_${Time}.tar.gz var/spool/cron/root etc/rc.local etc/sysconfig/iptables var/www/html app/logs

md5sum $Path/$Ip/backup_${Time}.tar.gz >$Path/$Ip/flag_${Time}.log

rsync -az $Path/ rsync_backup@172.16.1.41::backup/ --password-file=/etc/rsync.password

find $Path/ -type f -mtime +7 \( -name "*.tar.gz" -o -name "*.log" \) |xargs rm -f

chmod u+x /server/scripts/bak.sh

(2)定时任务:

crontab -e

00 00 * * * /bin/sh /server/scripts/bak.sh >/dev/null 2>&1

#每天的零点启动脚本如果更改日期比如2018/10/20 此时会导致脚本直接运行

[root@m01 ~]# date +%Y_%m_%d\ %H:%M:%S

2018_10_20 14:33:52

5.3、在rsync备份服务器上做检查,发邮件给管理员 (只对当天备份的内容进行校验和发送,删除除180天以前除周六的备份文件和数据)

(1)写入脚本:

[root@nfs01 /]# mkdir -p /server/scripts

[root@nfs01 /]# cd /server/scripts

[root@nfs01 scripts]# vim check_del_data.sh

#!/bin/sh

export PATH=/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin:/root/bin

LANG=en

Path=/backup

if [ $(date +%w) -eq 0 ]

then

Time=week_$(date +%F_%w -d -1day)

else

Time=$(date +%F -d -1day)

fi

find $Path/ -type f -name "flag_${Time}.log" |xargs md5sum -c >>$Path/flag_${Time}_md5sum_result.log 2>&1

mail -s "$Time bak result" hyjy2504164765@163.com <$Path/flag_${Time}_md5sum_result.log

find $Path/ -type f -mtime +180 ! -name "*week*6*" |xargs rm -f

chmod u+x /server/scripts/bak.sh

(2)定时任务:

crontab -e

00 06 * * * /bin/sh /server/scripts/check_del_data.sh >/dev/null 2>&1 #在数据传输完成时再校验和删除

(3)发送邮件:

A、163邮箱设置:

B、

vim /etc/mail.rc

set from=hyjy2504164765@163.com smtp=smtp.163.com smtp-auth-user=hyjy2504164765 smtp-auth-password=linux123 smtp-auth=login #163邮箱

5.4、邮箱服务介绍:

#安装mailx邮件服务

yum install mailx -y

#配置文件追加信息(/etc/mail.rc)

vim /etc/mail.rc

#发件人信息

set from=hyjy2504164765@163.com smtp=smtp.163.com smtp-auth-user=hyjy2504164765 smtp-auth-password=linux123 smtp-auth=login

from=hyjy2504164765@163.com #发件人邮箱地址(163设置得开起允许代理)

smtp=smtp.163.com #smtp地址

smtp-auth-user=hyjy2504164765 #邮箱用户名,不用加域名

smtp-auth-password=linux123 #邮箱密码(邮件密码是smtp代理授权码)

smtp-auth=login #邮箱验证方式

#测试发送

echo "邮件内容" | mail -s "标题" 邮箱地址

echo "hello world" | mail -s "hello" hyjy2504164765@163.com

#最好把你的发送邮件地址加入你接收邮箱的白名单,不然发多了可能被认为发送垃圾邮件而被163拒绝,这是真的

5、rsync全网备份的更多相关文章

  1. rsync全网备份low方法

    要求: 1.基本备份要求已知3 台服务器主机名分别为web01.backup .nfs01,主机信息见下表:服务器说明外网IP(NAT) 内网IP(NAT) 主机名称nginx web 服务器10.0 ...

  2. day10、nfs+rsync全网备份及实时同步

    题目要求 注意:博主使用的系统为: [root@web01 ~]# uname -a Linux web01 2.6.32-696.el6.x86_64 #1 SMP Tue Mar 21 19:29 ...

  3. rsync全网备份

    rsync备份企业方案 企业有Linux服务器又有windows服务器,备份用rsync(服务端),Linux(客户端),Windows(客户端,cwrsync,旧版本有免费版)打包压缩数据往服务器上 ...

  4. 全网备份脚本rsync

    一,服务端配置 #!/bin/sh ######################################################### #by:kingle # #use: confi ...

  5. Centos6.9 搭建rsync服务端与客户端 案例:全网备份项目

    rsync的企业工作场景说明 1)定时备份 1.1生产场景集群架构服务器备份方案项目 借助cron+rsync把所有客户服务器数据同步到备份服务器 2)实时复制 本地数据传输模式(local-only ...

  6. ansible-playbook 实战案例 全网备份 实时备份

    目录 ansible-playbook 基础介绍 1.YAML三板斧 2. ansible playbook 安装apache 示例 案例 全网备份 实时备份 环境规划 目录规划 base.yaml ...

  7. rsync实时备份备份服务搭建和使用指南

    一.Rsync企业工作场景说明: 1.利用定时任务+rsync方式实现数据同步 对于网站内部技术人员创建的数据,可以采取定时任务的方式 2.利用实时任务+rsync方式实现数据同步 对于网站外部访问用 ...

  8. nfs详解及实现全网备份

    1.统一hosts cat /etc/hosts 172.16.1.5 lb01 172.16.1.6 lb02 172.16.1.7 web02 172.16.1.8 web01 172.16.1. ...

  9. linux运维、架构之路-全网备份项目方案

    一.项目需求说明 某公司有多台服务器,里面的数据很重要,如果磁盘坏了,数据就会丢失,所以公司要求把重要服务器数据备份以便出现问题时可以进行恢复,要求:每天晚上00点整在所有服务器上打包备份系统配置文件 ...

随机推荐

  1. [bug] jupyter notebook:服务在阿里云上启动,本地浏览器无法访问

    问题 在阿里云上装了个jupyter,服务正常启动了,但网页上无法访问 排查 安全组已经设置过了,7777端口 在宝塔面板查看,发现7777端口并没有开,打开就可以访问了 原来阿里云的安全组和防火墙是 ...

  2. mysql 配置文件概述

    mysql 配置文件概述 mysql 配置文件 mysql 的配置文件为 /etc/my.cnf 配置文件查找次序:若在多个配置文件中均有设定,则最后找到的最终生效 /etc/my.cnf --> ...

  3. VMware(Caps Lock键)切换大小写作用失效的Bug的解决办法

    前言 第一种情况是:进入VMware虚拟机的时候,即使按了Capslock键开启大写,灯虽然亮了,但是,打出来的字母还是小写,没有有任何的效果,根本不能转换成大写. 只有按Shift+字母才能输入大写 ...

  4. C语言中位运算异或“∧”的作用

    1.概念异或运算符"∧"也称XOR运算符.它的规则是若参加运算的两个二进位同号,则结果为0(假):异号则为1(真).即 0∧0=0,0∧1=1, 1^0=1,1∧1=0.运算    ...

  5. fprintf函数

    描述 C 库函数 int fprintf(FILE *stream, const char *format, ...) 发送格式化输出到流 stream 中. 声明 下面是 fprintf() 函数的 ...

  6. 统信UOS - 扩展系统盘

    一.开root权限,开终端 二.执行lsblk指令,查看磁盘情况 可以发现 / 路径 对应的是loop0,查阅可知loop设备就是一个文件,挂载为一个路径操作的,这就尴尬了,好好的分区不用,你干嘛这么 ...

  7. hive sql的参数调优

    shuffle优化之减少shuffle数据量 1.谓词下推  hive.optimize.ppd ,默认为true. 所谓谓词下推就是过滤条件如果写在shuffle操作后面,就提前过滤掉,减少参与sh ...

  8. https 真的安全吗,可以抓包吗,如何防止抓包吗

    Android_interview github 地址 大家好,我是程序员徐公,加上实习,有五年中大厂经验.自荐一下,可以关注我的微信公众号程序员徐公 公众号程序员徐公回复黑马,获取 Android ...

  9. 在fragment的onViewCreated里observe livedata的变化的原因

    Fragment.onViewCreated()是在Fragment.onCreateView()函数之后调用的,调用到它时 表明fragment视图层级结构已创建完毕.在onViewCreated( ...

  10. NVIDIA GPU上的随机数生成

    NVIDIA GPU上的随机数生成 NVIDIA CUDA随机数生成库(cuRAND)提供高性能的GPU加速的随机数生成(RNG).cuRAND库使用NVIDIA GPU中提供的数百个处理器内核,将质 ...