Rsync的工具剖析与使用

0.Rsync的介绍

rsync是Linux系统下的文件同步和数据传输工具,它基于“delta-transfer”算法闻名遐迩,保证客户端和远程服务器端之间的文件同步,rsync可以支持断点续传;rsync只传输源文件和目标文件之间不一致的部分;rsync支持执行完整备份和增量备份。

1.Rsync的特性

  • 镜像整个目录树和文件系统
  • 增量同步,减少同步时间,提高备份效率。
  • 保持原有文件的权限,时间,links等属性。
  • 加密传输,保证数据安全性。
  • 支持匿名传输

2.Rsync的部署安装

rysnc的主页为:https://rsync.samba.org/download.html。下载的版本为:rsync-3.1.3版本。

[root@db ~]# tar zxvf rsync-3.1.3.tar.gz
[root@db ~]# cd rsync-3.1.3
[root@db rsync-3.1.3]# ./configure
[root@db rsync-3.1.3]# make
[root@db rsync-3.1.3]# make install

3.搭建远程备份系统。

3.1 环境配置

客户端:
Platform : Linux 86_64
Server Name : db01.zsd.com, IP: 172.17.4.201 服务器端:
Platform : Linux 86_64
Server Name : db02.zsd.com, IP: 172.17.4.202

场景效果:【172.17.4.201】的Oracle RMAN备份文件传输至【172.17.4.202】中。

3.2 服务器Rsync的配置

在【172.17.4.202】做服务器的相关配置。

  • 安装rysnc

    [root@db ~]# tar zxvf rsync-3.1.3.tar.gz
    [root@db ~]# cd rsync-3.1.3
    [root@db rsync-3.1.3]# ./configure
    [root@db rsync-3.1.3]# make
    [root@db rsync-3.1.3]# make install
  • 服务器端配置/etc/rsyncd.conf

    [root@db backup]# mkdir -p /backup/oracle_full_201/
    [root@db backup]# mkdir -p /backup/zsd_test_201/ [root@db etc]# vi /etc/rsyncd.conf
    #__________________________________
    #created by zsd 2019-03-28
    ##rsyncd.conf start##
    uid = root
    gid = root
    use chroot = no
    max connections = 200
    timeout = 600
    pid file = /var/run/rsyncd.pid
    lock file = /var/run/rsync.lock
    log file = /var/log/rsyncd.log
    #__________________________________ ###############backupfile01################
    [oracle_full_201]
    path = /backup/oracle_full_201/
    ignore errors
    read only = false
    list = false
    hosts allow = 172.17.4.201
    hosts deny = 0.0.0.0/32
    auth users = rsync_backup
    secrets file = /etc/rsync.password ###############backuptest01################
    [zsd_test_201]
    path = /backup/zsd_test_201/
    ignore errors
    read only = false
    list = false
    hosts allow = 172.17.4.201
    hosts deny = 0.0.0.0/32
    auth users = rsync_backup
    secrets file = /etc/rsync.password
  • 配置密码文件

    [root@db etc]# vi /etc/rsync.password
    rsync_backup:zsd7101
    [root@db etc]# chmod 600 /etc/rsync.password
  • 服务器端启动rsync守护进程

    [root@db etc]# /usr/local/bin/rsync --daemon

3.3 客户端rsync的配置。

  • 额外技能(Oracle RMAN的全备)--可选项

    [oracle@db logs]$ rman target /
    
    RMAN>
    run
    {
    allocate channel c1 device type disk format '/u01/app/backup/rman/%U-%T.full';
    allocate channel c2 device type disk format '/u01/app/backup/rman/%U-%T.full';
    allocate channel c3 device type disk format '/u01/app/backup/rman/%U-%T.full';
    backup database plus archivelog delete all input; release channel c1;
    release channel c2;
    release channel c3;
    }

    这里不做过多的细节描述,目的:对Oracle数据库做一个全备。最终远程备份【/u01/app/backup/rman/】目录数据。

  • 设置密码文件

    [root@db ~]# vi /etc/rsync.password
    zsd7101

    其中如果需要oracle用户,传输备份的话。需要设置如下权限:

    [root@db rman]# chown -R oracle:oinstall /etc/rsync.password
    [oracle@db ~]$ chmod 600 /etc/rsync.password
  • 客户端[172.17.4.201]传输备份

    [oracle@db ~]$ rsync -vzrtopg --progress /u01/app/backup/rman/ rsync_backup@172.17.4.202::oracle_full_201  --password-file=/etc/rsync.password
    • 其中【-vzrtopg】,-v--verbose,即详细模式输出;-z--compress即在传输时对备份的文件进行压缩;-r表示--recursive,也就是对子目录以递归模式处理,然后传输到远端;-t表示--times,保留文件时间信息;-o表示--owner,用来保持属主信息;-p--perms,用来保持文件权限;g即--group,保留文件的属组信息。
    • --progress,显示数据镜像同步的详细过程。
    • rsync_backup@172.17.4.202::oracle_full_201,表示备份的位置名【oracle_full_201】对应的目录是:/backup/oracle_full_201/。使用rsync_backup用户备份。172.17.4.202为服务器端的IP。
    • --password-file=/etc/rsync.password ,保证客户端和服务器的端密码一致,保证其正确传输。
  • rsync--delete--backup命令补充

    传输三个文件至服务器端

    [oracle@db zsd]$ pwd
    /u01/app/zsd
    [oracle@db zsd]$ echo "you are handsome boy" >> zsd01.log
    [oracle@db zsd]$ echo "you are handsome boy 02" >> zsd02.log
    [oracle@db zsd]$ echo "you are handsome boy 03" >> zsd033.log
    [oracle@db zsd]$ ls
    zsd01.log zsd02.log zsd033.log ##传输文件至服务器端的【zsd_test_201】模块目录中
    [oracle@db zsd]$ rsync -av --no-iconv --progress --backup --backup-dir=`date +%Y-%m-%d` --delete /u01/app/zsd rsync_backup@172.17.4.202::zsd_test_201 --password-file=/etc/rsync.password

    删除一个文件,新建一个文件。查看--delete--backup命令作用

    [oracle@db zsd]$ rm zsd033.log
    [oracle@db zsd]$ echo " just for fun" >> zsd04.log
    [oracle@db zsd]$ rsync -av --no-iconv --progress --backup --backup-dir=`date +%Y-%m-%d` --delete /u01/app/zsd rsync_backup@172.17.4.202::zsd_test_201 --password-file=/etc/rsync.password

    通过看如下日志,发现zsd033.log被删除,并同步了zsd04.log的日志,并且。zsd033.log文件被放置到了【/backup/zsd_test_201/2019-03-28/zsd】目录中。

    sending incremental file list
    deleting zsd/zsd033.log
    zsd/
    zsd/zsd04.log
    27 100% 0.00kB/s 0:00:00 (xfr#1, to-chk=0/4)
    ###服务器端的操作
    [root@db backup]# cd /backup/zsd_test_201/
    [root@db zsd_test_201]# ls
    2019-03-28 zsd
    [root@db zsd]# pwd
    /backup/zsd_test_201/2019-03-28/zsd
    [root@db zsd]# ls
    zsd033.log

    其中,--delete命令,如上,以本地目录的【/u01/app/zsd】为基准进行数据镜像同步,保证客户端的目录与服务器端的目录完全一致。

    --backup--backup-dir,保证上述被移除的文件,放置在backup目录中,保证完全的备份记录。

【Linux】Rsync的剖析与使用的更多相关文章

  1. Linux 动态库剖析

    进程与 API 动态链接的共享库是 GNU/Linux® 的一个重要方面.该种库允许可执行文件在运行时动态访问外部函数,从而(通过在需要时才会引入函数的方式)减少它们对内存的总体占用.本文研究了创建和 ...

  2. linux rsync 实际应用

    linux rsync 实际应用 一.rsync的概述 rsync是类unix系统下的数据镜像备份工具,从软件的命名上就可以看出来了——remote sync.rsync是Linux系统下的文件同步和 ...

  3. linux rsync同步工具

    linux rsync同步工具 1.rsync介绍rsync是一款开源的.快速的.多功能的.可实现全量及增量的本地或远程数据同步备份的优秀工具.rsync软件适用于unix/linux/windows ...

  4. Linux Rsync实现文件同步备份(转载)

    原文地址:Linux Rsync实现文件同步备份作者:夷北 转自:http://www.mike.org.cn/blog/index.php?load=read&id=639###pp=0 [ ...

  5. 【原创】Linux RCU原理剖析(二)-渐入佳境

    背景 Read the fucking source code! --By 鲁迅 A picture is worth a thousand words. --By 高尔基 说明: Kernel版本: ...

  6. Linux rsync实现断点续传

    Linux 主机之间即时传送文件,scp命令大家都很熟悉但当要传送的文件较大,过程中如果网络中断了,就比较悲剧了.这时候可以考虑使用rsync命令替代scp,实现断点续传文件. 试验:rsync使用 ...

  7. Server Data Synchronization Via Linux rsync、rsync+inotify Between Load Balance Server

    目录 . 远程文件同步的应用场景 . rsync+crontab . rsync+inotify 1. 远程文件同步的应用场景 在负载均衡集群的应用场景中,往往在多台web server的前端有一个提 ...

  8. Linux rsync 命令详解

    服务器之间常常要保持些文件或目录的一致,比如一些大的软件下载网站,它们通常使用多台服务器来提供下载服务.当一台服务器上的文件更新后,其它的服务器 也需要更新,而且 在更新的时候应该是只对新增或是修改过 ...

  9. Linux rsync 同步

    rsync 是一个快速增量文件传输工具,它可以用于在同一主机备份内部的备分,我们还可以把它作为不同主机网络备份工具之用.本文主要讲述的是如何自架rsync服务器,以实现文件传输.备份和镜像.相对tar ...

随机推荐

  1. vue创建状态管理(vuex的store机制)

    1:为什么说要是永远状态管理 在使用 Vue 框架做单页面应用时,我们时常会遇到传值,组件公用状态的问题.(子父间传值文章传送门) ,如果是简单的应用,兄弟组件之间通信还能使用 eventBus 来作 ...

  2. 问题解决:Spyder不支持OpenCV模块代码提示

    在使用中遇到的问题是,Spyder的代码完成功能不支持某些编译模块(.pyd后缀),如OpenCV的Python模块cv/cv2,在编写脚本文件时,在已存在import cv&import c ...

  3. CSS content换行实现字符点点点loading效果

    CSS代码如下: dot { display: inline-block; height: 1em; line-height: 1; text-align: left; vertical-align: ...

  4. linux学习历程-不熟悉的linux命令

    一:man(执行查看帮助命令) 二:常用的系统工作命令 1:echo echo命令用于显示在终端输出字符串或变量提取后的值,格式“echo [字符串]|[$变量]” 2:date 用于显示系统的时间和 ...

  5. Qt5+MSVC2015编译器编译发布的Release程序运行崩溃,如何查找崩溃的原因??

    除了加log信息,还有什么方法?? ==================================2019/4/26============================= 1 常见的c++内 ...

  6. js 压缩

    听到同事说没找到压缩js文件的,说软件压缩貌似有点问题,我自己就用nodejs练手般写了压缩文件的. 主要的思路就是,先通过前端上传js文件,然后服务器接收,然后引用uglifyjs 压缩,再返回文件 ...

  7. cadence布线约束规则设置

    DRC检查规则在布线过程中是必不可少的,包括时序规则,走线规则,间距规则,信号完整性规则和物理规则等,在绘制电路板时,设计相关规则满足设计需求,是非常关键的! https://wenku.baidu. ...

  8. 二分(HDU2289 Cup)

    贴代码: 题目意思:已知r水的下半径,R水的上半径,H为圆台高度,V为水的体积,求水的高度,如图: 水的高度一定在0-100,所以在这个区间逐步二分,对每次二分出的水的高度,计算相应的体积,看看计算出 ...

  9. .NET程序员所需要注意的网站资源

    一个程序员 需要 对 技术 和 行业 两方面同时具有极大热情和注意力才能让自己在一个新的台阶. 有些程序员是对技术有着极大的热情但是行业完全不注意,这样我感觉只能成为一个专家,并不能让自己真正的质变, ...

  10. 【安富莱专题教程第1期】基于STM32的硬件RGB888接口实现emWin的快速刷新方案,32位色或24

    说明:1. 首先感谢ST终于推出了ARGB格式的emWin库,可谓千呼万唤始出来,使用STM32的硬件RGB888接口刷新图片慢的问题终于得到解决.2. 这个问题由来已久,是之前为我们的STM32-V ...