【Linux】Rsync的剖析与使用
Rsync的工具剖析与使用
0.Rsync的介绍
rsync是Linux系统下的文件同步和数据传输工具,它基于“delta-transfer”算法闻名遐迩,保证客户端和远程服务器端之间的文件同步,rsync可以支持断点续传;rsync只传输源文件和目标文件之间不一致的部分;rsync支持执行完整备份和增量备份。
1.Rsync的特性
- 镜像整个目录树和文件系统
- 增量同步,减少同步时间,提高备份效率。
- 保持原有文件的权限,时间,links等属性。
- 加密传输,保证数据安全性。
- 支持匿名传输
2.Rsync的部署安装
rysnc的主页为:https://rsync.samba.org/download.html。下载的版本为:rsync-3.1.3版本。
[root@db ~]# tar zxvf rsync-3.1.3.tar.gz
[root@db ~]# cd rsync-3.1.3
[root@db rsync-3.1.3]# ./configure
[root@db rsync-3.1.3]# make
[root@db rsync-3.1.3]# make install
3.搭建远程备份系统。
3.1 环境配置
客户端:
Platform : Linux 86_64
Server Name : db01.zsd.com, IP: 172.17.4.201
服务器端:
Platform : Linux 86_64
Server Name : db02.zsd.com, IP: 172.17.4.202
场景效果:【172.17.4.201】的Oracle RMAN备份文件传输至【172.17.4.202】中。
3.2 服务器Rsync的配置
在【172.17.4.202】做服务器的相关配置。
安装rysnc
[root@db ~]# tar zxvf rsync-3.1.3.tar.gz
[root@db ~]# cd rsync-3.1.3
[root@db rsync-3.1.3]# ./configure
[root@db rsync-3.1.3]# make
[root@db rsync-3.1.3]# make install
服务器端配置/etc/rsyncd.conf
[root@db backup]# mkdir -p /backup/oracle_full_201/
[root@db backup]# mkdir -p /backup/zsd_test_201/ [root@db etc]# vi /etc/rsyncd.conf
#__________________________________
#created by zsd 2019-03-28
##rsyncd.conf start##
uid = root
gid = root
use chroot = no
max connections = 200
timeout = 600
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsync.lock
log file = /var/log/rsyncd.log
#__________________________________ ###############backupfile01################
[oracle_full_201]
path = /backup/oracle_full_201/
ignore errors
read only = false
list = false
hosts allow = 172.17.4.201
hosts deny = 0.0.0.0/32
auth users = rsync_backup
secrets file = /etc/rsync.password ###############backuptest01################
[zsd_test_201]
path = /backup/zsd_test_201/
ignore errors
read only = false
list = false
hosts allow = 172.17.4.201
hosts deny = 0.0.0.0/32
auth users = rsync_backup
secrets file = /etc/rsync.password
配置密码文件
[root@db etc]# vi /etc/rsync.password
rsync_backup:zsd7101
[root@db etc]# chmod 600 /etc/rsync.password
服务器端启动rsync守护进程
[root@db etc]# /usr/local/bin/rsync --daemon
3.3 客户端rsync的配置。
额外技能(Oracle RMAN的全备)--可选项
[oracle@db logs]$ rman target / RMAN>
run
{
allocate channel c1 device type disk format '/u01/app/backup/rman/%U-%T.full';
allocate channel c2 device type disk format '/u01/app/backup/rman/%U-%T.full';
allocate channel c3 device type disk format '/u01/app/backup/rman/%U-%T.full';
backup database plus archivelog delete all input; release channel c1;
release channel c2;
release channel c3;
}
这里不做过多的细节描述,目的:对Oracle数据库做一个全备。最终远程备份【/u01/app/backup/rman/】目录数据。
设置密码文件
[root@db ~]# vi /etc/rsync.password
zsd7101
其中如果需要
oracle用户,传输备份的话。需要设置如下权限:[root@db rman]# chown -R oracle:oinstall /etc/rsync.password
[oracle@db ~]$ chmod 600 /etc/rsync.password
客户端[172.17.4.201]传输备份
[oracle@db ~]$ rsync -vzrtopg --progress /u01/app/backup/rman/ rsync_backup@172.17.4.202::oracle_full_201 --password-file=/etc/rsync.password
- 其中【-vzrtopg】,
-v是--verbose,即详细模式输出;-z是--compress即在传输时对备份的文件进行压缩;-r表示--recursive,也就是对子目录以递归模式处理,然后传输到远端;-t表示--times,保留文件时间信息;-o表示--owner,用来保持属主信息;-p即--perms,用来保持文件权限;g即--group,保留文件的属组信息。 --progress,显示数据镜像同步的详细过程。rsync_backup@172.17.4.202::oracle_full_201,表示备份的位置名【oracle_full_201】对应的目录是:/backup/oracle_full_201/。使用rsync_backup用户备份。172.17.4.202为服务器端的IP。--password-file=/etc/rsync.password,保证客户端和服务器的端密码一致,保证其正确传输。
- 其中【-vzrtopg】,
rsync
--delete和--backup命令补充传输三个文件至服务器端
[oracle@db zsd]$ pwd
/u01/app/zsd
[oracle@db zsd]$ echo "you are handsome boy" >> zsd01.log
[oracle@db zsd]$ echo "you are handsome boy 02" >> zsd02.log
[oracle@db zsd]$ echo "you are handsome boy 03" >> zsd033.log
[oracle@db zsd]$ ls
zsd01.log zsd02.log zsd033.log ##传输文件至服务器端的【zsd_test_201】模块目录中
[oracle@db zsd]$ rsync -av --no-iconv --progress --backup --backup-dir=`date +%Y-%m-%d` --delete /u01/app/zsd rsync_backup@172.17.4.202::zsd_test_201 --password-file=/etc/rsync.password
删除一个文件,新建一个文件。查看
--delete和--backup命令作用[oracle@db zsd]$ rm zsd033.log
[oracle@db zsd]$ echo " just for fun" >> zsd04.log
[oracle@db zsd]$ rsync -av --no-iconv --progress --backup --backup-dir=`date +%Y-%m-%d` --delete /u01/app/zsd rsync_backup@172.17.4.202::zsd_test_201 --password-file=/etc/rsync.password
通过看如下日志,发现zsd033.log被删除,并同步了zsd04.log的日志,并且。zsd033.log文件被放置到了【/backup/zsd_test_201/2019-03-28/zsd】目录中。
sending incremental file list
deleting zsd/zsd033.log
zsd/
zsd/zsd04.log
27 100% 0.00kB/s 0:00:00 (xfr#1, to-chk=0/4)
###服务器端的操作
[root@db backup]# cd /backup/zsd_test_201/
[root@db zsd_test_201]# ls
2019-03-28 zsd
[root@db zsd]# pwd
/backup/zsd_test_201/2019-03-28/zsd
[root@db zsd]# ls
zsd033.log
其中,
--delete命令,如上,以本地目录的【/u01/app/zsd】为基准进行数据镜像同步,保证客户端的目录与服务器端的目录完全一致。--backup和--backup-dir,保证上述被移除的文件,放置在backup目录中,保证完全的备份记录。
【Linux】Rsync的剖析与使用的更多相关文章
- Linux 动态库剖析
进程与 API 动态链接的共享库是 GNU/Linux® 的一个重要方面.该种库允许可执行文件在运行时动态访问外部函数,从而(通过在需要时才会引入函数的方式)减少它们对内存的总体占用.本文研究了创建和 ...
- linux rsync 实际应用
linux rsync 实际应用 一.rsync的概述 rsync是类unix系统下的数据镜像备份工具,从软件的命名上就可以看出来了——remote sync.rsync是Linux系统下的文件同步和 ...
- linux rsync同步工具
linux rsync同步工具 1.rsync介绍rsync是一款开源的.快速的.多功能的.可实现全量及增量的本地或远程数据同步备份的优秀工具.rsync软件适用于unix/linux/windows ...
- Linux Rsync实现文件同步备份(转载)
原文地址:Linux Rsync实现文件同步备份作者:夷北 转自:http://www.mike.org.cn/blog/index.php?load=read&id=639###pp=0 [ ...
- 【原创】Linux RCU原理剖析(二)-渐入佳境
背景 Read the fucking source code! --By 鲁迅 A picture is worth a thousand words. --By 高尔基 说明: Kernel版本: ...
- Linux rsync实现断点续传
Linux 主机之间即时传送文件,scp命令大家都很熟悉但当要传送的文件较大,过程中如果网络中断了,就比较悲剧了.这时候可以考虑使用rsync命令替代scp,实现断点续传文件. 试验:rsync使用 ...
- Server Data Synchronization Via Linux rsync、rsync+inotify Between Load Balance Server
目录 . 远程文件同步的应用场景 . rsync+crontab . rsync+inotify 1. 远程文件同步的应用场景 在负载均衡集群的应用场景中,往往在多台web server的前端有一个提 ...
- Linux rsync 命令详解
服务器之间常常要保持些文件或目录的一致,比如一些大的软件下载网站,它们通常使用多台服务器来提供下载服务.当一台服务器上的文件更新后,其它的服务器 也需要更新,而且 在更新的时候应该是只对新增或是修改过 ...
- Linux rsync 同步
rsync 是一个快速增量文件传输工具,它可以用于在同一主机备份内部的备分,我们还可以把它作为不同主机网络备份工具之用.本文主要讲述的是如何自架rsync服务器,以实现文件传输.备份和镜像.相对tar ...
随机推荐
- HTML入门14
HTML表单 这块部分开始强调表单也是用的比较多的部分,好好补漏啊啊啊啊 表单用来做交互,处理所有方面结构到样式,到自定义小部件. form元素,严禁嵌套表单,表单嵌套会使得表单得行为不可预知,引入f ...
- Winform 窗体获得焦点
给窗体添加Shown事件 public void Form_Shown(object sender, EventArgs e) { this.Activate(); this.Focus(); //定 ...
- CASE WHEN 高阶用法?
两个表做关联时,以左表为准,若左表某列不为空,则与右表对应列进行关联匹配,为空则不做匹配. 以上做法,有一种说不出来的感觉,不管怎样,问题是解决了. 如有更好的解决思路,请留言告知,不甚感激!
- 为什么 web 开发人员需要迁移到. NET Core, 并使用 ASP.NET Core MVC 构建 web 和 webservice/API
2018 .NET开发者调查报告: .NET Core 是怎么样的状态,这里我们看到了还有非常多的.net开发人员还在观望,本文给大家一个建议.这仅代表我的个人意见, 我有充分的理由推荐.net 程序 ...
- RabbitMQ 集群原理和完善
一.RabbitMQ集群方案的原理 RabbitMQ这款消息队列中间件产品本身是基于Erlang编写,Erlang语言天生具备分布式特性(通过同步Erlang集群各节点的magic cookie来实现 ...
- Spark入门PPT分享
本篇PPT是我在公司内部进行Spark入门的分享,内容包含了Spark基本概念.原理.Streaming.SparkSQL等内容,现在分享出来. 下载请点击这里
- Servlet, Struts2和SpringMVC 并发访问线程安全问题
第一部分: Servlet不是线程安全的. 要解释Servlet为什么不是线程安全的,需要了解Servlet容器(即Tomcat)使如何响应HTTP请求的. 当Tomcat接收到Client的HTTP ...
- FFmpeg 学习(六):FFmpeg 核心模块 libavformat 与 libavcodec 分析
一.libavformat介绍 libavformat的主要组成与层次调用关系如下图: AVFromatContext是API层直接接触到的结构体,它会进行格式的封装和解封装,它的数据部分由底层提供, ...
- [Swift]LeetCode542. 01 矩阵 | 01 Matrix
Given a matrix consists of 0 and 1, find the distance of the nearest 0 for each cell. The distance b ...
- [Swift]LeetCode682. 棒球比赛 | Baseball Game
You're now a baseball game point recorder. Given a list of strings, each string can be one of the 4 ...