linux rsync服务

1、rsync介绍
rsync是一个开源的，快速的，多功能的，可实现全量及增量的本地或远程数据同步备份的优秀工具，rsync软件适用于nunix/linux/windows多操作系统上运行。
官方网站：http://www.samba.org/ftp/rsync/rsync.html
rsync 英文全称为remote rynchronization.
rsyn的特性：
1)支持拷贝特殊文件如连接文件，设备等。
2)可以有排除指定文件或目录同步到功能，相当于打包命令tar的排除功能。
3)可以做到保持原文件或目录的权限、时间、软连接、属主、组等所有属性均不改变
4)可实现增量同步，即只同步发生变化的数据
5)可以使用rcp,rsh,ssh等方式来配合传输文件(rsync本身不对数据加密)
6)可以通过socket进程方式传输文件或数据(服务端和客户端)
7)支持匿名或认证( 无需系统用户)的进程模式传输，可实现方便安全的进行数据备份及镜像。

rsync的方式：
1)本地同步
rsync 选项 源 目标
rsync option srcoue dest
相当于本地cp命令
Local: rsync [OPTION...] SRC... [DEST]

Access via remote shell:
Pull: rsync [OPTION...] [USER@]HOST:SRC... [DEST]
Push: rsync [OPTION...] SRC... [USER@]HOST:DEST

Access via rsync daemon:
Pull: rsync [OPTION...] [USER@]HOST::SRC... [DEST]
rsync [OPTION...] rsync://[USER@]HOST[:PORT]/SRC... [DEST]
Push: rsync [OPTION...] SRC... [USER@]HOST::DEST

2、rsync配置
yum install -y rsync
wget http://pkgs.repoforge.org/rsync/rsync-3.0.9-2.el6.rfx.x86_64.rpm
1)配置文件
#服务端配置参数说明：
#uid = rsync 用户
#gid = rsync 用户组
#port = 873 指定端口号
#use chroot = no或false
#list = no 不允许列请单
#max connections = 200 最大连接数
#hosts allow = * 允许所以的网段进行同步
#timeout = 300 覆盖客户指定的IP超时时间
#log file = /var/log/rsyncd.log 日志文件的存放位置
#pid file = /var/run/rsyncd.pid pid文件的存放位置
#lock file = /var/run/rsync.lock 锁文件的存放位置
#motd file = 指定连接时的消息文件
#[test] 这里是认证模块名，即跟samba语法一样，是对外公布的名字
#path = /test/ 这里是参与同步的目录
#ignore errors 可以忽略一些无关的IO错误
#read only = false 允许可读可写
#hosts allow = 192.168.233.0/24 允许访问的地址
#host deny = 0.0.0.0/32 不允许访问的地址
#transfer logging = yes 传输记录日志
#secrets file = /etc/rsync.password 密码文件存放地址

参考官方文档：https://www.samba.org/ftp/rsync/rsyncd.conf.html
rpm -qa rsync
rsync-3.0.6-12.el6.x86_64

vim /etc/rsyncd.conf
#rsync.config file
uid = rsync
gid = rsync
use chroot = no
max connections = 200
hosts allow = *
timeout = 300
log file = /var/log/rsyncd.log
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsync.lock
# Module definitions
[test]
path = /test/
ignore errors
read only = false
hosts allow = 192.168.233.0/24
host deny = 0.0.0.0/32
transfer logging = yes
secrets file = /etc/rsync.password
#rsync.conf---------end

2)创建备份目录，用户，密码文件并指定权限
mkdir /test
chown -R rsync.rsync /test/
useradd -s /sbin/nologin -M rsync
echo "rsyncback:123.com" >/etc/rsync.password
chmod 600 /etc/rsync.password

3)启动rsyn服务
/usr/bin/rsync --daemon
netstat -lntup|grep 873
tcp 0 0 0.0.0.0:873 0.0.0.0:* LISTEN 5490/rsync
tcp 0 0 :::873 :::* LISTEN 5490/rsync
ps -ef |grep rsync|grep -v grep
root 5490 1 0 16:09 ? 00:00:00 /usr/bin/rsync --daemon
1)配置启动脚本，把rsync服务家人到开机自启动。

3、rsync客户端配置
rpm -qa rsync
rsync-3.0.6-12.el6.x86_64
echo "123.com" >/etc/rsync.password
chmod 600 /etc/rsync.password

1)客户端访问方式
上传数据：
rsync [OPTION...] SRC... [USER@]HOST::DEST
rsync -zvaP /mnt/ rsyncback@192.168.233.129::test --password-file=/etc/rsync.password
rsync [OPTION...] SRC... rsync://[USER@]HOST[:PORT]/DEST
rsync -zvaP /usr/src/kernels/ rsync://rsyncback@192.168.233.129:873/test --password-file=/etc/rsync.password

下载数据：
rsync [OPTION...] [USER@]HOST::SRC... [DEST]
rsync -avzP rsyncback@192.168.233.129::test ~/ --password-file=/etc/rsync.password

rsync [OPTION...] rsync://[USER@]HOST[:PORT]/SRC... [DEST]
rsync -avzP rsync://rsyncback@192.168.233.129:873/test ~/ --password-file=/etc/rsync.password

#参数说明：
#-v, --verbose 详细模式输出
#-q, --quiet 精简输出模式
#-c, --checksum 打开校验开关，强制对文件传输进行校验
#-a, --archive 归档模式，表示以递归方式传输文件，并保持所有文件属性，等于-rlptgoD
#-r, --recursive 对子目录以递归模式处理
#-R, --relative 使用相对路径信息
#-b, --backup 创建备份，也就是对于目的已经存在有同样的文件名时，将老的文件重新命名为~filename。可以使用--suffix选项来指定不同的备份文件前缀。
#--backup-dir 将备份文件(如~filename)存放在在目录下。
#-suffix=SUFFIX 定义备份文件前缀
#-u, --update 仅仅进行更新，也就是跳过所有已经存在于DST，并且文件时间晚于要备份的文件。(不覆盖更新的文件)
#-l, --links 保留软链结
#-L, --copy-links 想对待常规文件一样处理软链结
#--copy-unsafe-links 仅仅拷贝指向SRC路径目录树以外的链结
#--safe-links 忽略指向SRC路径目录树以外的链结
#-H, --hard-links 保留硬链结
#-p, --perms 保持文件权限
#-o, --owner 保持文件属主信息
#-g, --group 保持文件属组信息
#-D, --devices 保持设备文件信息
#-t, --times 保持文件时间信息
#-S, --sparse 对稀疏文件进行特殊处理以节省DST的空间
#-n, --dry-run现实哪些文件将被传输
#-W, --whole-file 拷贝文件，不进行增量检测
#-x, --one-file-system 不要跨越文件系统边界
#-B, --block-size=SIZE 检验算法使用的块尺寸，默认是700字节
#-e, --rsh=COMMAND 指定替代rsh的shell程序
#--rsync-path=PATH 指定远程服务器上的rsync命令所在路径信息
#-C, --cvs-exclude 使用和CVS一样的方法自动忽略文件，用来排除那些不希望传输的文件
#--existing 仅仅更新那些已经存在于DST的文件，而不备份那些新创建的文件
#--delete 删除那些DST中SRC没有的文件
#--delete-excluded 同样删除接收端那些被该选项指定排除的文件
#--delete-after 传输结束以后再删除
#--ignore-errors 及时出现IO错误也进行删除
#--max-delete=NUM 最多删除NUM个文件
#--partial 保留那些因故没有完全传输的文件，以是加快随后的再次传输
#--force 强制删除目录，即使不为空
#--numeric-ids 不将数字的用户和组ID匹配为用户名和组名
#--timeout=TIME IP超时时间，单位为秒
#-I, --ignore-times 不跳过那些有同样的时间和长度的文件
#--size-only 当决定是否要备份文件时，仅仅察看文件大小而不考虑文件时间
#--modify-window=NUM 决定文件是否时间相同时使用的时间戳窗口，默认为0
#-T --temp-dir=DIR 在DIR中创建临时文件
#--compare-dest=DIR 同样比较DIR中的文件来决定是否需要备份
#-P 等同于 --partial
#--progress 显示备份过程
#-z, --compress 对备份的文件在传输时进行压缩处理
#--exclude=PATTERN 指定排除不需要传输的文件模式
#--include=PATTERN 指定不排除而需要传输的文件模式
#--exclude-from=FILE 排除FILE中指定模式的文件
#--include-from=FILE 不排除FILE指定模式匹配的文件
#--version 打印版本信息
#--address 绑定到特定的地址
#--config=FILE 指定其他的配置文件，不使用默认的rsyncd.conf文件
#--port=PORT 指定其他的rsync服务端口
#--blocking-io 对远程shell使用阻塞IO
#-stats 给出某些文件的传输状态
#--progress 在传输时现实传输过程
#--log-format=FORMAT 指定日志文件格式
#--password-file=FILE 从FILE中得到密码
#--bwlimit=KBPS 限制I/O带宽，KBytes per second
#-h, --help 显示帮助信息
4、参数实例
客户端排除方法：
1)排除单个文件：--exclude
rsync -avzP ~/ --exclude=a rsyncback@192.168.233.129::test --password-file=/etc/rsync.password
2)排除多个文件：--exclude
rsync -avzP ~/ --exclude={a,b,c} rsyncback@192.168.233.129::test --password-file=/etc/rsync.password
3)将要排除的文件写入文件内，然后指定文件：--exclude-from
rsync -avzP /python/aa/ --exclude-from=/root/paichu rsyncback@192.168.233.129::test --password-file=/etc/rsync.password

4)服务器端的排除：
vim /etc/rsyncd.conf
[test]
exclude = a b c d

5)无差异同步：
上传数据，将客户端没有的，服务端会删除，保持同步。
rsync -avzP --delete /python/aa/ rsyncback@192.168.233.129::test --password-file=/etc/rsync.password
下载数据，会将服务端没有的数据，从客户端中删除。
rsync -avzP --delete rsyncback@192.168.233.129::test /python/aa/ --password-file=/etc/rsync.password