我的应用场景是重要文件备份

端口:873,备份端打开即可

下载地址:https://rsync.samba.org/ftp/rsync/src/

服务端和客户端要保持版本一致

网盘链接:https://pan.baidu.com/s/1wTsj0cCfXRcREnbzeIviuQ

备份端

1、安装rsync:

...

2、设置密码文件

vim /etc/rsync.pas

cjh:  #格式 用户名:密码   这里的用户名和密码跟系统没有关系的

配置文件

vi /etc/rsyncd.conf  #文件不一定有,可以自己创建

# /etc/rsyncd: configuration file for rsync daemon mode

# See rsyncd.conf man page for more options.

# configuration example:

# uid = nobody
# gid = nobody
# use chroot = yes
# max connections =
# pid file = /var/run/rsyncd.pid
# exclude = lost+found/
# transfer logging = yes
# timeout =
# ignore nonreadable = yes
# dont compress = *.gz *.tgz *.zip *.z *.Z *.rpm *.deb *.bz2 # [ftp]
# path = /home/ftp
# comment = ftp export area

加上我的配置

uid =root #root是必须的,同步时权限问题
gid =root
use chroot = yes
max connections = 1
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsyncd.lock
log file = /var/log/rsyncd.log
transfer logging = yes
log format = %t %a %m %f %b
timeout =
[test]
read only =no #必须是no
path = /root/ #同步目录路径,要注意同步过来的时候模块名会拼接,比如/root/test/ 这里就只需要填/root/
comment = xxx #可选,无太大作用
auth users =cjh #用户名,注意跟系统的用户密码没关系
secrets file =/etc/rsync.pas #密码文件
hosts allow = ip1,ip2 #源文件端ip

启动

which rsync
/xx/rsync #后台启动
/xx/rsync --daemon ps -ef | grep rsync #看看服务是否正常运行

源文件端

1、安装启动rsync+inotify

注意密码文件格式跟备份端不一样,比如这里直接写123456就可以了,不需要用户名

特别介绍一下就是:rsync有六种不同的工作模式

、rsync [OPTION]... SRC DEST
、rsync [OPTION]... SRC [USER@]HOST:DEST
、rsync [OPTION]... [USER@]HOST:SRC DEST
、rsync [OPTION]... [USER@]HOST::SRC DEST
、rsync [OPTION]... SRC [USER@]HOST::DEST
、rsync [OPTION]... rsync://[USER@]HOST[:PORT]/SRC [DEST]

1)拷贝本地文件。(没用过,不知道效果怎样)

2)使用一个远程shell程序(如rsh、ssh)来实现将本地机器的内容拷贝到远程机器。(如果没有做免密登录,每次都要输密码)

3)使用一个远程shell程序(如rsh、ssh)来实现将远程机器的内容拷贝到本地机器。(如果没有做免密登录,每次都要输密码)

4)从远程rsync服务器中拷贝文件到本地机。(定期备份可以用这个)

5)从本地机器拷贝文件到远程rsync服务器中。(实时备份用这个)

6)列远程机的文件列表。(没用过)

2、一次性同步测试

rsync -av /root/test/ cjh@备份端IP::test --password-file=/etc/rsync.pas --bwlimit=

test是客户端定义的模块,/root/test2 是客户端的目录,密码文件跟服务端不同的是只需要填密码,--bwlimit是网速的限制,--delete是完全同步目录文件

实时同步

安装inotify-tools,下载的网站打不开,我就直接用yum方式安装

yum install -y inotify-tools

实时同步脚本(attrib指文件的属性,比如只读)

#!/bin/bash
host1=IP #备份服务器IP
src=/root/test/ #同步目录最好保持一致
dst1=test #模块名称
user1=cjh #用户名
/usr/local/bin/inotifywait -mrq --timefmt '%d/%m/%y %H:%M' --format '%T %w%f%e' -e create,modify,attrib $src \
| while read files
do
rsync -av $src $user1@$host1::$dst1 --password-file=/etc/rsync.pas --bwlimit=
echo "${files} was rsynced."
done

启动脚本

nohup sh run.sh  > run.out & >& &

测试通过

注意点:

1、chmod 600 /etc/rsync.pas,两端都需要做这个操作

2、大文件的同步是很慢的,同步的时候卡住注意是不是文件太大了

3、上线前认真做好测试和普通方式的备份,以及尽量不要使用--delete,防止数据丢失

4、/etc/rsyncd.conf配置文件中一个注释都不能写,上面只是为了方便表达参数含义!

5、当文件数量超多的时候,同步会有一点延迟,大概是几分钟

转载请注明博客出处:http://www.cnblogs.com/cjh-notes/

centos文件实时同步inotify+rsync的更多相关文章

  1. 文件实时同步(rsync+inotify)

    目标服务器:10.11.6.11 源服务器:10.11.6.12 准备条件: 1.关闭selinux: vi /etc/selinux/config #编辑防火墙配置文件 #SELINUX=enfor ...

  2. 实时同步inotify+rsync

    目的,要求 nfs储存服务器与backup备份服务器,数据同步,万一nfs储存服务器挂了,数据还在 实时同步备份软件服务 1)inotify 实时同步软件 2)sersync 实时同步软件 实时同步原 ...

  3. CentOs文件实时同步

    1,生成数据序

  4. Centos 6.5 rsync+inotify 两台服务器文件实时同步

    rsync和inotify是什么我这里就不在介绍了,有专门的文章介绍这两个工具. 1.两台服务器IP地址分别为: 源服务器:192.168.1.2 目标服务器:192.168.1.3 @todo:从源 ...

  5. rsync+inotify 实现服务器之间目录文件实时同步(转)

    软件简介: 1.rsync 与传统的 cp. tar 备份方式相比,rsync 具有安全性高.备份迅速.支持增量备份等优点,通过 rsync 可 以解决对实时性要求不高的数据备份需求,例如定期的备份文 ...

  6. inotify用法简介及结合rsync实现主机间的文件实时同步

    一.inotify简介 inotify是Linux内核2.6.13 (June 18, 2005)版本新增的一个子系统(API),它提供了一种监控文件系统(基于inode的)事件的机制,可以监控文件系 ...

  7. (转)Linux下通过rsync与inotify(异步文件系统事件监控机制)实现文件实时同步

    Linux下通过rsync与inotify(异步文件系统事件监控机制)实现文件实时同步原文:http://www.summerspacestation.com/linux%E4%B8%8B%E9%80 ...

  8. rsync+inotify百万级文件实时同步

    实验环境:Centos7.4 目的:将源服务器的文件实时同步至目标服务器 源服务器:10.11.1.107 目标服务器:10.11.1.106 分别在两个节点安装rsync yum -y instal ...

  9. rsync+sersync实现数据文件实时同步

    一.简介 sersync是基于Inotify开发的,类似于Inotify-tools的工具: sersync可以记录下被监听目录中发生变化的(包括增加.删除.修改)具体某一个文件或某一个目录的名字: ...

随机推荐

  1. Python 并发网络库

    Python 并发网络库 Tornado VS Gevent VS Asyncio Tornado:并发网络库,同时也是一个 web 微框架 Gevent:绿色线程(greenlet)实现并发,猴子补 ...

  2. 错误:SyntaxError: identifier starts immediately after numeric literal

    转载:http://blog.csdn.net/shalousun/article/details/39995443在用JavaScript时,当你使用一个字符传作为函数的参数常常会看到语法错误,在f ...

  3. 深入理解hadoop之机架感知

    深入理解hadoop之机架感知 机架感知 hadoop的replication为3,机架感知的策略为: 第一个block副本放在和client所在的datanode里(如果client不在集群范围内, ...

  4. EF报错:对一个或多个实体的验证失败(Entity Framework 强制转换失败数据异常处理方法)

    1.使用MVC和EF,在保存数据的时候报错:System.Data.Entity.Validation.DbEntityValidationException: 对一个或多个实体的验证失败.有关详细信 ...

  5. 像@Transactional一样利用注解自定义aop切片

    在spring中,利用@Transactional注解可以很轻松的利用aop技术进行事物管理.在实际项目中,直接利用自定义注解实现切片可以大大的提高我们的编码效率以及代码的简洁性. 实现以上的目标,主 ...

  6. dead relu and Tensorboard

    https://medium.com/analytics-vidhya/is-relu-dead-27943b50102 1.使用relu作为激活函数时,因其在输入小于0时,输出为0,所以可能会造成d ...

  7. hive建表结构

    drop table dw.fct_so;create table dw.fct_so(so_id bigint comment '订单ID',parent_so_id bigint comment ...

  8. 洛谷P3370 && 字符串哈希讲解

    字符串哈希 寻找长度为n的主串s中的的匹配串T(长度为m)出现的位置或者次数问题属于字符串匹配问题. 朴素(一般)的想法就是从一个字符串的头开始for循环查找,当查找的一个字符与匹配串首字符相同时,往 ...

  9. 19.8.8 flutter 学习之创建第一个可变的Widget

    创建一个很简单的可变的Widget 效果就是点击字的时候会变化 完整代码: class CarPage extends StatefulWidget { @override _CarState cre ...

  10. Gym - 101234J Zero Game (单调队列)

    题意:有一个长度为n的01序列,你可以移动k次,每次将一个数移到任意一个位置,求经过操作后区间连续最大的连续0的个数. “移动”操作看似情况很复杂,不好讨论,但其实无非就两种情况: 一.移动的是1:显 ...