主机名、ip:

server 172.31.82.184

client  172.31.82.185

需求:

1、server端 ”/data/server“ 做为client端 “/data/client” 的备份目录;

2、实现功能是client端对该目录做增删权限变化操作,server端能保持实时同步;

3、关闭防火墙和selinux

service iptables stop

setenforce 0

一、配置server端

1、安装rsync软件

yum install -y rsync -y

2、创建rsync.conf配置文件,默认该文件不存在

vim /etc/rsyncd.conf

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
uid = root
gid = root
usechroot = no
max connections = 20
timeout = 600
pid file /var/run/rsyncd.pid
lock file /var/run/rsync.lock
log file /var/log/rsyncd.log
[server]                     ##此处是定义的模块名,和“path = /data/server/”下server有关  rsync 同步文件的时候要使用web_log 自动关联到path路径
path = /data/server/
ignore errors
read only = false
writeonly = false
list = false
hosts allow = *
auth users = backuser
secrets file /etc/rsync.password

3、创建备份目录

mkdir /data/server -p

4、创建rsync用户名和密码文件

echo "backuser:123" >> /etc/rsync.password

5、为/etc/rsync.password 授权为600

chmod 600 /etc/rsync.password

6、启动rsync服务并添加开机自动启动

/usr/bin/rsync --daemon &

echo "/usr/bin/rsync --daemon" >> /etc/rc.local

二、配置client端

1、安装rsync

yum install rsync -y

2、设置 rsync 客户端的密码文件,客户端只需要设置 rsync 同步的密码即可,不用设置用户名

echo "123" > /etc/rsync.password

3、将密码文件的权限设置成 600

chmod 600 /etc/rsync.password

配置inotyfi

1、安装基础编译包

yum install -y gcc lrzsz

1
tar zxvf inotify-tools-3.14.tar.gz &&cd inotify-tools-3.14 &&./configure &&make &&make install

2、创建client端同步目录

mkdir -p /data/client

3、在client端测试是否可以同步文件

上传文件

rsync -vzrtopg --progress /data/client/ backuser@172.31.82.184::server  --password-file=/etc/rsync.password

下载文件

rsync -vzrtopg --progress  backuser@172.31.82.184::server /opt/  --password-file=/etc/rsync.password

4、写一个脚本实现当client端  “/data/client”目录文件有变化时,让server节点同步client数据

1
2
3
4
5
6
7
8
9
10
#!/bin/bash
src=/data/client/  ##注意路径
des1=server        ##注意路径
host1=172.31.82.184 ##server端ip
user1=backuser     ##同步数据使用的用户
/usr/local/bin/inotifywait -mrq --timefmt %y/%m'%d %H:/%M' --format '%T %w%f' -emodify,delete,create,attrib $src | while read file
do
/usr/bin/rsync -vzrtopg --delete --progress  $src $user1@$host1::$des1 --password-file=/etc/rsync.password
echo "${files} was rsynced" >> /var/log/rsync.log 2>&1
done

5、给脚本执行权限

chmod +x /root/inotify.sh 
6、后台执行脚本

/root/inotify.sh &

7、将脚本加入到系统自启文件

echo "/root/inotify.sh" >> /etc/rc.local 
8、向client端加入文件,在server端查看是否有同步

mkdir 11 22 33 44

测试通过

三、排除不想同步的文件和目录

1、单个文件排除:比如我不想同步/opt/aa.php文件,直接使用 --exclude “aa.php”

多个文件和目录排除 --exclude-from="/usr/local/src/exclude.list"

脚本写法:

vim /root/inotify.sh

#!/bin/bash
src=/data/client/
des1=server
host1=172.31.82.184
user1=backuser
/usr/local/bin/inotifywait -mrq --timefmt '%d/%m/%y %H:%M' --format '%T %w%f' -emodify,delete,create,attrib $src | while read file
do
/usr/bin/rsync -vzrtopg --delete --progress --exclude-from="/usr/local/src/exclude.list" $src $user1@$host1::$des1 --password-file=/etc/rsync.password
echo `date +%m.%d.%H%.M`"${files} was rsynced" >> /var/log/rsync.log 2>&1
done

2、脚本写完后还需要创建与脚本对应的文件,以下是不同步到server节点的文件和目录:

vim /usr/local/src/exclude.list

exclude
11
22
33

test.php

3、杀死后台运行的脚本进程

ps -elf |pgrep inotify|xargs kill -9

4、启动同步脚本

sh /root/inotify.sh &

5、设置每一个inotify实例相关联的watchs的上限,否则传输的文件过多会报错

echo 30000000 > /proc/sys/fs/inotify/max_user_watches

注意:

脚本修改后需要重启后台脚本:

ps -elf |pgrep inotify|xargs kill -9

sh /root/inotify.sh &

本文出自 “david0512” 博客,请务必保留此出处http://gjr0512.blog.51cto.com/6518687/1758117

centos 6 rsync+inotify 实时同步的更多相关文章

  1. rsync+inotify实时同步环境部署记录

    随着应用系统规模的不断扩大,对数据的安全性和可靠性也提出的更好的要求,rsync在高端业务系统中也逐渐暴露出了很多不足.首先,rsync在同步数据时,需要扫描所有文件后进行比对,进行差量传输.如果文件 ...

  2. CentOS6.5实现rsync+inotify实时同步

    参考博文: 参考1:CentOS6.5实现rsync+inotify实时同步 参考2:inotify-tools+rsync实时同步文件安装和配置 CentOS 6.3下rsync服务器的安装与配置  ...

  3. rsync+inotify实时同步方案

    rsync+inotify实时同步,inotify可以实时监控本地文件或目录变化,当检测到本地文件变化,执行rsync同步命令,将变化的文件同步到其他服务器节点. 1.配置环境 3.在服务节点1.服务 ...

  4. 配置rsync+inotify实时同步

    与上一篇同步做 配置rsync+inotify实时同步 1:调整inotify内核参数 在linux内核中,默认的inotify机制提供三个调控参数:max_queue_events.max_user ...

  5. linux设置rsync+inotify实时同步文件

    linux设置rsync+inotify实时同步文件   应用场景: 同步接收方:test01 接收目录:/opt/software/test/a/ 同步发起方:test02 同步目录:/opt/so ...

  6. (转)rsync+inotify实时同步

    原文:http://lxw66.blog.51cto.com/5547576/1331048 声明:rsync inotify 需要逆向思考,当只做rsync不实时同步时,我们一般是从rsync服务端 ...

  7. 浅谈Rsync+Inotify实时同步

    Rsync是Unix/Linux旗下的一款应用软件,利用它可以是多台服务器数据保持同步一致性,第一次同步时rsync会复制全部内容,但在下次只传输修改过的文件 Rsync在传输数据的过程中可以实行压缩 ...

  8. rsync + inotify 实时同步

    1. 前言 2 台 nginx 需要做集群, 静态文件和php文件都在nginx服务器本地. 有三种方案: (1)NFS (2)Rsync + inotify (3)共享存储服务器 第一种:当 nfs ...

  9. rsync+inotify实时同步

    !!!在安装前要先确保,rsync daemon服务配置成功,在安装inotify-tools前先确认你的linux内核是否达到了2.6.13,并且在编译时开启CONFIG_INOTIFY选项,也可以 ...

随机推荐

  1. PhotoKit type类型

    参考链接: https://www.jianshu.com/p/42e5d2f75452/ 1.获取图像类型 enum PHAssetCollectionType : Int { case Album ...

  2. Python菜鸟之路:Python基础-生成器和迭代器、递归

    一.迭代器 迭代器是访问集合元素的一种方式.迭代器对象从集合的第一个元素开始访问,知道所有的元素被访问完结束.迭代器只能往前不会后退. 1. 迭代器优点 对于无法随机访问的数据结构(比如set)而言, ...

  3. 9.Django里的数据同步migrations命令

    一个关键的目录: 目录名:migrations 作用:用来存放通过makemigrations命令生成的数据库脚本,这里的内容一般不要手动去改 规定:app目录下必须要有migrations目录且目录 ...

  4. node.js版本升级

      node有一个模块叫n(这名字可够短的...),是专门用来管理node.js的版本的. 首先安装n模块: npm install -g n 第二步: 升级node.js到最新稳定版 n stabl ...

  5. linux 7- - watch,free,mpstat,vmstat,iostat,pidstat,df,du

    十八.  和系统运行状况相关的Shell命令:     1.  Linux的实时监测命令(watch):     watch 是一个非常实用的命令,可以帮你实时监测一个命令的运行结果,省得一遍又一遍的 ...

  6. RTMP & HLS

    一,直播云架构 2. RTMP 协议 RTMP(Real Time Messaging Protocol)是Adobe Systems公司为Flash播放器和服务器之间音频.视频和数据传输开发的开放协 ...

  7. Data Structure Linked List: Function to check if a singly linked list is palindrome

    http://www.geeksforgeeks.org/function-to-check-if-a-singly-linked-list-is-palindrome/ 这里的reverse可以re ...

  8. ncl 实例参考

    NCL中绘制中国任意省份的精确地图 NCL学习笔记(实战篇) 用NCL画垂直风场剖面图实例 NCL学习笔记(天气分析图)

  9. flex 组件重写 组件生命周期

    AS方式重写组件常规步骤 1.如果有必要,为组件创建所有基于标记(tag-based)的皮肤(skins) 2.创建ActionScript类文件 ⑴从一个基类扩展,比如UIComponent或者其他 ...

  10. 20145229吴姗珊 《Java程序设计》2天小总结

    20145229吴姗珊 <Java程序设计>2天小总结 教材学习内容总结 由于这周学的内容比较简单,主要是关于日期.日期之类的东西.所以自己从书上看了一些内容 总结了第四章 认识对象 和第 ...