centos 6 rsync+inotify 实时同步
主机名、ip:
server 172.31.82.184
client 172.31.82.185
需求:
1、server端 ”/data/server“ 做为client端 “/data/client” 的备份目录;
2、实现功能是client端对该目录做增删权限变化操作,server端能保持实时同步;
3、关闭防火墙和selinux
service iptables stop
setenforce 0
一、配置server端
1、安装rsync软件
yum install -y rsync -y
2、创建rsync.conf配置文件,默认该文件不存在
vim /etc/rsyncd.conf
|
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
|
uid = rootgid = rootusechroot = nomax connections = 20timeout = 600pid file = /var/run/rsyncd.pidlock file = /var/run/rsync.locklog file = /var/log/rsyncd.log[server] ##此处是定义的模块名,和“path = /data/server/”下server有关 rsync 同步文件的时候要使用web_log 自动关联到path路径path = /data/server/ignore errorsread only = falsewriteonly = falselist = falsehosts allow = *auth users = backusersecrets file = /etc/rsync.password |
3、创建备份目录
mkdir /data/server -p
4、创建rsync用户名和密码文件
echo "backuser:123" >> /etc/rsync.password
5、为/etc/rsync.password 授权为600
chmod 600 /etc/rsync.password
6、启动rsync服务并添加开机自动启动
/usr/bin/rsync --daemon &
echo "/usr/bin/rsync --daemon" >> /etc/rc.local
二、配置client端
1、安装rsync
yum install rsync -y
2、设置 rsync 客户端的密码文件,客户端只需要设置 rsync 同步的密码即可,不用设置用户名
echo "123" > /etc/rsync.password
3、将密码文件的权限设置成 600
chmod 600 /etc/rsync.password
配置inotyfi
1、安装基础编译包
yum install -y gcc lrzsz
|
1
|
tar zxvf inotify-tools-3.14.tar.gz &&cd inotify-tools-3.14 &&./configure &&make &&make install |
2、创建client端同步目录
mkdir -p /data/client
3、在client端测试是否可以同步文件
上传文件
rsync -vzrtopg --progress /data/client/ backuser@172.31.82.184::server --password-file=/etc/rsync.password
下载文件
rsync -vzrtopg --progress backuser@172.31.82.184::server /opt/ --password-file=/etc/rsync.password
4、写一个脚本实现当client端 “/data/client”目录文件有变化时,让server节点同步client数据
|
1
2
3
4
5
6
7
8
9
10
|
#!/bin/bashsrc=/data/client/ ##注意路径des1=server ##注意路径host1=172.31.82.184 ##server端ipuser1=backuser ##同步数据使用的用户/usr/local/bin/inotifywait -mrq --timefmt %y/%m'%d %H:/%M' --format '%T %w%f' -emodify,delete,create,attrib $src | while read file;do/usr/bin/rsync -vzrtopg --delete --progress $src $user1@$host1::$des1 --password-file=/etc/rsync.passwordecho "${files} was rsynced" >> /var/log/rsync.log 2>&1done |
5、给脚本执行权限
chmod +x /root/inotify.sh
6、后台执行脚本
/root/inotify.sh &
7、将脚本加入到系统自启文件
echo "/root/inotify.sh" >> /etc/rc.local
8、向client端加入文件,在server端查看是否有同步
mkdir 11 22 33 44
测试通过
三、排除不想同步的文件和目录
1、单个文件排除:比如我不想同步/opt/aa.php文件,直接使用 --exclude “aa.php”
多个文件和目录排除 --exclude-from="/usr/local/src/exclude.list"
脚本写法:
vim /root/inotify.sh
#!/bin/bash
src=/data/client/
des1=server
host1=172.31.82.184
user1=backuser
/usr/local/bin/inotifywait -mrq --timefmt '%d/%m/%y %H:%M' --format '%T %w%f' -emodify,delete,create,attrib $src | while read file
do
/usr/bin/rsync -vzrtopg --delete --progress --exclude-from="/usr/local/src/exclude.list" $src $user1@$host1::$des1 --password-file=/etc/rsync.password
echo `date +%m.%d.%H%.M`"${files} was rsynced" >> /var/log/rsync.log 2>&1
done
2、脚本写完后还需要创建与脚本对应的文件,以下是不同步到server节点的文件和目录:
vim /usr/local/src/exclude.list
exclude
11
22
33
test.php
3、杀死后台运行的脚本进程
ps -elf |pgrep inotify|xargs kill -9
4、启动同步脚本
sh /root/inotify.sh &
5、设置每一个inotify实例相关联的watchs的上限,否则传输的文件过多会报错
echo 30000000 > /proc/sys/fs/inotify/max_user_watches
注意:
脚本修改后需要重启后台脚本:
ps -elf |pgrep inotify|xargs kill -9
sh /root/inotify.sh &
本文出自 “david0512” 博客,请务必保留此出处http://gjr0512.blog.51cto.com/6518687/1758117
centos 6 rsync+inotify 实时同步的更多相关文章
- rsync+inotify实时同步环境部署记录
随着应用系统规模的不断扩大,对数据的安全性和可靠性也提出的更好的要求,rsync在高端业务系统中也逐渐暴露出了很多不足.首先,rsync在同步数据时,需要扫描所有文件后进行比对,进行差量传输.如果文件 ...
- CentOS6.5实现rsync+inotify实时同步
参考博文: 参考1:CentOS6.5实现rsync+inotify实时同步 参考2:inotify-tools+rsync实时同步文件安装和配置 CentOS 6.3下rsync服务器的安装与配置 ...
- rsync+inotify实时同步方案
rsync+inotify实时同步,inotify可以实时监控本地文件或目录变化,当检测到本地文件变化,执行rsync同步命令,将变化的文件同步到其他服务器节点. 1.配置环境 3.在服务节点1.服务 ...
- 配置rsync+inotify实时同步
与上一篇同步做 配置rsync+inotify实时同步 1:调整inotify内核参数 在linux内核中,默认的inotify机制提供三个调控参数:max_queue_events.max_user ...
- linux设置rsync+inotify实时同步文件
linux设置rsync+inotify实时同步文件 应用场景: 同步接收方:test01 接收目录:/opt/software/test/a/ 同步发起方:test02 同步目录:/opt/so ...
- (转)rsync+inotify实时同步
原文:http://lxw66.blog.51cto.com/5547576/1331048 声明:rsync inotify 需要逆向思考,当只做rsync不实时同步时,我们一般是从rsync服务端 ...
- 浅谈Rsync+Inotify实时同步
Rsync是Unix/Linux旗下的一款应用软件,利用它可以是多台服务器数据保持同步一致性,第一次同步时rsync会复制全部内容,但在下次只传输修改过的文件 Rsync在传输数据的过程中可以实行压缩 ...
- rsync + inotify 实时同步
1. 前言 2 台 nginx 需要做集群, 静态文件和php文件都在nginx服务器本地. 有三种方案: (1)NFS (2)Rsync + inotify (3)共享存储服务器 第一种:当 nfs ...
- rsync+inotify实时同步
!!!在安装前要先确保,rsync daemon服务配置成功,在安装inotify-tools前先确认你的linux内核是否达到了2.6.13,并且在编译时开启CONFIG_INOTIFY选项,也可以 ...
随机推荐
- Entity Framework 4.1:复杂类型
这篇文章将讨论复杂类型. 默认情况下,EF4.1 将类映射到表,这是约定,但是有时候,我们需要模型比表的粒度更细一些. 地址是一个典型的例子,看一下下面的客户类. )] publicstring St ...
- 阿里巴巴fastjson 包的使用解析json数据
Fastjson是一个Java语言编写的高性能功能完善的JSON库.由阿里巴巴公司团队开发的. 主要特性主要体现在以下几个方面: 1.高性能 fastjson采用独创的算法,将parse的速度提升到极 ...
- 6.2.3-Bean的加载处理
在AbstractBeanFactory中doGetBean方法中始终调用了getObjectForBeanInstance方法,这个方法是对参数进行过滤; @SuppressWarnings(&qu ...
- lzugis—搭建属于自己的小型的版本号控制SVN
版权声明:本文为LZUGIS原创文章,未经同意不得转载. https://blog.csdn.net/GISShiXiSheng/article/details/28643575 对于不了解SVN的同 ...
- 获取comboBox里面的item使用的方法
使用currentIndex()或者currentText() void Widget::calc() { int first = ui->firstLineEdit->text().to ...
- Kattis - entertainmentbox 【贪心】
思路 先将 N 个 电视节目 排序 根据 结束时间 ,结束的早的 排在前面 然后 弄 K个标记 记录 结束时间 然后 遍历一下 每次 如果能插入的话 插入到 结束时间最小的那个 队列里面去然后 每次插 ...
- Swift URL encode
前言 在WEB前端开发,服务器后台开发,或者是客户端开发中,对URL进行编码是一件很常见的事情,但是由于各个年代的RFC文档中的内容一直在变化,一些年代久远的代码就对URL编码和解码的规则和现在的有一 ...
- maven导入项目时,缺少部分source folder
今天导入公司的maven项目时,少了一些source folder,运行启动正常,但是页面打不开,找不到对应的目录文件,使用maven更新项目,重启编辑器也无效. 问题描述如图所示,缺少了图中的2个目 ...
- spring项目命名
groupId 一般分为多个段,最简单的分两段,第一段为域,第二段为公司名称.域又分为org.com.cn等等许多, 举个apache公司的tomcat项目例子:这个项目的groupId是org.ap ...
- POJ 2536 之 Gopher II(二分图最大匹配)
Gopher II Time Limit: 2000MS Memory Limit: 65536K Total Submissions: 6675 Accepted: 2732 Descrip ...