sersync基于rsync+inotify实现数据实时同步

一、环境描述

需求：服务器A与服务器B为主备服务模式，需要保持文件一致性，现采用sersync基于rsync+inotify实现数据实时同步

主服务器A：192.168.1.23

从服务器B：192.168.1.243

实时同步/var/atlassian目录到从服务器。

二、实施

1.从服务器192.168.1.243 rsync服务搭建

1.1安装软件包

wget  http://rsync.samba.org/ftp/rsync/src/rsync-3.1.1.tar.gz

tar xf rsync-3.1..tar.gz –C /opt/

mv /opt/rsync-3.1. /opt/rsync

cd /opt/rsync

./configure

make &&　make install

创建rsyncd.conf文件

vi /etc/rsyncd.conf

vim /etc/rsyncd.conf

#以root用户运行rsync服务

uid = root

#以root用户运行rsync服务

gid = root

#增加对目录文件软连接的备份

use chroot = no

#最大连接数

max connections = 1200

#超时时间

timeout = 800

#PID存放位置

pid file = /var/run/rsyncd.pid

#锁文件存放位置

lockfile = /var/run/rsyncd.lock

#日志存放位置

log file = /var/log/rsyncd.log

#认证模块名

[atlassian]

path = /var/atlassian

ignore errors = yes

hosts allow = 192.168.1.23

hosts deny = *　

read only = no

write only = no

list = yes
#主服务器的同步用户

auth users = ihome

secrets file = /etc/rsync.pass

注：/etc/rsync.pass 文件格式为username:password

文件权限必须为600否则服务不正常

hosts allow 定义可为单独IP也可为网段，网段格式为172.26.7.0/24

也可为172.26.7.0/255.255.255.0

创建rsync.pass文件

echo “root:password”>>/etc/rsync.pass

chmod  /etc/rsync.pass

1.3启动服务

[root@ha-db atlassian]#rsync --daemon –v

开机自启动

[root@ha-db atlassian]#echo "rsync --daemon –v">>/etc/rc.local

2.主服务器192.168.1.23配置

2.1软件安装

下载
wget  http://rsync.samba.org/ftp/rsync/src/rsync-3.1.1.tar.gz

wget http://github.com/downloads/rvoicilas/inotify-tools/inotify-tools-3.14.tar.gz

wget https://sersync.googlecode.com/files/sersync2.5.4_64bit_binary_stable_final.tar.gz

解压

tar xf rsync-3.1..tar.gz –C /opt

tar xf inotify-tools-3.14.tar.gz –C /opt

tar xf sersync2..4_64bit_binary_stable_final.tar.gz –C /opt

cd /opt

mv rsync-3.1. rsync

mv inotify-tools-.14 inotify-tools

mv GNU-Linux-x86 sersync

编译安装rsync

cd rsync

./configure && make && make install

编译安装inotify-tools

cd inotify-tools

./configure && make && make install

2.3 sersync服务配置

vim /opt/sersync/confxml.xml

<?xml version="1.0" encoding="ISO-8859-1"?>

<head version="2.5">

    <host hostip="localhost" port="8008"></host>

    <debug start="false"/>

    <fileSystem xfs="false"/>

    <filter start="false">

        <exclude expression="(.*)\.svn"></exclude>

        <exclude expression="(.*)\.gz"></exclude>

        <exclude expression="^info/*"></exclude>

        <exclude expression="^static/*"></exclude>

    </filter>

    <inotify>

        <delete start="true"/>

        <createFolder start="true"/>

        <createFile start="false"/>

        <closeWrite start="true"/>

        <moveFrom start="true"/>

        <moveTo start="true"/>

        <attrib start="false"/>

        <modify start="false"/>

    </inotify>

    <sersync>

        <localpath watch="/var/atlassian">

            <remote ip="192.168.1.243" name="atlassian"/>

            <!--<remote ip="192.168.8.39" name="tongbu"/>-->

            <!--<remote ip="192.168.8.40" name="tongbu"/>-->

        </localpath>

        <rsync>

            <commonParams params="-artuzlpog"/>

            <auth start="true" users="ihome" passwordfile="/opt/sersync/user.pass"/>

            <userDefinedPort start="false" port="874"/><!-- port=874 -->

            <timeout start="false" time="100"/><!-- timeout=100 -->

            <ssh start="false"/>

        </rsync>

        <failLog path="/tmp/rsync_fail_log.sh" timeToExecute="60"/><!--default every 60mins execute once-->

        <crontab start="false" schedule="600"><!--600mins-->

            <crontabfilter start="false">

                <exclude expression="*.php"></exclude>

                <exclude expression="info/*"></exclude>

            </crontabfilter>

        </crontab>

        <plugin start="false" name="command"/>

    </sersync>

    <plugin name="command">

        <param prefix="/bin/sh" suffix="" ignoreError="true"/>  <!--prefix /opt/tongbu/mmm.sh suffix-->

        <filter start="false">

            <include expression="(.*)\.php"/>

            <include expression="(.*)\.sh"/>

        </filter>

    </plugin>

    <plugin name="socket">

        <localpath watch="/var/atlassian">

            <deshost ip="192.168.1.243" port="8009"/>

        </localpath>

    </plugin>

    <plugin name="refreshCDN">

        <localpath watch="/data0/htdocs/cms.xoyo.com/site/">

            <cdninfo domainname="ccms.chinacache.com" port="80" username="xxxx" passwd="xxxx"/>

            <sendurl base="http://pic.xoyo.com/cms"/>

            <regexurl regex="false" match="cms.xoyo.com/site([/a-zA-Z0-9]*).xoyo.com/images"/>

        </localpath>

    </plugin>

</head>

配置密码文件

echo “password”>>/opt/sersync/user.pass

注：文件权限必须为600否则启动异常

2.4服务启动

nohup /opt/sersync/sersync2  -r -d -o /opt/sersync/confxml.xml >/opt/sersync/rsync.log  >& &

#######如果是多个目录同步需要启动两个进程

nohup /opt/sersync/sersync2  -r -d -o /opt/sersync/downxml.xml >/opt/sersync/downrsync.log  >&1

-d:启用守护进程模式

-r:在监控前，将监控目录与远程主机用rsync命令推送一遍

-n:指定开启守护线程的数量，默认为10个

-o:指定配置文件，默认使用confxml.xml文件

开机启动
echo "nohup /opt/sersync/sersync2  -r -d -o/opt/sersync/confxml.xml >/opt/sersync/rsync.log  2>&1 & ">>/etc/rc.local

三、验证

在主服务器上的/var/atlassian目录下创建文件查看从服务器192.168.1.243上是否有同步。

参考：http://9402618.blog.51cto.com/9392618/1728794

sersync基于rsync+inotify实现数据实时同步的更多相关文章

CentOS 6.5 rsync+inotify实现数据实时同步备份
CentOS 6.5 rsync+inotify实现数据实时同步备份 rsync remote sync 远程同步,同步是把数据从缓冲区同步到磁盘上去的.数据在内存缓存区完成之后还没有写入到磁盘 ...
实战:rsync+inotify实现数据实时同步
Linux 内核从 2.6.13 版本开始提供了 inotify 通知接口,用来监控文件系统的各种变化情况,如文件存取.删除.移动等.利用这一机制,可以非常方便地实现文件异动告警.增量备份,并针对目录 ...
rsync+inotify磁盘数据实时同步
一.rsync+inotify主服务器部署 1.1安装rsync [root@nginx ~]# cd /usr/src/ [root@nginx src]# tar zxvf rsync-3.0.9 ...
rsync+inotify实现数据实时同步
rsync rsync是linux系统下的数据镜像备份工具.支持远程同步,本地复制,或者与其他SSH.rsync主机同步. 优点: 1).可以镜像保存整个目录树和文件系统.保存源目录整个目录树和文件系 ...
利用rsync+inotify实现数据实时同步脚本文件
将代码放在Server端,实现其它web服务器同步.首先创建rsync.shell,rsync.shell代码如下: #!/bin/bash host1=133.96.7.100 host2=133. ...
通过rsync+inotify实现数据实时备份同步
一.环境描述测试环境需求:服务器A与服务器B为主备服务模式,需要保持文件一致性,现采用sersync基于rsync+inotify实现数据实时同步环境描述: 主服务器172.26.7.50 ,从 ...
Linux下Rsync+Inotify-tools实现数据实时同步
Linux下Rsync+Inotify-tools实现数据实时同步注意:下面的三个案例都是rsync 每次都是全量的同步(这就坑爹了),而且 file列表是循环形式触发rsync ,等于有10个文件 ...
centos 6.9使用Rsync+Inotify-tools实现数据实时同步
centos 6.9使用Rsync+Inotify-tools实现数据实时同步说明: 操作系统:CentOS 6.9 源服务器:192.168.1.222 备份服务器:192.168.1.1.233 ...
Rsync+inotify实现文件实时同步#附shell脚本
强烈推荐先仔细看此文 https://segmentfault.com/a/1190000002427568 实验环境 centos 7.3 vm2:192.168.221.128 同步服务器 vm1 ...

随机推荐

C++面向对象多线程入门
第1节背景为了更好的理解多线程的概念,先对进程,线程的概念背景做一下简单介绍. 早期的计算机系统都只允许一个程序独占系统资源,一次只能执行一个程序.在大型机年代,计算能力是一种宝贵资源.对于资 ...
include指令和include动作有什么区别？
include指令称为文件加载指令,可以将其他的文件插入jsp网页,被插入的文件必须保证插入后形成的新文件符合jsp页面的语法规则. include指令语法格式:<%@incl ...
struts2.properties
#action后缀struts.action.extension=action#上传文件的工作目录与文件的最大尺寸struts.multipart.saveDir=struts.multipart.m ...
C语言编程的环境以及架构
c程序的使用步骤:
缓存ehcache
应用场景: 当调用一个接口数据时:直连-缓存-数据库-远程调用(类似直连) 代码: // 从缓存通过身份证号码查询是否存在征信报告 CisReportRoot fromCache = cacheSe ...
pygame精灵类实现房子爆炸效果
# coding=utf8 import random import pygame from pygame.locals import * from cStringIO import StringIO ...
GitLab项目迁移到Gerrit
1.在Gerrit上新建项目: 2.Gerrit项目配置权限(此处非代码): Reference:refs/* Push Annotated Tag Push Signed Tag Forge Com ...
iconfont 入门级使用方法
iconfont : what? 阿里妈妈MUX倾力打造的矢量图标管理.交流平台.设计师将图标上传到Iconfont平台,用户可以自定义下载多种格式的icon,平台也可将图标转换为字体,便于前端工程师 ...
Wiz写Blog? 不会再爱了，全面拥抱Markdown+Pandoc
Wiz写Blog? 不会再爱了,全面拥抱Markdown+Pandoc 文章转载自 http://iout.in/archives/454.html 我们为什么写作? 自从人们开始写作,写作便是记录. ...
parseConf(配置文件解析器)
/****************************************************************************** * * parseConf(配置文件解析 ...