一：环境

　　操作系统环境：redhat6.6

　　内核版本：2.6.32-358.el6.x86_64

　　rsync server：192.168.2.3（部署rsync server）

　　rsync client：192.168.2.4（部署sersync）

　　特别说明：

　　　　我之前用rsync进行生产环境数据的同步，由于目录下每日会有上千个文件生成，所以目录本身就比较大，用rsync的进行无差异同步的时候发现就扫描目录的文件就需要很长时间，同步效率有些低，后面用inotify+rsync进行数据同步，有个问题是：inotify监控目录文件变化的时候，在我们要对生产系统进行开启或关闭的时候，由于目录占用问题导致开启或关闭生产组件会出现进程没关闭的显示，但是实际上是关闭了的，由于检查进程的时候发现目录被占用了；所以今天用sersync进行数据同步的时候发现速度快了好多，所以留个笔记以后方便查看。

二：sersync部署

　　1、下载sersync安装包

　　　　链接：https://pan.baidu.com/s/1kHQSVEODxbtXpxxMnT1S2A
　　　　提取码：9q4m

　　2、解压安装包

[root@rsync_client tools]# tar xf sersync2.5.4_64bit_binary_stable_final.tar.gz
[root@rsync_client tools]# mv GNU-Linux-x86 /usr/local/sersync

　　3、备份原配置文件

[root@rsync_client ~]# cd /usr/local/sersync/

[root@rsync_client sersync]# cp confxml.xml confxml.xml.ori

　　4、部署rsync server详细参数解释请看https://www.cnblogs.com/zhangweiyi/p/10571152.html

 1 [root@rsync_server ~]# cat /etc/rsyncd.conf

 2 uid = rsync

 3 gid = rsync

 4 use chroot = no

 5 max connections = 200

 6 timeout = 300

 7 pid file = /var/run/rsyncd.pid

 8 lock file = /var/run/rsync.lock

 9 log file = /var/log/rsyncd.log

10 ignore errors

11 read only = false

12 list = false

13 hosts allow = 192.168.2.0/24

14 hosts deny = 0.0.0.0/32

15 auth users = sam

16 secrets file = /etc/rsync.password

17 [test]

18 path = /tmp/

　　5、配置rsync密码文件

[root@rsync_server ~]# cat /etc/rsync.password

sam:test123

[root@rsync_server ~]#

[root@rsync_server ~]# ll /etc/rsync*　　　　# 查看文件权限是否为600

-rw------- 1 root root 364 Nov 30 08:29 /etc/rsyncd.conf-rw------- 1 root root  13 Nov 21 09:59 /etc/rsync.password

　　6、启动rsync

[root@rsync_server ~]# rsync --daemon

[root@rsync_server ~]# lsof -i :873

COMMAND  PID USER   FD   TYPE DEVICE SIZE/OFF NODE NAME

rsync   1206 root    3u  IPv4  11197      0t0  TCP *:rsync (LISTEN)

rsync   1206 root    5u  IPv6  11198      0t0  TCP *:rsync (LISTEN)

三：部署sersync

　　1、首先创建rsync server端的密码验证文件

[root@rsync_client ~]# cat /etc/rsync.password

test123

[root@rsync_client ~]# ll /etc/rsync.password　　　　# 确保文件权限为600

-rw-------. 1 root root 7 11月 26 19:53 /etc/rsync.password

　　2、部署sersync

[root@rsync_client tools]# tar xf sersync2.5.4_64bit_binary_stable_final.tar.gz

[root@rsync_client tools]# mv GNU-Linux-x86 /usr/local/sersync

[root@rsync_client sersync]# cp confxml.xml confxml.xml.ori

[root@rsync_client sersync]#

　　3、修改config.xml文件只修改我注释了的即可

 1 [root@rsync_client sersync]# cat confxml.xml

 2 <?xml version="1.0" encoding="ISO-8859-1"?>

 3 <head version="2.5">

 4     <host hostip="localhost" port="8008"></host>

 5     <debug start="false"/>

 6     <fileSystem xfs="false"/>

 7     <filter start="false">

 8         <exclude expression="(.*)\.svn"></exclude>

 9         <exclude expression="(.*)\.gz"></exclude>

10         <exclude expression="^info/*"></exclude>

11         <exclude expression="^static/*"></exclude>

12     </filter>

13     <inotify>

14         <delete start="true"/>

15         <createFolder start="true"/>

16         <createFile start="true"/>　　　　# 修改此项为true

17         <closeWrite start="true"/>

18         <moveFrom start="true"/>

19         <moveTo start="true"/>

20         <attrib start="false"/>

21         <modify start="false"/>

22     </inotify>

23

24     <sersync>

25         <localpath watch="/tmp/">　　# 监控的目录

26             <remote ip="192.168.2.4" name="test"/>　　　　# 需要把监控的目录数据同步到rsync server指定的模块下，前面写了server的模块名是test对应的目录是：/tmp/

27             <!--<remote ip="192.168.8.39" name="tongbu"/>-->

28             <!--<remote ip="192.168.8.40" name="tongbu"/>-->

29         </localpath>

30         <rsync>

31             <commonParams params="-artuz"/>

32             <auth start="true" users="sam" passwordfile="/etc/rsync.password"/>　　　　# 指定rsync的虚拟用户和密码文件路径

33             <userDefinedPort start="false" port="874"/><!-- port=874 -->

34             <timeout start="false" time="100"/><!-- timeout=100 -->

35             <ssh start="false"/>

36         </rsync>

37         <failLog path="/var/log/rsync_fail_log.sh" timeToExecute="60"/><!--default every 60mins execute once-->　　　　# 把日志文件的路径改到/var/log/下

38         <crontab start="false" schedule="600"><!--600mins-->

39             <crontabfilter start="false">

40                 <exclude expression="*.php"></exclude>

41                 <exclude expression="info/*"></exclude>

42             </crontabfilter>

43         </crontab>

44         <plugin start="false" name="command"/>

45     </sersync>

46

47     <plugin name="command">

48         <param prefix="/bin/sh" suffix="" ignoreError="true"/>  <!--prefix /opt/tongbu/mmm.sh suffix-->

49         <filter start="false">

50             <include expression="(.*)\.php"/>

51             <include expression="(.*)\.sh"/>

52         </filter>

53     </plugin>

54

55     <plugin name="socket">

56         <localpath watch="/opt/tongbu">

57             <deshost ip="192.168.138.20" port="8009"/>

58         </localpath>

59     </plugin>

60     <plugin name="refreshCDN">

61         <localpath watch="/data0/htdocs/cms.xoyo.com/site/">

62             <cdninfo domainname="ccms.chinacache.com" port="80" username="xxxx" passwd="xxxx"/>

63             <sendurl base="http://pic.xoyo.com/cms"/>

64             <regexurl regex="false" match="cms.xoyo.com/site([/a-zA-Z0-9]*).xoyo.com/images"/>

65         </localpath>

66     </plugin>

67 </head>

　　4、启动sersync

[root@rsync_client ~]# /usr/local/sersync/sersync2 -d -r -o /usr/local/sersync/confxml.xml

[root@rsync_client ~]# ps -ef | grep -v "grep" | grep sersync

　root 24590 1 0 19:46 ? 00:00:00 /usr/local/sersync/sersync2 -d -r -o /usr/local/sersync/confxml.xml

　　5、测试是否正常

　　　　在/tmp目录下创建几个文件看看目标端192.168.2.3（rsync server）是否已经收到

　　　　在/tmp目录下删除几个文件看看目标端192.168.2.3（rsync server）是否也不存在

　　　　以上两者满足说明部署成功！

sersync+rsync进行数据同步的更多相关文章

  1. sersync+rsync实时数据同步

    sersync+rsync实时数据同步 1.相关背景介绍 前面有关文章配置实现了rsync增量同步以及配置为定时同步,但是在实际生产环境中需要实时的监控数据从而进行同步(不间断同步),可以采取inot ...

  2. 【linux运维】rsync+inotify与sersync+rsync实时数据同步笔记

    Rsync(remote sync)远程同步工具,通过rsync可以实现对远程服务器数据的增量备份通过,但rsync自身也有缺陷,同步数据时,rsync采用核心算法对远程服务器的目标文件进行对比,只进 ...

  3. CentOS 7 Sersync+Rsync 实现数据文件实时同步

    rsync+inotify-tools与rsync+sersync架构的区别? 1.rsync+inotify-tools inotify只能记录下被监听的目录发生了变化(增,删,改)并没有把具体是哪 ...

  4. Linux系统备份还原工具4（rsync/远程数据同步工具）

    rsync即是能备份系统也是数据同步的工具. 在Jenkins上可以使用rsync结合SSH的免密登录做数据同步和分发.这样一来可以达到部署全命令化,不需要依赖任何插件去实现. 命令参考:http:/ ...

  5. rsync 远程数据同步工具详解

    rysnc 命令用法:(OPTION-参数,USER-用户,HOST-IP地址,SRC-复制源位置,DEST-复制目标位置)Shell拉:rsync [OPTION] [USER@]HOST:SRC ...

  6. Sersync+Rsync实现数据文件实时同步

    rsync+inotify-tools与rsync+sersync架构的区别1,rsync+inotify-tools只能记录下被监听的目录发生的变化(增删改)并没有把具体变化的文件或目录记录下来在同 ...

  7. rsync + sersync 实现实时数据同步

    一.环境: 主机1:youzhuan-bak     centos 7.2 主机2:youzhuan-online   centos 7.2 二.部署过程: youzhuan-bak : [root@ ...

  8. rsync实现数据同步

    希望两台机器指定目录的数据保持一致 192.168.19.252(master)                 192.168.19.251(slave) /cache 拉复制            ...

  9. sersync+rsync做实时同步

    (1).实验环境 源主机:youxi1 192.168.5.101 目的主机:youxi2 192.168.5.102 目的:实时同步数据 sersync默认端口874,rsync默认端口873 (2 ...

随机推荐

  1. Beta阶段第五次会议

    Beta阶段第五次会议 时间:2020.5.21 完成工作 姓名 工作 难度 完成度 ltx 1.对小程序进行修改和美化新增页面(新增60行) 中 85% xyq 1.编写技术博客 中 85% xtl ...

  2. UltraSoft - Beta - Scrum Meeting 4

    Date: May 20th, 2020. Scrum 情况汇报 进度情况 组员 负责 今日进度 q2l PM.后端 完成了课程中心对课程提醒的爬虫 Liuzh 前端 修改DDL列表中起始时间为课程名 ...

  3. CanalAdmin搭建Canal Server集群

    CanalAdmin搭建Canal Server集群 一.背景 二.机器情况 三.实现步骤 1.下载canal admin 2.配置canalAdmin 3.初始化canal admin数据库 4.启 ...

  4. 基于docker-compose搭建sonarqube代码质量检测平台

    一.需求 在我们开发的过程中,难免有时候代码写的不规范,或存在一些静态的bug问题,这个时候一个良好的代码检查工具就很有必要,而sonarqube正好可以满足整个要求. 二. docker-compo ...

  5. Noip模拟5 2021.6.7

    T1 string(线段树优化) 看到数据范围就必须要想到优化,那么如何把26×M∗N 的复杂度降低呢?? 用到那个我们最不想打的数据结构--线段树...... 然而,这个线段树与往常不同,他只需要用 ...

  6. 最短路径算法：弗洛伊德（Floyd-Warshall）算法

    一.算法介绍 Floyd-Warshall算法(英语:Floyd-Warshall algorithm),中文亦称弗洛伊德算法,是解决任意两点间的最短路径的一种算法,可以正确处理有向图或负权(但不可存 ...

  7. linux c语言 rename的用法-rename() does not work across different mount points, even if the same file system is mounted on both

    最近在一个项目上执行文件的搬移功能时发现总是失败,临时录像文件存放于emmc的/tmp/目录下,当录像完成时候则调用rename企图将此文件搬到/mnt/sdcard/mmcblk1p1/(这是外置的 ...

  8. 二进制小数 牛客网 程序员面试金典 C++ Python

    二进制小数 牛客网 程序员面试金典 题目描述 有一个介于0和1之间的实数,类型为double,返回它的二进制表示.如果该数字无法精确地用32位以内的二进制表示,返回"Error". ...

  9. poj 2060 Taxi Cab Scheme（DAG图的最小路径覆盖）

    题意: 出租车公司有M个订单. 订单格式:     hh:mm  a  b  c  d 含义:在hh:mm这个时刻客人将从(a,b)这个位置出发,他(她)要去(c,d)这个位置. 规定1:从(a,b) ...

  10. python的分支结构

    python分支结构 if结构 python的 if 选择分支结构的基础语法如下,需要注意的是判断条件后面是半角的分号,它的作用相当于Java中的小括号 if 判断条件 : 代码块 elif 判断条件 ...