1. Rsync+inotify

  1. 功能要求

    通过rsync+inotify将数据库指定目录实时同步到备份服务器。

  2. 环境说明

    M:192.168.10.11 数据库服务器

    S:192.168.10.13 备份服务器

  3. 备份服务器操作

    # yum -y install rsync

    # useradd rsync -s /sbin/nologin -M

    # mkdir -pv /kazihuo/bak

    # chown rsync.rsync /kazihuo/bak

    # cat /etc/rsyncd.conf

    pid file = /var/run/rsyncd.pid                                                                                                                                                                   [Rsc-bak]

    uid = rsync

    gid = rsync

    path = /kazihuo/bak/

    max connections = 200

    log file = /var/log/rsyncd.log

    auth users = rsync-k

    secrets file = /etc/rsync.password

    # cat /etc/rsync.password

    rsync-k:000000

    # chomd 600 /etc/rsync.password

    # rsync --daemon

    # ss -autnpl |grep rsync

    tcp LISTEN 0 5 *:873 *:* users:(("rsync",pid=2383,fd=4))

    tcp LISTEN 0 5 :::873 :::* users:(("rsync",pid=2383,fd=5))

  4. 数据库服务器操作

    # ls /proc/sys/fs/inotify/

    max_queued_events max_user_instances max_user_watches

    #显示以上三个文件则表明支持inotify

    # wget http://github.com/downloads/rvoicilas/inotify-tools/inotify-tools-3.14.tar.gz

    # tar axvf inotify-tools-3.14.tar.gz

    # cd inotify-tools-3.14

    # ./configure --prefix=/usr/local/inotify

    # make && make install

    # cd /usr/local/inotify/bin/

    # ./inotifywait –help

    -r –recursive

    #递归查询目录

    -q –quiet

    #打印监控事件的信息

    -m –monitor

    #始终保持事件监听状态

    --excludei

    #排除文件或目录时,不区分大小写

    --timefmt

    #指定时间输出的格式

    --format

    #打印使用指定的输出类似格式字符串

    -e –event

    #指定需要监控的事件,如下:

    EVENT:

    access #文件或目录被访问

    modify #文件或目录被修改

    attrib #文件或目录属性被改变

    close #文件或目录封闭

    open #文件或目录被打开

    moved_to #文件或目录被移动至另外一个目录

    move #文件或目录移动

    create #文件或目录被创建在当前目录

    delete #文件或目录被删除

    umount #文件系统被卸载

    # mkdir -pv /root/ka #创建本地监控目录

    # cat /etc/rsync.password

    000000

    # chmod 600 /etc/rsync.password                                                                                                                                                                                                                                                                       # cat /scripts/inotify.sh

    #!/bin/bash

    # Defined parameter

    host01=192.168.10.13 #inotify-slave的ip地址

    src=/root/ka #本地监控的目录

    dst=Rsc-bak #inotify-slave的rsync服务的模块名

    user=rsync-k #inotify-slave的rsync服务的虚拟用户

    rsync_passfile=/etc/rsync.password #本地调用rsync服务的密码文件

    inotify_home=/usr/local/inotify #inotify的安装目录

    #Judge

    if [ ! -e "$src" ] || [ ! -e "${rsync_passfile}" ] || [ ! -e "${inotify_home}/bin/inotifywait" ] || [ ! -e "/usr/bin/rsync" ];then

    echo "Check File and Folder"

    fi

    ${inotify_home}/bin/inotifywait -mrq --timefmt '%d/%m/%y %H:%M' --format '%T %w%f' -e modify,delete,create,attrib $src | while read files

    do

    cd $src && rsync -arz --delete ./ --timeout=100 $user@$host01::$dst --password-file=${rsync_passfile} >/dev/null 2>&1

    done

    # nohup /scripts/inotify.sh &

  5. 功能测试操作

    [root@M ~]# mkdir /root/ka/ccc

    [root@S ~]# tail -f /var/log/rsyncd.log

    2017/12/19 20:15:22 [12233] rsync to Rsc-bak/ from rsync-k@UNKNOWN (192.168.10.11)

    2017/12/19 20:15:22 [12233] receiving file list

    2017/12/19 20:15:22 [12233] sent 84 bytes received 207 bytes total size 973

    [root@S ~]# ls /kazihuo/bak/

    ccc

    注:只有当源目录下文件或目录发生变化(增、删、改)时,相应的备份服务器才会执行实时同步动作!

Centos7数据实时同步的更多相关文章

  1. CentOS7下Rsync+sersync实现数据实时同步

    近期公司要上线新项目,后台框架选型我选择当前较为流行的laravel,运行环境使用lnmp. 之前我这边项目tp32+apache,开发工具使用phpstorm. 新建/编辑文件通过phpstorm配 ...

  2. centos7服务搭建常用服务配置之二:Rsync+sersync实现数据实时同步

    目录 1.RSYNC数据备份 1.1 rsync服务简介 1.2 rsync特点和优势 1.3 rysnc运行模式简介 1.4 数据同步方式 2 Rsync实验测试 2.1 实验环境说明 2.2 服务 ...

  3. 项目实战:rsync+sersync实现数据实时同步

    一.组网介绍 本次实验使用两台主机: qll251 角色:Rsync server + Sersync server qll252 角色: Rsync client 本次实验采用CentOS7.7系统 ...

  4. Linux下Rsync+sersync实现数据实时同步

    inotify 的同步备份机制有着缺点,于是看了sersync同步,弥补了rsync的缺点.以下转自:http://www.osyunwei.com/archives/7447.html 前言: 一. ...

  5. sersync实现数据实时同步

    1.1 第一个里程碑:安装sersync软件 1.1.1 将软件上传到服务器当中并解压 1.上传软件到服务器上 rz -E 为了便于管理上传位置统一设置为 /server/tools 中 2.解压软件 ...

  6. 基于netcore实现mongodb和ElasticSearch之间的数据实时同步的工具(Mongo2Es)

    基于netcore实现mongodb和ElasticSearch之间的数据实时同步的工具 支持一对一,一对多,多对一和多对多的数据传输方式. 一对一 - 一个mongodb的collection对应一 ...

  7. Mysql数据实时同步

    企业运维的数据库最常见的是 mysql;但是 mysql 有个缺陷:当数据量达到千万条的时候,mysql 的相关操作会变的非常迟缓; 如果这个时候有需求需要实时展示数据;对于 mysql 来说是一种灾 ...

  8. CentOS 6.5 rsync+inotify实现数据实时同步备份

    CentOS 6.5 rsync+inotify实现数据实时同步备份 rsync    remote sync 远程同步,同步是把数据从缓冲区同步到磁盘上去的.数据在内存缓存区完成之后还没有写入到磁盘 ...

  9. sersync基于rsync+inotify实现数据实时同步

    一.环境描述 需求:服务器A与服务器B为主备服务模式,需要保持文件一致性,现采用sersync基于rsync+inotify实现数据实时同步 主服务器A:192.168.1.23 从服务器B:192. ...

随机推荐

  1. poj Hotel 线段树

    经典线段树的题. 每个节点存储的信息:左端点连续空房间的长度,右端点连续空房间长度,连续空房间的最大长度. 由于要求每次必须从尽量靠左边的位置进行居住,那么搜索时应尽量让区间起始位置更小: 1.如果当 ...

  2. [Note] Yet Another Resource Negotiator

    Yet Another Resource Negotiator Apache Hadoop YARN 是新一代资源管理调度框架,主要针对 Hadoop MapReduce 1.0 的缺陷做出了改进 M ...

  3. linux内核体系结构

    linux内核第一记   1.linux体系结构   从上图可知,Linux分为:用户空间和内核空间.内核空间和用户空间是程序执行的两种不同的状态,通过系统调用和硬件中断能够完成从用户空间到内核空间的 ...

  4. 理解Annotation

    一.概念 Annontation是Java5开始引入的新特征.中文名称一般叫注解.它提供了一种安全的类似注释的机制,用来将任何的信息或元数据(metadata)与程序元素(类.方法.成员变量等)进行关 ...

  5. R语言︱情感分析—词典型代码实践(最基础)(一)

    每每以为攀得众山小,可.每每又切实来到起点,大牛们,缓缓脚步来俺笔记葩分享一下吧,please~ --------------------------- 笔者寄语:词典型情感分析对词典要求极高,词典中 ...

  6. freemarker写select组件报错总结(一)

    1.具体错误如下 六月 25, 2014 11:26:29 下午 freemarker.log.JDK14LoggerFactory$JDK14Logger error 严重: Template pr ...

  7. ORA-00900: invalid SQL statement

    1.错误描述 SQL> startup;        startup        ORA-00900: invalid SQL statement 2.错误原因 3.解决办法

  8. linux配置wifi连接并通过ssh代理开启socks代理

    1, 命令行配置连接wifi具体我是用的cubieboard2上Debian主机,其中配置wifi的命令行有wpa_cli,具体用法步骤如下.wpa_cli 命令行执行需要root权限,详细用法请见 ...

  9. ASP.NET Core源码学习(一)Hosting

    ASP.NET Core源码的学习,我们从Hosting开始, Hosting的GitHub地址为:https://github.com/aspnet/Hosting.git 朋友们可以从以上链接克隆 ...

  10. 极速搞定1小时不出结果SQL的优化(SQL Tuning)

    今天帮用户做了一个SQL TUNING,原来为1个多小时不出结果,TUNING后为几秒,图片为我调优时参考的explain plan,隐去某些具体信息,虽然通过该计划,不能完全确定SQL慢的原因,但稍 ...