背景:须要搭建一套跟线上一模一样的环境,用来预公布,这是当中的web分发的一个小模块的实现过程. 1 工具以及环境简单介绍 1.1,Inotify工具 Inotify,它是一个内核用于通知用户空间程序文件系统变化的机制.众所周知,Linux 桌面系统与 MAC 或 Windows 相比有很多不如人意的地方,为了改善这样的状况,开源社区提出用户态须要内核提供一些机制,以便用户态能够及时地得知内核或底层硬件设备发生了什么,从而能够更好地管理设备,给用户提供更好的服务,如hotplug.udev 和 …
一.inotify简介 1.inotify介绍 异步的文件系统事件监控机制,利用事件驱动机制,而无须通过诸如cron等的 轮询机制来获取事件,linux内核从2.6.13起支持 inotify,通过inotify可以监控文 件系统中添加.删除,修改.移动等各种事件 2.实现inotify的软件 inotify-tools,sersync,lrsyncd 3.查看内核是否支持inotify Linux下支持inotify的内核最小为2.6.13,使用uname -r 可查看内核版本 使用 ls /…
文件定时同步的实现: 利用rsync结合cron计划任务实现: rsync -av --delete /data/ 10.0.0.12:/back -a:保留文件属性 -v:显示过程 -delete:如果源文件没有的,目标文件里面有,就把目标文件里面的删除掉 文件实时同步的实现: 前提:   文件发生发生变化的时候就触发同步,但是触发同步需要一个依赖文件状态变化的功能. inotify   inotify是系统内核的一个监控服务,属于操作系统内核的一个特有机制,用于监控文件的信息变化. 查看内核…
文章摘自:http://lxw66.blog.51cto.com/5547576/1331048 rsync 帮助文档:http://man.linuxde.net/rsync 最近有个想法就是部署一台监控机器,上面装zabbix,ELK,tailon插件 我想把所有服务器上当天的日志文件同步到一台机器上,然后使用tailon 插件实时的在web端展现各台机器的日志 所以这里我首先要做的是把日志文件实时同步到monitor这台机器上,怎么做呢,网上搜了一下,使用rsync+inotify的 方法…
https://my.oschina.net/yyping/blog/91964 1.源文件服务器:192.168.10.203 2.备份服务器:192.168.10.88 配置备份服务器(192.168.10.88) vim /etc/rsync.conf uid = www gid = www read only = no hosts allow = * [web] path = /var/www auth users = yyp secrets file = /etc/rsyncd.sec…
软件简介: 1.rsync 与传统的 cp. tar 备份方式相比,rsync 具有安全性高.备份迅速.支持增量备份等优点,通过 rsync 可 以解决对实时性要求不高的数据备份需求,例如定期的备份文件服务器数据到远端服务器,对本地磁盘定 期做数据镜像等. 随着应用系统规模的不断扩大,对数据的安全性和可靠性也提出的更好的要求,rsync 在高端业务系统中 也逐渐暴露出了很多不足,首先,rsync 同步数据时,需要扫描所有文件后进行比对,进行差量传输.如 果文件数量达到了百万甚至千万量级,扫描所有…
一.slave端rsync设置在此部署rsync服务和rsync daemon 1.安装rsync   2.配置rsyncd.conf文件#vi /etc/rsyncd.conf配置文件uid = rootgid = rootuse chroot = yesmax connections = 4strict modes = yesport = 873log file = /var/log/rsync.log [static]path = /path/路径/ #上传于本slave的目录路径comm…
Sersync实现触发式文件同步 替代inotify和rsync Pyinotify是一个Python模块,用来监测文件系统的变化. Pyinotify依赖于Linux内核的功能—inotify(内核2.6.13合并). inotify的是一个事件驱动的通知器,其通知接口通过三个系统调用从内核空间到用户空间.pyinotify结合这些系统调用,并提供一个顶级的抽象和一个通用的方式来处理这些功能.pyinotify其实就是通过调用系统的inotify来实现通知的. http://my.oschin…
FROM : http://www.qiansw.com/centos-rsync-inotify-file-sync.html 生产环境中的两台web服务器,有个目录需要完全一样.使用rsync和inotify配合实现了这个需求.使用rsync可以实现文件权限.属性等相同同步.inotify工具可以实现文件一变更就及时通知rsync同步.下面是记录一下配置的过程. 文件主:10.0.0.54文件从:10.0.0.40 主服务器文件发生变化后,同步到从服务器. 两台web都通过yum安装rsyn…
首先分别介绍inotify 与 rsync的使用,然后用两者实现实时文件同步,最后说一下这样的系统存在什么样的问题. 1. inotify 这个具体使用网上很多,参考 inotify-tools 命令使用讲解 Inotify 内核版本支持 从 kernel 2.6.13 开始, Inotify 正式并入内核,RHEL5 已经支持. 看看是否有 /proc/sys/fs/inotify / 目录,以确定内核是否支持 [root@RHEL5 Rsync]# ls -l /proc/sys/fs/in…