unison + inotify  实现web 数据双向同步   unison 是一款跨平台的文件同步对象,不仅支撑本地对本地同步,也支持通过SSH,RSH和Socket 等网络协议进行同步.unison 支持双向同步,你可以同A同步到B ,也可以从B同步到A,这些都需要额外的设定.     源码包下载地址:链接:https://pan.baidu.com/s/1b8DU70 密码:sby7 1. 两台服务器都编译安装这三个源码包,在此只写在一台服务器上的编译安装的过程,另一台请自行安装 [ro…
两台服务器同步数据 unison 是一款跨平台的文件同步对象,不仅支撑本地对本地同步,也支持通过SSH,RSH和Socket 等网络协议进行同步. unison 支持双向同步,你可以同A同步到B ,也可以从B同步到A,这些都需要额外的设定. Inotify一种强大的.细粒度的.异步文件系统监控机制,它满足各种各样的文件监控需要,可以监控文件系统的访问属性.读写属性.权限属性.删除创建.移动等操作,也就是可以监控文件发生的一切变化. inotify-tools是一个C库和一组命令行的工作提供Lin…
1.在Linux下做WEB目录文件同步 一般有如下几种方式: ----------------------------------------------- 1)       nfs实现web数据共享 2)       rsync +inotify实现web数据同步 3)       rsync+sersync更快更节约资源实现web数据同步 4)       unison+inotify实现web数据双向同步 ------------------------------------------…
很常见的情况:我想同步/myweb下的 一些php文件 ,  但是不想复制/myweb/log/里边的一些日志文件,因为这些文件太大了,备份也是没有意义的. 现在如果想避开某个路径  直接添加—exclude 即可 比如—exclude “./log” –exclude ‘./log/file’ Note: the directory path is relative to the folder you are backing up. rsync备份时排除指定目录或文件 要排除指定目录,可以在客…
压缩命令主要用到tar打包和split分割,命令如下: tar czf - aaa | split -b 1024m - bbb.tar.gz_ aaa可以是文件也可以是目录, 大小可以是b.k.m这3个单位. 解压是: cat xxx.tar.gz_* | tar zvxf - 也可以先把包合起来再解压: cat xxx.tar.gz_* >xxx.tar.gz tar zvxf xxx.tar.gz 以上,如果有不同格式,请适当调整参数 转:http://blog.csdn.net/a5na…
1.ZIP 压缩时排除一个文件夹下所有内容zip -r sss.zip sss/ -x "sss/222/*" 压缩时排除指定多个文件夹下所有内容zip -r sss.zip sss/ -x "sss/222/*" -x "sss/333/*" 2.tar.gz tar.gz压缩:进入www.888.com文件夹内,排除某些文件夹打包压缩其余文件cd /home/www.888.com/tar -zcvf 888.tar.gz ./* --exc…
背景 将Server1上的数据同步到Server2: Server1目录结构: /us_data/yahoo └── qlib ├── calendars ├── dataset_cache ├── features ├── features_cache └── instruments Server2目录结构: data └── us_qlib_data └── yahoo └── qlib 我需要将 Server1 里的 qlib 传到 Server2 yahoo 目录下: 并且 Server…
  ### window书写shell脚本,实现判断指定文件是否存在,存在就删除,然后复制新文件到此目录 ``` if exist "G:\test\test2\1.txt" (del G:\test\test2\1.txt) copy G:\test\test1\1.txt G:\test\test2\1.txt 或 @echo off if exist "G:\test\test2\1.txt" (   del G:\test\test2\1.txt ) cop…
假设 test目录下有 1 2 3 4 5 这5个目录, 1下有6 7两个目录, 现在要将3 4 5 6目录tar打包,2和1下的6这两个目录不要.命令如下: Example[www]#cd test[test]#tar -zcvf test.tar.gz --exclude=1/6 --exclude=2 test或 Example[www]#tar -zcvf test.tar.gz --exclude=test/1/6 --exclude=test/2 test查看 tar –help 帮…
----before-upgrade./ --exclude=apache-tomcat-/logs --exclude=apache-tomcat-/work 注意,--exclude后面跟路径名称,最后一个符号一定不能用/闭合 以下为错误的用法,请注意比对差异 ----before-upgrade./ --exclude=apache-tomcat-/logs/work/…
zip -r glog-0.3.5.zip glog-0.3.5/  -x "glog-0.3.5/doc/*" unzip -v glog-0.3.5.zip 进行查看ZIP的内容. 1.先检查tomcat_2,如果存在就关闭掉. 2.再检查tomcat,如果存在就关闭掉. 开始替换文件 3.重新启动tomcat ,检查是否在5分钟内启动成功 4.重新启动tomcat_2,检查是否在5分钟内启动成功 5.发邮件通知替换文件成功! http://yum.mariadb.org/10.3…
转载自:http://hxl2009.blog.51cto.com/779549/476513 假设 test目录下有 1 2 3 4 5 这5个目录现在要将 3 4 5目录tar打包,1和2目录不要命令如下: tar -zcvf test.tar.gz --exclude=1 --exclude=2 test 或 tar -zcvf test.tar.gz --exclude=test/1 --exclude=test/2 test 看man tar帮助,--exclude后面跟的好像是正则注…
rsync多线程同步 A:文件服务器 ip:10.10.1.10 B:备份服务器 ip:10.10.1.11 1.在B服务器上安装rsync软件 tar xzvf rsync-3.1.0.tar.gz cd rsync-3.1.0 ./configure make make install 2.配置双机ssh信任 在两台服务器的root目录下创建.ssh目录并设置正确的权限 mkdir ~/.ssh chmod 700 ~/.ssh 使用ssh-keygen命令生成SSH协议的RSA密钥 ssh…
在我的博客<Rsync 数据复制软件应用>中,拉取数据访问的都是服务器端的/backup 目录,当然我们在其他目录下拉取数据.而实现这种操作就是指多模块复制. 要实现多模块复制首先需要修改rsync的配置文件rsyncd.conf(要记得此处的配置文件在服务器端哦!) [root@localhost ~]# vim /etc/rsyncd.conf[root@localhost ~]# cat /etc/rsyncd.conf#rsync_config____________________s…
linux web服务器静态资源的处理 unison+inotify双向同步 http://monkeyzhu.blog.51cto.com/5764358/1324391 简介 unison可以使两个本地磁盘目录保持内容一致,也可以支持网络数据同步.在内部实现上,unison使用OCaml语言开发,通过基于rsync算法对两边文件进行比较.unison是双向的,自动更新两边没有冲突的部分,冲突的部分需要人工解决(当两边同时对一个文件进行修改的时候),有冲突的部分会显示出来由用户选择更新策略支持…
nfs适合存小图片和小文件,有一个致命的缺点,就是其中一台web服务挂掉之后,会直接导致web页面无法访问,动态的那种数据, 而且数据量很大的数据不适合nfs Unison是一款跨平台(window,unix,linux)的文件同步对象,不仅支撑本地对本地同步,也支持经由过程SSH.RSH和Socket同 步支持双向同步 下载并且编译安装三个软件包.(inotify-tools-3.14.tar.gz.ocaml-3.10.2.tar.gz.unison-2.32.52.tar.gz) mkdi…
unison + inotify 实现文件实时双向同步部署步骤 一. Unison简介 Unison是Windows.Linux以及其他Unix平台下都可以使用的文件同步工具,它能使两个文件夹(本地或网络上的)保持内容的一致.Unison拥有与其它一些同步工具或文件系统的相同的特性,但也有自身的特点: 1. 跨平台使用: 2. 对内核和用户权限没有特别要求: 3. Unison是双向的,它能自动处理两分拷贝中更新没有冲突的部分,有冲突的部分将会显示出来让用户选择更新策略: 4. 只要是能连通的两…
unison是一款跨windows/linux/MAC OS平台的文件同步工具,不仅支持本地对本地同步,也支持通过SSH.RSH和Socket等网络协议进行同步.更棒的是,unison支持双向同步操作,你既可以从A同步到B,也可以从B同步到A,这些都不需要额外的设定. inotify 是一个 Linux 内核特性,它监控文件系统,并且及时向专门的应用程序发出相关的事件警告,比如删除.读.写和卸载操作等.您还可以跟踪活动的源头和目标等细节. 使用 inotify很简单:创建一个文件描述符,附加一个…
在发布asp.net站点和windows服务项目时,有的时候这样的需求:msbuild编译之后发布到服务器指定目录时要排除指定文件,比如通过jenkins构建时,不希望覆盖原来的Web.config和App.config,那么该如何排除呢? web站点项目 比如不希望发布Web.config文件,有以下三种方法. 1,将项Content改为None 修改前: <Content Include="Web.config" /> 修改后: <None Include=&qu…
问题可能出在  Intellij  idea 没有将源码保存在本地,浏览器访问了缓存而没有访问最新文件 用命令行查看了源码,同步了 接着禁止浏览器缓存,网页同步了 打开火狐浏览器 输入 about:config 点击"我了解此风险" 在搜索框中输入: browser.cache.check 双击上图搜索到的那条记录,会弹出一个对话框,默认值是3,我们需要把它修改成1,然后点击"确定" 数字1和3代表的意思如下: 0:Onece per session 每个进程一次,…
今天打算使用 inotify-tool 来对线上程序文件进行监控, 因为有些目录是缓存目录, 所以要进行排除, 同时还要排除一些指定的后缀的文件, 比如 .swp 等 需要递归监控的目录为: /tmp/inotify-test-dir需要排除的目录为: /tmp/inotify-test-dir/cache需要排除特定后缀文件: .log .swp 文件 根据网上看的一些资料, 我先做了如下尝试: /usr/local/bin/inotifywait -mr -e close_write,mod…
两台linux服务器系统CentOS7 一台Apache IP:192.168.155.130(发布文件服务器,也可以叫rsync客户端) 一台nginx IP:192.168.155.131(同步镜像文件服务器,也可以叫rsync服务器端) Apache服务器同步文件夹路径 /usr/local/apache/htdocs nginx服务器同步文件夹路径 /usr/local/nginx/html nginx服务器 rsync 下载地址https://rsync.samba.org/ wget…
rsync远程同步web服务器的数据 实验拓扑                                            服务器A(rsync服务器)--------------服务器B(rsync客户机) 数据:从rsync服务器----->rsync客户端    这个过程叫下行同步(下载)                       从rsync客户端----->rsync服务器    这个过程叫上行同步(上传) 服务器A作为rsync  serverip:172.16.1.1…
原理: rsync:用于跨主机目录同步 inotify:用于监测目录变化 再编写一个触发脚本,一旦inotify检测到目录中内容发生变化,则调用rsync执行同步. rsync服务器的的配置: 因为rsync是被xinetd守护,所以需要首先安装xinetd程序. 服务端配置: 安装阿里云epel源: rpm -ihv https://mirrors.aliyun.com/epel/6/x86_64/epel-release-6-8.noarch.rpm yum install xinetd -…
 Java web servers 间是如何实现 session 同步的 有一个多月的时间没有更新博客了,今天终于忙里偷闲,可以把近期的收获总结一下. 本文是关于Java web servers 之间是如何实现 session 同步的,其实其他技术栈也面临同样的问题需要解决,而且大部分场景下已经有了成熟的解决方案,其实就应用开发本身,大部分人不太会关注这个问题,因为我们大部分人写代码的时候只需要考虑单节点场景,其他同步部分由服务器端负责实现,但是作为一个刨根问底的人,可能这个问题本身已经能够吸引…
前言 Walle 一个web部署系统工具,可能也是个持续发布工具,配置简单.功能完善.界面流畅.开箱即用!支持git.svn版本管理,支持各种web代码发布,静态的HTML,动态PHP,需要编译的JAVA等. 目前,超过十家企业生产环境部署使用,欢迎star.fork.试用 :) 用户分身份注册.登录 开发者发起上线任务申请.部署 管理者审核上线任务 支持多项目部署 支持多项目多任务并行 快速回滚 项目的用户权限管理 部署前准备任务pre-deploy(前置检查) 代码检出后处理任务post-d…
Linux下通过rsync与inotify(异步文件系统事件监控机制)实现文件实时同步原文:http://www.summerspacestation.com/linux%E4%B8%8B%E9%80%9A%E8%BF%87rsync%E4%B8%8Einotify%E5%BC%82%E6%AD%A5%E6%96%87%E4%BB%B6%E7%B3%BB%E7%BB%9F%E4%BA%8B%E4%BB%B6%E7%9B%91%E6%8E%A7%E6%9C%BA%E5%88%B6%E5%AE%9E…
引子 这篇文章其实本来不是这样的,因为我用C#的代码实现了一个程序,后面才突然发现,我太傻太天真了,明明不需要写程序和写代码的,结果自己把自己二住了. 我们来看看效果图. 由于,我自己的原因,这个功能,最开始我使用的居然是自己写的程序来实现,太傻了. 参考了.两个网站,就可用搞定的,其实. 注册表路径: 图片最小面有的哦... 1. 如何对文件添加右键菜单. 2.如何使用cmd定位到指定目录. 参考内容: http://jingyan.baidu.com/article/295430f12371…
分享一个7z压缩文件时排除指定文件类型的命令行,感觉很有用: 7z a -t7z d:\updateCRM.7z d:\updateCRM\*.* -r -x!*.log -x!*bak a:创建压缩文件 -t7z:7z格式 d:\updateCRM.7z 目标文件名 d:\update7z\*.* 源文件位置 -r:遍历所有子目录 -x!* 要扣除的文件类型…