lsyncd + rsync 实时同步搭建
一、inotify和lsync
inotify和lsyncd对比一下,发现虽然lsyncd没有inotify那么真正的实时同步,但是lsyncd的同步基本上可以满足基本实时同步的要求,而且lsyncd的配置相对于inotify来说非常简单。
二、简介
服务端:此服务的服务端是指文件推送的目的服务器
客户端:需要被同步的文件所在的服务器
本次需要将客户端/data/src/目录下的文件推送到服务端/data/dest/
三、安装rsync
服务端和客户端都需要安装
yum源安装:
yum install rsync -y
编辑服务端配置文件,没有的需要新建
vim /etc/rsyncd.conf
uid=root # 服务器端传输文件时,要发哪个用户和用户组来执行,默认是nobody 根据实际情况修改成对应的用户和组 --chmod= 改成文件的权限
gid=root #
use chroot=no #用chroot,在传输文件之前,服务器守护程序在将chroot 到文件系统中的目录中,这样做的好处是可能保护系统被安装漏洞侵袭的可能。缺点是需要超级用户权限。另外对符号链接文件,将会排除在外
max connections=200 #允许的最大连接数
timeout=600 #超时时间
port=873 服务器的端口号 默认为873
lock file=/var/run/rsync.lock
log file=/var/log/rsyncd.log [test] # 模块名
path = /data/dest # 目标目录 comment = this is test # 说明
auth users = test # 认证用户
secrets file = /etc/rsyncd.secrets # 认证用户配置文件
ignore errors #忽略不重要的错误
read only = no
write only = no
hosts allow = client # 允许的传文件过来的客户端
hosts deny = * #不允许传文件过来的客户端
编辑认证文件:
echo "test:test" > /etc/rsyncd.secrets
chmod 600 /etc/rsyncd.secrets
启动rsyncd服务
/usr/bin/rsync --daemon --config=/etc/rsyncd.conf
无信息输出即传输成功
至此,服务端配置就已经完成,客户端的rsync安装完成即可。
四、安装lsyncd
注:此服务只需要在客户端配置
下载服务安装环境:
yum install cmake lua-devel -y
下载lsyncd服务并安装:
[root@localhost ~]# cd lsyncd/
[root@localhost lsyncd]# ls
bin2carray.lua CMakeLists.txt default-direct.lua default-rsyncssh.lua examples INSTALL lsyncd.lua tests
ChangeLog config.h.in default.lua distclean.sh fsevents.c lsyncd.c m4
cmake COPYING default-rsync.lua doc inotify.c lsyncd.h README.md
[root@localhost lsyncd]# cmake .
。。。。。。
[root@localhost lsyncd]# make && make install
安装完成。
配置lsyncd.conf
vim /etc/lsyncd.conf
settings {
logfile = "/var/log/lsyncd/lsyncd.log",
statusFile = "/tmp/lsyncd.stat",
inotifyMode ="CloseWrite",
statusInterval = ,
maxDelays = ,
}
sync_base_wp = {
default.rsync,
init=false,
delete = true,
rsync = {
binary = "/usr/bin/rsync",
archive = true,
compress = true,
password_file = "/etc/rsyncd.pass"
}
}
sync { sync_base_wp,source="/data/src",target = "test@server_ip::test" }
创建日志目录 mkdir /var/log/lsyncd
创建密码文件 echo "test" > /etc/rsyncd.pass;chmod 600 /etc/rsyncd.pass
启动lsyncd lsyncd -log all /etc/rsyncd.conf
注:如果你需要用--include 参数,但是lsyncd直接提供的是exclude和excludeFrom,所以你需要把所有不需要传输的文件类型都列出来,有的时候是不合适的。这个时候你可使用_extra = { "--include=" ,...}来实现。
五、测试
略
至此完成搭建。
附rsync和lsync配置文件详解:
rsync:https://yq.aliyun.com/articles/43202
lsync:https://www.kancloud.cn/hiyang/linux/390195
lsyncd + rsync 实时同步搭建的更多相关文章
- Lsyncd实时同步搭建指南
linux文件实时同步: inotify+rsync.sersync.lsyncd工具比较 一.inotify + rsync 最近一直在寻求生产服务服务器上的同步替代方案,原先使用的是inotify ...
- 真正的inotify+rsync实时同步 彻底告别同步慢
真正的inotify+rsync实时同步 彻底告别同步慢 http://www.ttlsa.com/web/let-infotify-rsync-fast/ 背景 我们公司在用in ...
- linux下实现多台服务器同步文件(inotify-tools+rsync实时同步文件安装和配置)
inotify-tools+rsync实时同步文件安装和配置 注:转载https://www.linuxidc.com/Linux/2012-06/63624.htm
- lsyncd实时同步搭建指南——取代rsync+inotify
1. 几大实时同步工具比较 1.1 inotify + rsync 最近一直在寻求生产服务服务器上的同步替代方案,原先使用的是inotify + rsync,但随着文件数量的增大到100W+,目录下的 ...
- linux rsync实时同步
rsync同步 同步与复制的差异:复制:完全拷贝源到目标同步:增量拷贝,只传输变化过的数据 同步操作:remote sync 远程同步支持本地复制,或与其他ssh,rsync主机同步.官方网站:htt ...
- 【转载】inotify+rsync实时同步 解决同步慢问题 (转载备记)
原文地址:http://www.ttlsa.com/web/let-infotify-rsync-fast/ 背景 我们公司在用inotify+rsync做实时同步,来解决分布式集群文件一致性的问题. ...
- inotify-tools+rsync实时同步文件安装和配置
服务器A:论坛的主服务器,运行DZ X2论坛程序;服务器B:论坛从服务器,需要把X2的图片附件和MySQL数据实时从A主服务器实时同步到B服务器.MySQL同步设置会在下一编中说到.以下是用于实时同步 ...
- rsync实时同步
假设有如下需求: 假设两个服务器: 192.168.0.1 源服务器 有目录 /opt/test/ 192.168.0.2 目标服务器 有目录 /opt/bak/test/ 实现的目的就是保持这两 ...
- [转载]真正的inotify+rsync实时同步 彻底告别同步慢
原文链接http://www.ttlsa.com/web/let-infotify-rsync-fast/ 背景我们公司在用inotify+rsync做实时同步,来解决分布式集群文件一致性的问题.但当 ...
随机推荐
- IOS上微信在输入框弹出键盘后,页面不恢复,下方有留白,有弹窗弹出时页面内容感应区域错位
问题说明: ios中,键盘的弹起,页面会往上挪动,使输入框展示在页面中间,键盘隐藏页面会下挪恢复原状. 在微信移动端,ios页面不恢复,下方有留白. 收起键盘的瞬间,如果有弹窗弹出,此时时页面内容应区 ...
- JSP 向 JavaScript 中传递数组
采用隐藏标签的方式: // JSP: <% while(rs.next()) { %> <in ...
- .net 大数据量,查找Where优化(List的Contains与Dictionary的ContainsKey的比较)
最近优化一个where查询条件,查询时间很慢,改为用Dictionary就很快了. 一.样例 假设:listPicsTemp 有100w条数据,pictures有1000w条数据. 使用第1段代码执 ...
- Oracle Sequence不设置cache参数的几个潜在问题(转载)
转载于 http://www.uml.org.cn/sjjm/201204065.asp 在Oracle中,我们没有MYSQL和SQL Server ...
- [转]linux实时查看更新日志命令
很多时候在调试生成或正式平台服务器的时候想查看实时的日志输出,在Linux中可以使用tail 或 watch来实现. 比如我们项目中有个 app.log 的日志文件,我们普通读取都使用 vi app. ...
- 配置本地git服务器(gitblit win7)
title: 配置本地git服务器 date: 2017年3月7日22:43:14 gitblit(不用安装) 进入gitblit-1.8.0\data下,编辑gitblit.properties和d ...
- apk的包名修改
今天,想在android手机上安装两个相同的应用,本以为可以安装不同版本的,试了几次,均相互覆盖了,于是,只能设法修改apk所对应的包名(package name). 目的声明:本文只是为了满足DIY ...
- 《Mysql - 到底可不可以使用 Join ?》
一:Join 的问题? - 在实际生产中,使用 join 一般会集中在以下两类: - DBA 不让使用 Join ,使用 Join 会有什么问题呢? - 如果有两个大小不同的表做 join,应该用哪个 ...
- 安装低版本django1.11出错
错误信息: File "C:\python3\lib\site-packages\django\utils\autoreload.py", line 227, in wrapper ...
- 奇怪的print progname ":\n"日志
[root@xxxxxxxx /home/ahao.mah] #tail /var/log/messages -f Feb 10 10:01:01 csaccurate-49-5011 } Feb 1 ...