linux rsync实时同步
rsync同步
同步与复制的差异:
复制:完全拷贝源到目标
同步:增量拷贝,只传输变化过的数据
同步操作:
remote sync 远程同步
支持本地复制,或与其他ssh,rsync主机同步。
官方网站:http://rsync.samba.org/
命令用法
rsync [选项] 源目录 目标目录
常用选项:
-a:归档模式,相当于-rlptgiD
-v:显示同步过程详细信息
-z:传输过程中启用压缩
-r:递归,包括目录/子目录及所有文件
-l:保留符号链接文件
-p,-t:保留文件的权限,时间标记
-o,-g:保留文件的属主/属组标记
-D:保留设备文件及其他特殊文件
-H:保留硬链接文件
-A:保留文件的ACL属性信息
-n:测试同步过程,不做实际修改
--delete:删除目标文件夹内多余的文档(确保源和目标完全一致)
本地同步
rsync [选项] 本地目录1 本地目录2
rsync [选项] 本地目录1/ 本地目录2
[root@svr ~]# rsunc -a /boot /xxx(同步整个文件夹)
[root@svr ~]# rsunc -a /boot/ /xxx/(只同步目录下数据)
服务端要求:服务端应开启sshd服务,并提供授权的用户,密码,此目录对远程目录必须有相应的权限
rsync+ssh远程同步
下行同步:rsync [选项] root@x远程目录/ 本地目录
上行同步:rsync [选项] 本地目录/ root@x远程目录
下行同步实例:
[root@svr ~]# rsync root@192.168.4.1:/boot/(浏览远程目录)
[root@svr ~]# rsync -av root@192.168.4.1:/boot/ /xxx/(将远程主机/boot/目录备份到本地)
[root@svr ~]# ls /xxx/(查看结果)
上行同步实例:
[root@svr etc]# rsync -av /etc root@192.168.4.1:/opt/(将本地的/etc/目录备份到远程主机)
[root@gw1 opt]# ls(远程机查看结果)
rh
————————————————————————————————————————————
rsync+rsync远程同步
同步资源配置文件/etc/rsyncd.conf
[root@svr ~]# chkconfig rsync on(开启)
[root@svr ~]# service xinetd restart(重启服务)
创建rsyncd.conf共享配置(若是匿名共享。可去掉auth users设置)
[root@svr ~]# vim /etc/rsyncd.conf
[hydra] (共享文件名)
path = /usr/src(共享文件目录)
comment = Rsunc Share Test
read only = yes
dont compress = *.gz *.bz2 *.tgz *.zip
auth users = ruser (许可的用户)
secrets file = /etc/rsyncd_users.db(用户账户密码的存放路径)
[root@svr ~]# vim /etc/rsyncd_users.db(创建用户,密码存放文件)
ruser:123456(用户:密码)
root:Taren1
hydra:Anonymous
[root@svr ~]# chmod 600 /etc/rsyncd_users.db(更改存放用户,密码文件权限)
查看共享资源:rsync root@x::
下行同步:rsync [选项] root@x共享名/ 本地目录
上行同步:rsync [选项] 本地目录/ root@x共享名
下行同步实例:
[root@gw1 ~]# rsync -av root@192.168.4.2::hydra/ /myhydra
[root@gw1 ~]# ls /myhydra/(查看文件)
debug kernels
上行同步实例:
[root@gw1 ~]# rsync -av /opt root@192.168.4.2::hydra
[root@svr ~]# ls /usr/src/(查看文件)
debug kernels
——————————————————————————————————————————
关于同步的实时性
依赖于两个组件:
监控源文档的变化(inotify)
调用同步操作的命令行(rsync)语句
关于inotify机制:
linux内核2.6.13以上版本默认支持
需要额外安装控制工具,比如inotify-tools
inotify实时同步(inotifywait监控目录程序)
inotify-tools-3.13.tar.gz
源码包编译安装:
解包:[root@svr ~]# tar xf /root/inotify-tools-3.13.tar.gz -C /usr/src/
配置:[root@svr ~]# cd /usr/src/
[root@svr inotify-tools-3.13]# ./configure
编译:[root@svr inotify-tools-3.13]# make
安装:[root@svr inotify-tools-3.13]# make install
[root@svr ~]# inotifywait
No files specified to watch!
inotifywait监控
基本用法
inotifywait [选项] 目标文件夹
常用命令选项
-m,--monitor:启用监控
-r,--recursive:递归,涵盖所有子目录
-q,--quiet:减少输出信息
-e,--event:限定要监控的事件类型
实例:
监控/opt文件夹
事件类型:modify,move,create,delete,attrib
[root@svr ~]# inotifywait -mrq -e modify,move,create,delete,attrib /opt
[root@svr ~]# [root@svr ~]# vim /root/irsync.sh(写个脚本,放后台执行)
#!/bin/bash
DIR1="/opt"(DIR1是个变量,后期好更改)
RCMD="rsync -az --delete $DIR1 /opt2/"(RCMD变量)
inotifywait -mrq -e create,delete,move,attrib,modify $DIR1 | while read x y z
do
$RCMD(这个变量相当于执行rsync -az --delete /opt /opt2/)
done &
实例:
网站实时镜像
实现主机svr —》主机pc的网站实时镜像
双方的目录均为/var/www/html/
以svr为同步发起方,配置inotfy+rsync同步
以pc为同步目标,基于ssh验证(如果不想输密码,可以给对方公钥)
rsync -az --delete /var/www/html/ root@174.16.16.120:/var/www/html/
[root@svr ~]# vim /root/irsync.sh (要实时同步就修改脚本文件)
#!/bin/bash
DIR1="/var/www/html/"
RCMD="rsync -az --delete $DIR1 root@174.16.16.120:$DIR1
"
inotifywait -mrq -e create,delete,move,attrib,modify $DIR1 | while read x y z
do
$RCMD
done &
————————————————————————————————————————————
linux rsync实时同步的更多相关文章
- linux下实现多台服务器同步文件(inotify-tools+rsync实时同步文件安装和配置)
inotify-tools+rsync实时同步文件安装和配置 注:转载https://www.linuxidc.com/Linux/2012-06/63624.htm
- 真正的inotify+rsync实时同步 彻底告别同步慢
真正的inotify+rsync实时同步 彻底告别同步慢 http://www.ttlsa.com/web/let-infotify-rsync-fast/ 背景 我们公司在用in ...
- 【转载】inotify+rsync实时同步 解决同步慢问题 (转载备记)
原文地址:http://www.ttlsa.com/web/let-infotify-rsync-fast/ 背景 我们公司在用inotify+rsync做实时同步,来解决分布式集群文件一致性的问题. ...
- lsyncd + rsync 实时同步搭建
一.inotify和lsync inotify和lsyncd对比一下,发现虽然lsyncd没有inotify那么真正的实时同步,但是lsyncd的同步基本上可以满足基本实时同步的要求,而且lsyncd ...
- inotify-tools+rsync实时同步文件安装和配置
服务器A:论坛的主服务器,运行DZ X2论坛程序;服务器B:论坛从服务器,需要把X2的图片附件和MySQL数据实时从A主服务器实时同步到B服务器.MySQL同步设置会在下一编中说到.以下是用于实时同步 ...
- rsync实时同步
假设有如下需求: 假设两个服务器: 192.168.0.1 源服务器 有目录 /opt/test/ 192.168.0.2 目标服务器 有目录 /opt/bak/test/ 实现的目的就是保持这两 ...
- [转载]真正的inotify+rsync实时同步 彻底告别同步慢
原文链接http://www.ttlsa.com/web/let-infotify-rsync-fast/ 背景我们公司在用inotify+rsync做实时同步,来解决分布式集群文件一致性的问题.但当 ...
- inotify+rsync实时同步
主服务器上安装inotify和rsync,备用服务器上安装rsync 主服务器上修改/etc/rsyncd.conf配置文件 三. 创建密码文件,防火墙设置,客户端和服务器端都要做如下操作 echo ...
- linux文件实时同步
参考博客:https://www.cnblogs.com/MacoLee/p/5633650.html 一.文件同步很简单 服务端:被动的接收传输过来的数据 客户端:主动提供数据给服务端 安装思路:服 ...
随机推荐
- python--批量下载豆瓣图片之升级版本
周末下雨没法出门,刷刷豆瓣看看妹子,本想拿以前脚本下载点图片,结果发现运行失败,之前版本为<python--批量下载豆瓣图片>,报错HTTP Error 403: Forbidden,网上 ...
- records.config文件配置模板
# # # Process Records Config File # # <RECORD-TYPE> <NAME> <TYPE> <VALUE (till ...
- C++复制、压缩文件夹
之前写过一篇用zlib库来压缩的,但zlib只能压缩文件,我需要压缩文件夹,要想压缩文件夹还得利用zlib库自己写代码,我是真的服了,一个开源库这么不好用. C++复制文件夹也是麻烦事,网上这篇文章: ...
- left join on/right join on/inner join on/full join on连接
现在有两张表,第一张表是用户表,第二张表是订单表.情况是这样的,在我这张用户表里用户很多,但是真正下单的人却不多,而且,每一个用户可以有多个订单.然后领导喊话了,小王,你给我查下,现在咱们的订单有多少 ...
- hadoop初学
Hadoop: 官网(hadoop.apache.org)的定义: 一:Hadoop Common: 为Hadoop其它模块提供通用的支持 二:HDFS: 是Hadoop的分布式文件系统,其特点是高度 ...
- bzoj 1598: [Usaco2008 Mar]牛跑步 [k短路 A*] [学习笔记]
1598: [Usaco2008 Mar]牛跑步 题意:k短路 ~~貌似A*的题目除了x数码就是k短路~~ \[ f(x) = g(x) + h(x) \] \(g(x)\)为到达当前状态实际代价,\ ...
- BZOJ 3514: Codechef MARCH14 GERALD07加强版 [LCT 主席树 kruskal]
3514: Codechef MARCH14 GERALD07加强版 Time Limit: 60 Sec Memory Limit: 256 MBSubmit: 1312 Solved: 501 ...
- OpenCV角点检测源代码分析(Harris和ShiTomasi角点)
OpenCV中常用的角点检测为Harris角点和ShiTomasi角点. 以OpenCV源代码文件 .\opencv\sources\samples\cpp\tutorial_code\Trackin ...
- 2n皇后问题
此题为蓝桥杯基础练习题. 问题描述 给定一个n*n的棋盘,棋盘中有一些位置不能放皇后.现在要向棋盘中放入n个黑皇后和n个白皇后,使任意的两个黑皇后都不在同一行.同一列或同一条对角线上,任意的两个白皇后 ...
- Jenkins gitlab vue,angular,react 自动化构建【原】
大致思路,(本篇主要讲vue ,当然了 angular react 也是一样配置) ,转发请注明原链接,谢谢 :) 1. 服务器上面配置jenkins (安装配置,不介绍) 2.新建item 自由风格 ...