linux rsync实时同步
rsync同步
同步与复制的差异:
复制:完全拷贝源到目标
同步:增量拷贝,只传输变化过的数据
同步操作:
remote sync 远程同步
支持本地复制,或与其他ssh,rsync主机同步。
官方网站:http://rsync.samba.org/
命令用法
rsync [选项] 源目录 目标目录
常用选项:
-a:归档模式,相当于-rlptgiD
-v:显示同步过程详细信息
-z:传输过程中启用压缩
-r:递归,包括目录/子目录及所有文件
-l:保留符号链接文件
-p,-t:保留文件的权限,时间标记
-o,-g:保留文件的属主/属组标记
-D:保留设备文件及其他特殊文件
-H:保留硬链接文件
-A:保留文件的ACL属性信息
-n:测试同步过程,不做实际修改
--delete:删除目标文件夹内多余的文档(确保源和目标完全一致)
本地同步
rsync [选项] 本地目录1 本地目录2
rsync [选项] 本地目录1/ 本地目录2
[root@svr ~]# rsunc -a /boot /xxx(同步整个文件夹)
[root@svr ~]# rsunc -a /boot/ /xxx/(只同步目录下数据)
服务端要求:服务端应开启sshd服务,并提供授权的用户,密码,此目录对远程目录必须有相应的权限
rsync+ssh远程同步
下行同步:rsync [选项] root@x远程目录/ 本地目录
上行同步:rsync [选项] 本地目录/ root@x远程目录
下行同步实例:
[root@svr ~]# rsync root@192.168.4.1:/boot/(浏览远程目录)
[root@svr ~]# rsync -av root@192.168.4.1:/boot/ /xxx/(将远程主机/boot/目录备份到本地)
[root@svr ~]# ls /xxx/(查看结果)
上行同步实例:
[root@svr etc]# rsync -av /etc root@192.168.4.1:/opt/(将本地的/etc/目录备份到远程主机)
[root@gw1 opt]# ls(远程机查看结果)
rh
————————————————————————————————————————————
rsync+rsync远程同步
同步资源配置文件/etc/rsyncd.conf
[root@svr ~]# chkconfig rsync on(开启)
[root@svr ~]# service xinetd restart(重启服务)
创建rsyncd.conf共享配置(若是匿名共享。可去掉auth users设置)
[root@svr ~]# vim /etc/rsyncd.conf
[hydra] (共享文件名)
path = /usr/src(共享文件目录)
comment = Rsunc Share Test
read only = yes
dont compress = *.gz *.bz2 *.tgz *.zip
auth users = ruser (许可的用户)
secrets file = /etc/rsyncd_users.db(用户账户密码的存放路径)
[root@svr ~]# vim /etc/rsyncd_users.db(创建用户,密码存放文件)
ruser:123456(用户:密码)
root:Taren1
hydra:Anonymous
[root@svr ~]# chmod 600 /etc/rsyncd_users.db(更改存放用户,密码文件权限)
查看共享资源:rsync root@x::
下行同步:rsync [选项] root@x共享名/ 本地目录
上行同步:rsync [选项] 本地目录/ root@x共享名
下行同步实例:
[root@gw1 ~]# rsync -av root@192.168.4.2::hydra/ /myhydra
[root@gw1 ~]# ls /myhydra/(查看文件)
debug kernels
上行同步实例:
[root@gw1 ~]# rsync -av /opt root@192.168.4.2::hydra
[root@svr ~]# ls /usr/src/(查看文件)
debug kernels
——————————————————————————————————————————
关于同步的实时性
依赖于两个组件:
监控源文档的变化(inotify)
调用同步操作的命令行(rsync)语句
关于inotify机制:
linux内核2.6.13以上版本默认支持
需要额外安装控制工具,比如inotify-tools
inotify实时同步(inotifywait监控目录程序)
inotify-tools-3.13.tar.gz
源码包编译安装:
解包:[root@svr ~]# tar xf /root/inotify-tools-3.13.tar.gz -C /usr/src/
配置:[root@svr ~]# cd /usr/src/
[root@svr inotify-tools-3.13]# ./configure
编译:[root@svr inotify-tools-3.13]# make
安装:[root@svr inotify-tools-3.13]# make install
[root@svr ~]# inotifywait
No files specified to watch!
inotifywait监控
基本用法
inotifywait [选项] 目标文件夹
常用命令选项
-m,--monitor:启用监控
-r,--recursive:递归,涵盖所有子目录
-q,--quiet:减少输出信息
-e,--event:限定要监控的事件类型
实例:
监控/opt文件夹
事件类型:modify,move,create,delete,attrib
[root@svr ~]# inotifywait -mrq -e modify,move,create,delete,attrib /opt
[root@svr ~]# [root@svr ~]# vim /root/irsync.sh(写个脚本,放后台执行)
#!/bin/bash
DIR1="/opt"(DIR1是个变量,后期好更改)
RCMD="rsync -az --delete $DIR1 /opt2/"(RCMD变量)
inotifywait -mrq -e create,delete,move,attrib,modify $DIR1 | while read x y z
do
$RCMD(这个变量相当于执行rsync -az --delete /opt /opt2/)
done &
实例:
网站实时镜像
实现主机svr —》主机pc的网站实时镜像
双方的目录均为/var/www/html/
以svr为同步发起方,配置inotfy+rsync同步
以pc为同步目标,基于ssh验证(如果不想输密码,可以给对方公钥)
rsync -az --delete /var/www/html/ root@174.16.16.120:/var/www/html/
[root@svr ~]# vim /root/irsync.sh (要实时同步就修改脚本文件)
#!/bin/bash
DIR1="/var/www/html/"
RCMD="rsync -az --delete $DIR1 root@174.16.16.120:$DIR1
"
inotifywait -mrq -e create,delete,move,attrib,modify $DIR1 | while read x y z
do
$RCMD
done &
————————————————————————————————————————————
linux rsync实时同步的更多相关文章
- linux下实现多台服务器同步文件(inotify-tools+rsync实时同步文件安装和配置)
inotify-tools+rsync实时同步文件安装和配置 注:转载https://www.linuxidc.com/Linux/2012-06/63624.htm
- 真正的inotify+rsync实时同步 彻底告别同步慢
真正的inotify+rsync实时同步 彻底告别同步慢 http://www.ttlsa.com/web/let-infotify-rsync-fast/ 背景 我们公司在用in ...
- 【转载】inotify+rsync实时同步 解决同步慢问题 (转载备记)
原文地址:http://www.ttlsa.com/web/let-infotify-rsync-fast/ 背景 我们公司在用inotify+rsync做实时同步,来解决分布式集群文件一致性的问题. ...
- lsyncd + rsync 实时同步搭建
一.inotify和lsync inotify和lsyncd对比一下,发现虽然lsyncd没有inotify那么真正的实时同步,但是lsyncd的同步基本上可以满足基本实时同步的要求,而且lsyncd ...
- inotify-tools+rsync实时同步文件安装和配置
服务器A:论坛的主服务器,运行DZ X2论坛程序;服务器B:论坛从服务器,需要把X2的图片附件和MySQL数据实时从A主服务器实时同步到B服务器.MySQL同步设置会在下一编中说到.以下是用于实时同步 ...
- rsync实时同步
假设有如下需求: 假设两个服务器: 192.168.0.1 源服务器 有目录 /opt/test/ 192.168.0.2 目标服务器 有目录 /opt/bak/test/ 实现的目的就是保持这两 ...
- [转载]真正的inotify+rsync实时同步 彻底告别同步慢
原文链接http://www.ttlsa.com/web/let-infotify-rsync-fast/ 背景我们公司在用inotify+rsync做实时同步,来解决分布式集群文件一致性的问题.但当 ...
- inotify+rsync实时同步
主服务器上安装inotify和rsync,备用服务器上安装rsync 主服务器上修改/etc/rsyncd.conf配置文件 三. 创建密码文件,防火墙设置,客户端和服务器端都要做如下操作 echo ...
- linux文件实时同步
参考博客:https://www.cnblogs.com/MacoLee/p/5633650.html 一.文件同步很简单 服务端:被动的接收传输过来的数据 客户端:主动提供数据给服务端 安装思路:服 ...
随机推荐
- 【转】国际GNSS服务组织IGS
国际GNSS服务组织The International GNSS Service,简称IGS,前身为国际GPS服务组织.IGS提供的高质量数据和产品被用于地球科学研究等多个领域. IGS组织由卫星跟踪 ...
- Java NIO 之 Socket Channel
在Java NIO中用Channel来对程序与进行I/O操作主体的连接关系进行抽象,这些IO主体包括如文件.Socket或其他设备.简而言之,指代了一种与IO操作对象间的连接关系. 按照Channel ...
- java 数组与集合(list)相互转化
上代码 package com.core.array2collection; import java.util.ArrayList; import java.util.Arrays; import j ...
- C语言预处理 编译 汇编 链接四个阶段
c程序(源代码)转换成可以在硬件上运行的程序(可执行代码),需要进行编译和链接. 编译过程 编译过程又可以分成两个阶段:编译和会汇编. 编译 编译是读取源程序(字符流),对之进行词法和语法的分析,将高 ...
- Titanic数据分析
一.材料准备 https://www.kaggle.com/c/titanic-gettingStarted/ 二.提出问题 生存率和哪些因素有关(性别,年龄,是否有伴侣,票价,舱位等级,包间,出发地 ...
- left join on/right join on/inner join on/full join on连接
现在有两张表,第一张表是用户表,第二张表是订单表.情况是这样的,在我这张用户表里用户很多,但是真正下单的人却不多,而且,每一个用户可以有多个订单.然后领导喊话了,小王,你给我查下,现在咱们的订单有多少 ...
- ABP官方文档翻译 3.5 规约
规约 介绍 示例 创建规范类 使用仓储规约 组合规约 讨论 什么时候使用? 什么时候不使用? 介绍 规约模式是一种特别的软件设计模式,通过使用布尔逻辑将业务规则链接起来重新调配业务规则.(维基百科). ...
- BZOJ 2743: [HEOI2012]采花 [树状数组 | 主席树]
题意: 查询区间中出现次数$>2$的颜色个数 一眼主席树,区间中$l \le last[i] \le r$的个数减去$l \le last[last[i]] \le r$的个数,搞两颗主席树来做 ...
- Azure Automation (5) 调整Azure SQL Database DTU
<Windows Azure Platform 系列文章目录> 之前有客户提了需求,在9点以后,把Azure SQL Database DTU提高 在凌晨,把Azure SQL Datab ...
- python中的randint,引入模块
引入模块的方法: from 模块名 import 方法名 范例: from random import randint#使用randint需要加上这句 while True: answer=randi ...