rsyn远程自动同步
rsync是远程自动同步工具,同时也能实现本地文件的复制,能够实现cp ,scp的功能,但是在远程同步上rsync要scp高效,因为scp能实现增量传输,每次都得全量传输,如果传输大文件时会很消耗网络带宽(虽然scp可以进行限速传输【scp -l 】), rsync可以实现增量同步传输,在第一次全量同步后,可以设定定时同步任务进行增量同步。
一般场景下,通过rsync可以结合crontab实现按时自动备份,在远程自动同步的场景下,rsync 需要以守护进程的方式来运行,本文记录实现异地自动备份的过程。
生产服务器主机A的地址:192.168.214.190 :centos7.4
备份数据主机B的地址:192.168.214.187 :centos6.9
客户端和服务端都要安装rsync,安装完后有些系统不会生成rsyncd.conf,需要自己创建在 /etc/rsync.d/rsyncd.conf
【在centos7.4上安装rsync会默认生成/etc/rsyncd.conf文件,但是在centos6.9上安装后则不会生成,并且,如果在要自己定义文件位置,以守护进程方式启动,那么任然要在/etc/下新建一个rsyncd.conf的文件,否则无法启动。】
服务端安装rsync:
[root@localhost ~]#yum install rsync -y
创建配置文件
[root@yufu ~]# mkdir -p /etc/rsync.d
[root@yufu ~]# touch /etc/rsync.d/rsyncd.conf
[root@yufu ~]# chmod /etc/rsync.d/rsync.conf
编辑配置文件内容
vim /etc/rsync.d/rsyncd.conf log file = /var/log/rsyncd.log #设置日志文件路径
pid file = /var/run/rsyncd.pid #设置pid进程位置
lock file = /var/run/rsync.lock #锁文件存放位置 [bak] #定义一个模块
path=/opt/server #要同步文件的位置
uid = root #运行rsync的用户
gid = root #运行rsync的用户组
ignore = errors #忽略一些非关键的错误
read only = no #no表示允许可读可写,yes表示客户端只能读,
write only = no #no表示允许客户端可以下载文件,设置yes则不能下载
host allow = * #允许连接的主机, ‘*’ 表示允许任何主机连接,或者定义一个网段
max connections = #设置允许连接到主机的最大连接数
host deny = 192.168.22.21 #禁止连接的服务器
list = false #禁止显示列表模块
auth users = feng #连接该模块的用户,多个用户用空格或逗号分开
secrets file = /etc/rsync.d/server.pass #创建并指定一个包含“用户名:密码”格式的文件,用户名就是auth users定义的用户,
该用户与linux系统用户无关,文件名称,位置自定义设置,
添加备份用户的用户密码文件,并修改文件权限
echo 'filebak:filebak' > /etc/rsync.d/server.pass
chmod server.pass
服务端的rsync安装配置好后就可启动了,rsync是以守护进程的方式启动:
[root@localhost ~]#rsync --daemon --config=/etc/rsync.d/rsyncd.conf [root@localhost ~]#ps -ef | grep rsync
root : ? :: rsync --daemon --config=/etc/rsync.d/rsyncd.conf
root : pts/ :: grep --color=auto rsync
到此服务端的的设置完成,接着安装客户端,在备份主机上不用做任何设置,只要安装rsync服务和设置crontab任务计划就可以, 为了在同步的过程中不用输入密码,因此需要在备份主机上创建一个secrets 文件,该文件内容是服务端的rsyncd.conf中“auth users”指定的用户的密码;这个文件名和路径随意指定,只要在执行同步指令时指定即可。
安装rsync
yum install rsync -y
向客户端添加同步用户的密码
[root@yufu ~]# echo 'fsz...' > /etc/rsync.d/feng.pass [root@yufu ~]# chmod /etc/rsync.d/feng.pass
在客户端执行同步
[root@yufu ~]# rsync -arzvtopg --delete feng@192.168.214.190::bak /opt/app/ --password-file=/etc/rsync.d/feng.pass
rsync: failed to connect to 192.168.214.190: No route to host ()
rsync error: error in socket IO (code ) at clientserver.c() [receiver=3.0.]
执行报错:原因是服务端的防火墙没有放行策略,关闭防火墙;
[root@localhost ~]#systemctl stop firewalld
再执行:
[root@yufu ~]# rsync -arzvtopg --delete feng@192.168.214.190::bak /opt/app/ --password-file=/etc/rsync.d/feng.pass
receiving incremental file list
./
install-lnmp.sh sent bytes received bytes 990.00 bytes/sec
total size is speedup is 2.37
[root@yufu ~]# cd /opt/app/ && tree
.
└── install-lnmp.sh directories, file
[root@yufu app]# ls
install-lnmp.sh
客户端设置定时备份:添加crontab任务计划,每天定时同步文件
[root@yufu ~]# crontab -l
*/ * * * * /usr/bin/rsync -arzvtopg --delete feng@192.168.214.190::bak /opt/app/ --password-file=/etc/rsync.d/feng.pass
设置定时同步,作为测试,设置每分钟同步一次
服务端测试文件更新脚本
#!/bin/bash
dir=/opt/server
cd $dir
for i in $(seq )
do
touch file$i
sleep
done
测试脚本执行结束后再查看服务端和客户端的目录情况
[root@yufu app]# ls #客户端
file1 file10 file2 file3 file4 file5 file6 file7 file8 file9 install-lnmp.sh tess [root@localhost server]#ls #服务端
file1 file10 file2 file3 file4 file5 file6 file7 file8 file9 install-lnmp.sh tess
rsyn远程自动同步的更多相关文章
- 使用Clion优雅的完全远程自动同步和远程调试c++
摘要:在linux上用vim写C++的时候,通常用gdb进行调试,不能随心所欲的看代码和跳转代码以及加watch(也有可能是因为我还没有get正确的使用方法).为此我发现Clion可以做到自动同步本场 ...
- LINUX安装SVN+添加自动同步+远程下载最新代码
LINUX安装SVN+添加自动同步+远程下载最新代码---------------------1. 新建一个用户:svnroot ,以下操作非特别说明皆为root用户操作--------------- ...
- Pycharm专业版配置远程服务器并自动同步代码
一.使用场景 如果每次都在本机上面写代码,然后传到服务器上面,在服务器上面运行就太麻烦了.这样的方式十分繁琐,效率很低. 因此,希望可以像下面一样操作: 可以直接在本机上码代码 自动将代码同步到远程服 ...
- Windows远程数据同步工具cwRsync
1. cwRsync简介cwRsync是Rsync在Windows上的实现版本,Rsync通过使用特定算法的文件传输技术,可以在网络上传输只修改了的文件.cwRsync主要用于Windows上的远程文 ...
- Linux下svn提交文件后自动同步更新到网站目录
有时,对于多文件需要上传到服务器的时候将会很麻烦,但是如果使用svn的钩子脚本就容易实现本地提交svn后,自动同步代码文件到远程服务器的网站目录下,而不必手动上传了. 首先,在网站目录下checkou ...
- unison+inotify实现文件双向自动同步
nfs适合存小图片和小文件,有一个致命的缺点,就是其中一台web服务挂掉之后,会直接导致web页面无法访问,动态的那种数据, 而且数据量很大的数据不适合nfs Unison是一款跨平台(window, ...
- 利用svn自动同步更新到网站服务器 -- 网摘
首先在服务器上安装VisualSVN Server ,根据提示选好安装的路径,一路确定.安装好后运行VisualSVN Server ,在Repositories上点击右键,选择create New ...
- 开源API集成测试工具 Hitchhiker v0.3更新 - 自动同步
Hitchhiker 是一款开源的 Restful Api 集成测试工具,支持Schedule, 数据对比,压力测试,可以轻松部署到本地,和你的team成员一起管理Api. 详细介绍请看: http: ...
- [sersync+rsync] centos6.5 远程文件同步部署记录
针对本地文件的修改,自动同步到远程文件夹,远程备份很方面.研究了下大家的主流同步方案一般是 rsync+inotify和rsync+sersync, 我这里使用sersync的方案,当然大部分都是参照 ...
随机推荐
- python_sting字符串的方法及注释
string类型是python内置的类型,无需安装 方法/属性 说明 capitalize() 把字符串的第一个字符改为大写 casefold() 把整个字符串的所有字符改为小写 ...
- POJ 1556 E - The Doors
题意:给定n堵墙,现在要你从(0,5)走去(10,5)的最短距离 思路:刚开始还想模拟,就是从(0,5)走,每次x向右一格,然后判断有没和线段相交就可以.但是它的们有可能是小数形式给出的,这样就GG了 ...
- Python 装饰器的形成过程
装饰器 定义:本质是函数,(装饰其他函数),即为其他函数添加附加功能. 原则: 1.不能修改被装饰的函数的源代码: 2.不能修改被装饰的函数的调用方式. 实现装饰器知识储备: ...
- JavaScript 浮点数处理
众所周知,JavaScript 浮点数运算时经常遇到会 0.000000001 和 0.999999999 这样奇怪的结果,如 0.1+0.2=0.30000000000000004.1-0.9=0. ...
- 机器学习框架ML.NET学习笔记【4】多元分类之手写数字识别
一.问题与解决方案 通过多元分类算法进行手写数字识别,手写数字的图片分辨率为8*8的灰度图片.已经预先进行过处理,读取了各像素点的灰度值,并进行了标记. 其中第0列是序号(不参与运算).1-64列是像 ...
- 性能测试学习第十一天_Analysis
Analysis的功能:对测试运行结果进行查看,分析和比较 导入分析文件:loadrunner results文件和analysis session文件 Analysis窗口: 1.会话浏览器窗格 2 ...
- 【踩坑】socket.io服务器不能访问
今天在单机测试socket.io服务器时一切正常,但用jar包的方式部署在服务器时发现客户端无法连接. 于是做了一系列排查,如检查端口是否在占用,防火墙有没有开放该端口,阿里云终端是否有开放安全组,本 ...
- hibernate课程 初探单表映射1-7 hibernate配置文件新建
hibernate 配置文件新建 1 右键src==>new==>other==>hibernate configuration File==>next==>next= ...
- rem 适配屏幕大小
window.onresize=function(){ var html=document.getElementsByTagName("html")[0]; var width=w ...
- 关于echarts和jqeury的结合使用问题
今天在工作上遇到了一个小问题,就是自己在用echarts渲染了一个柱状图,然后点击其他位置,将渲染echart的div进行了清空,这里我所有的echart图形都是在同一个div中渲染的,然后当再次要求 ...