文件同步单向rsync 双向unison 监控inotifywait 免密登录

1.负载均衡中文件同步必不可少,我这边选择rsync来实现文件同步 rsync同步文件机制更适用于单向文件同步,可配合unison实现双向同步功能. 实现同步的两种方法一:ssh方法 rsync -avz 用户名@服务器ip /文件地址本地目录回车 input password 二:rsync同步首先安装yum install rsync 创建 /etc/rsyncd.conf uid = nobody gid = nobody use chroot = yes max connecti…

烂泥：linux文件同步之rsync学习（一）

本文由秀依林枫提供友情赞助,首发于烂泥行天下. 这几天刚好有空就打算开始学习linux下的文件同步软件rsync,在学习rsync时,我们可以分以下几个步骤进行: 1. rsync是什么 2. rsync的工作原理 3. rsync优点 4. rsync认证方式 5. 安装rsync 6. rsync命令参数详解 7. 配置rsync 8. rsync的启动与关闭 9. rsync同步实例说明:rsync服务器与客户端使用的OS均为:centos 6.5 64bit. 一.rsync是什么在…

Linux 双向 SSH 免密登录

原理双向,顾名思义,双方互通,此处的意思是多台 linux 两两免密登录.双向比单向多了些操作,单向只需把某一个linux的公钥发送给其他linux即可,而双向要实现集群中的每一台机器都保存其他所有机器的公钥. 步骤假设,你有两台机器,ip分别为A和B: 总共分为三步: 生成公钥将A机器的公钥拷贝至B机器将B机器的公钥拷贝至A机器生成公钥如下命令生成公钥,默认会在~/.ssh/下生成id_rsa和id_rsa.pub.先检查一下机器是否已有公钥,如果没有再执行: ssh-keygen…

Linux/(centos、unix等)的ssh双向免密登录原理和实现

原理: 双向,顾名思义,双方互通,此处的意思是多台 linux 两两免密登录. 双向比单向多了些操作,单向只需把某一个linux的公钥发送给其他linux即可,而双向要实现集群中的每一台机器都保存其他所有机器的公钥. 步骤:假设你有两台机器,ip分别为A和B, 配置分为五步,如下: 1.非免密登录对方: //目的是自动生成.ssh文件夹先执行cd这个命令到根目录下,然后执行如下命令登录: ssh B //在A机器执行此命令,输入yes和B机器的用户密码登录B ssh A //在B机器执行此命令…

【Linux】文件权限,ssh免密登录

1.文件/文件夹权限例子: -rw-r--r--. 1 root root 12288 Aug 21 09:50 aliases.db drwxr-xr-x. 2 root root 4096 Aug 21 16:23 alternatives 描述信息的第一位表示文件/文件夹/链接(-/d/l) 描述信息的第二位开始的9位字符代表的就是文件的权限 rw- r-- r-- rwx r-x r-x 权限类别 r:read w:write x:执行权限赋予的对象 9位权限表示分成三段,每段3位…

配置hadoop用户SSH无密码登陆的2种方式落脚点是可以ssh免密进入的主机名写入动作发出主机的 known_hosts，而被无密进入主机的authorized_keys文件免密登录

cat /proc/versionLinux version 3.10.0-327.el7.x86_64 (builder@kbuilder.dev.centos.org) (gcc version 4.8.3 20140911 (Red Hat 4.8.3-9) (GCC) ) #1 SMP Thu Nov 19 22:10:57 UTC 2015 Linux version 2.6.32-642.6.2.el6.x86_64 (mockbuild@worker1.bsys.centos.or…

scp 免密登录ssh-copy-id 如何使用非22端口 + rsync 同步远程机器的文件到本地

其中:id_rsa为私钥文件,id_rsa.pub为公钥文件 ssh-copy-id -i ~/.ssh/id_rsa.pub "-p 2122 root@IP " 我的:ssh-copy-id "-p 10173 clouder@62.136.164.130" rsync 同步远程机器的文件到本地: rsync -avrH -e 'ssh -p 10173' clouder@65.146.164.220:/home/clouder/rsync/ /hom…

【实时文件同步】rsync+inotify-tools的安装与配置

http://blog.csdn.net/yakson/article/details/52044403…

从主机A得到id_rsa.pub文件，在主机B创建用户danny加入该文件，实现主机A免密登录主机B

操作步骤: 1.主机A 生成公钥id_rsa.pub文件并导出该文件 root@mytest:~# ssh-keygen Generating public/private rsa key pair. Enter file in which to save the key (/root/.ssh/id_rsa): Enter passphrase (empty for no passphrase): Enter same passphrase again: Your identification…

centos7主机间免密登录、复制文件

下面实例为三个节点间 1.分别在三个节点设置域名映射 vi /etc/hosts 在文件末尾追加 192.168.10.121 node1 192.168.10.122 node2 192.168.10.123 node3 2.创建ssh密钥分别在三个节点都执行 ssh-keygen 回车4次. 3.复制私钥到其他节点如节点1上 ssh-copy-id -i node2(或者ip) ssh-copy-id -i 节点3(或者ip) 分别在三个节点都复制粘贴到另外两个节点,这个过程需要输入要…

centos平台scp通过密钥远程复制文件（免密登录）

一,说明:两台机器的平台和ip 1,a服务器: centos8:ip:121.122.123.47 版本 [root@yjweb ~]# cat /etc/redhat-release CentOS Linux release 8.0.1905 (Core) 2, j服务器: centos6:ip:121.122.7.134 版本: [root@os3 ~]# cat /etc/redhat-release CentOS release 6.10 (Final) 我们的目示是通过scp程序…

smb.conf免密登录文件

# This is the main Samba configuration file. You should read the# smb.conf(5) manual page in order to understand the options listed# here. Samba has a huge number of configurable options (perhaps too# many!) most of which are not shown in this exampl…

centos文件实时同步inotify+rsync

我的应用场景是重要文件备份端口:873,备份端打开即可下载地址:https://rsync.samba.org/ftp/rsync/src/ 服务端和客户端要保持版本一致网盘链接:https://pan.baidu.com/s/1wTsj0cCfXRcREnbzeIviuQ 备份端 1.安装rsync: ... 2.设置密码文件 vim /etc/rsync.pas cjh: #格式用户名:密码这里的用户名和密码跟系统没有关系的配置文件 vi /etc/rsyncd.conf #文件…

Rsync 3.1.0 发布，文件同步工具

文件同步工具Rsync 3.1.0发布.2013-09-29 上一个版本还是2011-09-23的3.0.9 过了2年多.Rsync基本是Linux上文件同步的标准了,也可以和inotify配合做实时同步.此版本有很多性能的增强(如重写的I/O层代码), 小功能改进增强以及Bug修正,建议升级. 完全改进: NEWS for rsync 3.1.0 (28 Sep 2013) Protocol: 31 (changed) Changes since 3.0.9: OUTPUT CHANGES:…

Rsync文件同步工具

前段时间因公司需求,需要把备份的文件进行同步保存,后面就想到了我们大家都最熟悉的文件同步工作Rsync,于是就捣鼓了一下午时间,然后总结了下大概过程和参数详情. 首先了解了下rsync同步的大致原理:Rsync 同步使用所谓的“Rsync 演算法”来使本地和远程两个主机之间的文件达到同步,这个算法只传送两个文件的不同部分,而不是每次都整份传送,因此传输的速度相当快.Rsync服务端会打开一个873的服务通道(port),等待客户端 Rsync 连接.连接时,Rsync 服务端会检查口令(pas…

linux 下的 rsync 文件同步

rsync是linux下的一款快速增量备份工具Remote Sync,是一款实现远程同步功能的软件,它在同步文件的同时,可以保持原来文件的权限.时间.软硬链接等附加信息.rsync是用 “rsync 算法”提供了客户机和远程文件服务器的文件同步的快速方法,而且可以通过ssh方式来传输文件,这样其保密性也非常好. 一.获取rsync源码 http://rsync.samba.org/download.html 如:rsync-3.1.2.tar.gz 二.安装rsync > tar -zx…

Linux系统实时数据同步inotify+rsync

一.inotify简介 inotify是Linux内核的一个功能,它能监控文件系统的变化,比如删除.读.写和卸载等操作.它监控到这些事件的发生后会默认往标准输出打印事件信息.要使用inotify,Linux内核版本必须是大于2.6.13,在这之前的内核都没有这个功能.我们可以利用inotify去监控我们要监控的资源,当资源发生变化时,我们扑捉它的事件,从而触发同步数据等操作. 二.inotify软件介绍 inotify是内核的一个功能,众所周知内核的功能我们必须要配合工具才能使用,通常情况下用户…

Windows Server 2012 两台服务器文件同步

下载cwRsyncServer软件安装(这是Windows下的文件同步软件) 一.(1)在文件客户端服务器安装该软件,找到安装位置下的rsyncd.conf,修改配置文件(注意在Windows下输入位置时格式是:/cygdrive/c/ztb表示C盘下的ztb目录) use chroot = false strict modes = false hosts allow =* log file = rsyncd.log pid file = rsyncd.pid port = uid = gid…

hadoop搭建----centos免密码登录、修改hosts文件

分布式系统在传输数据时需要多台电脑免密码登录如:A(192.168.227.12)想ssh免密码登录到B(192.168.227.12),需要把A的公钥文件(~/.ssh/id_rsa.pub)里内容追加到B的(~/.ssh/authorized_keys)文件中. 就是A把自己的公钥给B,就能免密登录B了. 步骤: 1.修改ssh配置文件 sudo vi /etc/ssh/sshd_config RSAAuthentication yes PubkeyAuthentication yes A…

Rsync+unison双向文件同步

1.配置RSYNC服务器的同步源: 基于SSH同步源 rsync -avz /server/rsyncd/* chen@172.16.23.204:/client/rsyncd 基于RSYNC同步源 /etc/rsyncd.conf address = 172.16.23.203 port 873 pid file = /var/run/rsyncd.pid lock file = /var/run/rsync.lock log file = /var/log/rsyncd.log read…

linux服务器之间的文件同步;rsync+inotifywait；同步多个目录

1.双向同步:unison+inotify 2.单向同步:rsync+inotify python版的pyinotify 本文介绍第二种方法: 1.Inotify 是一个 Linux特性,它监控文件系统操作,比如读取.写入和创建.Inotify 反应灵敏,用法非常简单,并且比 cron 任务的繁忙轮询高效得多.学习如何将 inotify 集成到您的应用程序中,并发现一组可用来进一步自动化系统治理的命令行工具.inotify是一种强大的,细粒度的,异步文件系统时间监控机制,它可以替代crond实现…