3、架构--cp、scp、rsync、实时监控与同步

【3、架构--cp、scp、rsync、实时监控与同步】的更多相关文章

3、架构--cp、scp、rsync、实时监控与同步

笔记 1.晨考 1.VPN的搭建步骤 2.vpn中的iptables是什么作用? 网络转发 2.昨日问题 1.yum源问题 2.VPN链接正常,但是没办法通过172 3.VPN链接时,出现了DNS错误 4.掩码不对 5.openvpn开启错误 3.今日内容 1.rsync 2.备份方式 cp : 本机复制 scp : 远程复制推(本地上传到远程服务器): scp 1.txt root@ip:[路径] [root@m01 ~]# scp 1.txt root@172.16.1.41:/opt/…

linux实时监控并实时备份数据(rsync)

目录一:rsync实时监控备份流程 1.安装rsync(服务端与客服端)守护进程模式 2.修改配置文件(服务端) 3.解析配置内容 4.创建系统用户 5.创建密码文件 6.授权(必须授权为600) 7.创建备份目录(创建模块目录) 8.目录授权(模块目录) 9.关闭防火墙和selinux 10.启动rsyncd服务二:客户端(备份三种方式) 三:rsync实时同步(产生数据立刻备份) 1.安装inotify(装在客户端) 2.inotify参数介绍四:开始实时监控 1.开启客户端(复制…

rsync实时备份监控命令(详细大全）

目录一:rsync介绍 1.rsync简介 2.rsync特性 3.rsync应用场景 4.rsync的传输方式 5.Rsync传输模式二:RSYNC使用参数三:参数使用案例一:rsync介绍 1.rsync简介 rsync英文称为remote synchronizetion,从软件的名称就可以看出来,rsync具有可使本地和远程两台主机之间的数据快速复制同步镜像.远程备份的功能,这个功能类似于ssh带的scp命令,但是又优于scp命令的功能,scp每次都是全量拷贝,而rsync可以增量…

rsync实时备份备份服务搭建和使用指南

一.Rsync企业工作场景说明: 1.利用定时任务+rsync方式实现数据同步对于网站内部技术人员创建的数据,可以采取定时任务的方式 2.利用实时任务+rsync方式实现数据同步对于网站外部访问用户创建的数据,可以采取实时同步的方式 3.推送的方法 rsync -rp root@10.0.0.10:/opt/hosts /etc rsync -rp /etc/sysconfig 二.什么是Rsync软件? Rsync(Remote synchronization)是一款开源快速,功能齐全可实…

linux运维、架构之路-rsync

1 .rsync介绍 rsync是实现全量及增量的本地或远程数据镜像同步备份的工具 rsync常用命令参数命令参数参数说明 -a (--archive) 归档模式,表示以递归方式传输文件,并保持所有文件属性,等于rtopgDl -v (--verbose) 显示输出过程,传输时的进度等信息 -z (--compress) 传输时进行压缩以提高传输效率 --exclude=/etc/hosts 指定排除不需要传输的文件信息(和tar参数一样) --exclude-from=file 文件名所在…

inotify+rsync sersync+rsync实时同步服务

中小型网站搭建-数据实时的复制-inotify/sersync inotify是一种强大的,细粒度的.异步的文件系统事件监控机制(软件),linux内核从2.6.13起,加入inotify支持,通过inotify可以监控文件系统中添加.删除.修改.移动等各种事件. 1. backup部署rsync服务端 /nfsbackup目录 # mkdir -p /nfsbackup/ # mkdir -p /backup/ # useradd -s /sbin/nologin -M rsync # ch…

Spark+Kafka实时监控Oracle数据预警

目标: 监控Oracle某张记录表,有新增数据则获取表数据,并推送到微信企业. 流程: Kafka实时监控Oracle指定表,获取该表操作信息(日志),使用Spark Structured Streaming消费Kafka,获取数据后清洗后存入指定目录,Python实时监控该目录,提取文本里面数据并推送到微信.(Oracle一台服务器,Kafka及Spark在另外一台服务器) 架构: Oracle+Kafka+Spark Structured Streaming+Python centos7 o…