openstack私有云布署实践【9.3 主从controller单向同步glance-image目录】

采用Rysnc单向同步，而不用双方实时同步，原因是在历史的运行过程中，我们发现，有些镜像包太大，当在主用的glance将镜像保存时，并不是一时半会就把镜像保存好，当主用在保存时，备用节点又在实时同步那个正常拷贝保存状态中的不完整主用文件，因此我们会看到在备节点上，它删了又拷的方式，非常损耗机器的硬盘。

 

所以我们采用Rysnc单向同步， 做这一步时，我已布署好了之前的集群。下面的示例是以办公网测试环境为例，科兴的雷同，只是IP和主机名不同而已

 

使用root用户运行源服务器controller2的进程，controller1间接使用root用户同步controller2的/home/local/glance/images  ，将文件拉取过来，并保持文件的属性

 

 

2台controller安装软件，基本这个软件是CentOS发行版提前内置安装好的

yum install -y rsync*

 

 

在服务端源controller2上，

在源服务器controller2定义配置文件规则

 

vi /etc/rsyncd.conf

uid = root

gid = root

use chroot = no

read only = yes

hosts allow=10.40.42.0/255.255.255.0

hosts deny=*

max connections = 50

 

 

log file = /var/log/rsync.log

pid file = /var/run/rsyncd.pid

 

[glance]

path = /home/local/glance/images

list=yes

ignore errors

auth users = root

comment = This is openstack-controller2-glance-image-file-rysnc source data

secrets file = /etc/rsyncd.secrets

 

 

 

保存退出，

创建一个用于客户端登录认证的密码文件，服务启动，开机自启

touch /etc/rsyncd.secrets

chmod 600 /etc/rsyncd.secrets

vi /etc/rsyncd.secrets

root:myrsynpass

保存退出

 

服务启动，开机自启

service rsyncd start

chkconfig rsyncd on

 

检查一下没有错误LOG产生。默认正常如下

 

 

在客户端controller1上，

 

 

上面已提到客户端装有rsync的程序，那我们可以不用启动客户端的服务，直接可以使用它的命令

先创建一个rsync的密码文件

touch /etc/rsyncd.secrets

chmod 600 /etc/rsyncd.secrets

vi /etc/rsyncd.secrets

myrsynpass

保存退出

 

先使用命令跑一遍，看看效果。

 

/usr/bin/rsync -rtopglH --progress --delete --bwlimit 90000   root@controller2::glance /home/local/glance/images/ --password-file=/etc/rsyncd.secrets

 

命令说明

-rtopglH

-r, --recursive 对子目录以递归模式处理

-t, --times 保持文件时间信息

-o, --owner 保持文件属主信息

-p, --perms 保持文件权限

-g, --group 保持文件属组信息

-l, --links 保留软链结

-H, --hard-links 保留硬链结

 

--progress  显示同步过程

--bwlimit 90000 KBPS  代表80MBtye/S ，拆算带宽就是800Mbps 。由于我们的管理口是1000M的网口，可选预留200M带宽给其它应用通信

root@controller2::glance   源的rsynce中的glance子项目--跟上面的配置文件对应

/home/local/glance/images/   目标存放目录

 

--password-file 密码文件，不加的话，就是要自己手输密码myrsynpass

 

 

 

确认命令执行效果无问题的话，

接下来就是在在controller1备份客户机上 写shell脚本，定时执行增量备份

mkdir /usr/script

touch  /usr/script/rsyncd.sh

chmod +x /usr/script/rsyncd.sh

 

vi /usr/script/rsyncd.sh

 

rsyncProcess=`ps aux|grep "/usr/bin/rsync" |grep -v grep`

 

if [ ${#rsyncProcess} -ne 0 ]

 

then

        echo $(date +%Y-%m-%d_%H:%M:%S) >> /var/log/rsync.log

        echo "`date` Process is already running! DO NOTHING!!"  >> /var/log/rsync.log

 

else

        /usr/bin/rsync -rtopglH --progress --delete --bwlimit 90000   root@controller2::glance /home/local/glance/images/ --password-file=/etc/rsyncd.secrets 1>>/var/log/rsync.log 2>&1

        echo $(date +%Y-%m-%d_%H:%M:%S) >> /var/log/rsync.log

        echo "Process is not running! RUN rsync glance-file Successfully" >> /var/log/rsync.log

fi

 

 

保存退出

先走了遍脚本有没有问题

/bin/sh /usr/script/rsyncd.sh

 

观察一下/var/log/rsync.log是否正常输出，

 

正常写入定时任务，每天凌晨1点同步一次

crontab -e

* 1 * * * /bin/sh /usr/script/rsyncd.sh  >/dev/null 2>&1