概述

横向扩展实验之二 – 在不同的机器上扩展puppet master 的个数.

实验环境

master 和 node 都是 debian 7.7 i686 系统

2个 puppet master 在机器A上, 另1个在机器B上, 都是 apache 虚拟主机

实验步骤

机器B 的环境

安装puppetmaster 以及 apache passenger

apt-get install apache2

apt-get install puppetmaster-passenger

配置 1 个apache虚拟主机作为 puppetmaster

类似机器A, 但是不做负载均衡相关过的配置, 并且只配置一个 worker

# 删除默认的 puppetmaster 虚拟主机服务

root@master-2:~# rm /etc/apache2/sites-enabled/puppetmaster

rm: remove symbolic link `/etc/apache2/sites-enabled/puppetmaster'? y

# 配置一个 apache 虚拟机作为 puppetmaster 的前端

root@master-2:~# cat /etc/apache2/sites-available/puppetmaster_worker.conf

Listen 8140

<VirtualHost *:8140>

  SSLEngine off

  # Obtain Authentication Information from Client Request Headers

  SetEnvIf X-Client-Verify "(.*)" SSL_CLIENT_VERIFY=$1

  SetEnvIf X-SSL-Client-DN "(.*)" SSL_CLIENT_S_DN=$1

  PassengerEnabled On

  DocumentRoot /usr/share/puppet/rack/puppetmasterd/public

  <Directory /usr/share/puppet/rack/puppetmasterd>

    Options None

    AllowOverride None

    Order allow,deny

    allow from all

  </Directory>

  # log settings

  ErrorLog /var/log/apache2/puppetmaster_worker_error.log

  CustomLog /var/log/apache2/puppetmaster_worker_access.log combined

</VirtualHost>

# 设置好apache虚拟主机, 重启apache2服务

root@master-2:~# cd /etc/apache2/sites-enabled/

root@master-2:/etc/apache2/sites-enabled# ll

total 0

lrwxrwxrwx 1 root root 26 Dec 14 21:48 000-default -> ../sites-available/default

root@master-2:/etc/apache2/sites-enabled# ln -s ../sites-available/puppetmaster_worker.conf puppet_worker

root@master-2:/etc/apache2/sites-enabled# ll

total 0

lrwxrwxrwx 1 root root 26 Dec 14 21:48 000-default -> ../sites-available/default

lrwxrwxrwx 1 root root 43 Jan  7 19:59 puppet_worker -> ../sites-available/puppetmaster_worker.conf

root@master-2:/etc/apache2/sites-enabled# service  apache2 restart

[ ok ] Restarting web server: apache2 ... waiting .

机器A 的环境

就用 puppet横向扩展(一) 中所使用的环境就行

上面的机器B 配置好之后, 把机器B 的apache虚拟机也加到机器A 的负载均衡配置中.

root@master-1:~# cat /etc/apache2/sites-available/puppetmaster_proxy.conf

# Available back-end worker virtual hosts

# NOTE the use of cleartext unencrypted HTTP.

<Proxy balancer://puppetmaster>

  BalancerMember http://127.0.0.1:18140

  BalancerMember http://127.0.0.1:18141

  BalancerMember http://192.168.1.101:8140

</Proxy>

Listen 8140

<VirtualHost *:8140>

  SSLEngine on

  # SSLCipherSuite SSLv2:-LOW:-EXPORT:RC4+RSA

  SSLProtocol ALL +SSLv3 +TLSv1

  SSLCipherSuite ALL:!ADH:RC4+RSA:+HIGH:+MEDIUM:-LOW:-SSLv2:-EXP

  #SSLProtocol ALL -SSLv2

  #SSLCipherSuite HIGH:!ADH:RC4+RSA:-MEDIUM:-LOW:-EXP

  # Puppet master should generate initial CA certificate.

  # ensure certs are located in /var/lib/puppet/ssl

  SSLCertificateFile /var/lib/puppet/ssl/certs/master-1.puppet.com.pem

  SSLCertificateKeyFile /var/lib/puppet/ssl/private_keys/master-1.puppet.com.pem

  SSLCertificateChainFile /var/lib/puppet/ssl/ca/ca_crt.pem

  SSLCACertificateFile /var/lib/puppet/ssl/ca/ca_crt.pem

  SSLCARevocationFile /var/lib/puppet/ssl/ca/ca_crl.pem

  # optional to all CSR request, required if certificates distributed to client during provisioning.

  SSLVerifyClient optional

  SSLVerifyDepth 1

  SSLOptions +StdEnvVars

  # The following client headers record authentication information for downstream workers.

  RequestHeader set X-SSL-Subject %{SSL_CLIENT_S_DN}e

  RequestHeader set X-Client-DN %{SSL_CLIENT_S_DN}e

  RequestHeader set X-Client-Verify %{SSL_CLIENT_VERIFY}e

  <Location />

    SetHandler balancer-manager

    Order allow,deny

    Allow from all

  </Location>

  ProxyPass / balancer://puppetmaster/

  ProxyPassReverse / balancer://puppetmaster/

  ProxyPreserveHost On

  # log settings

  ErrorLog /var/log/apache2/balancer_error.log

  CustomLog /var/log/apache2/balancer_access.log combined

  CustomLog /var/log/apache2/balancer_ssl_requests.log "%t %h %{SSL_PROTOCOL}x %{SSL_CIPHER}x \"%r\" %b"

</VirtualHost>

root@master-1:~# service apache2 restart

[ ok ] Restarting web server: apache2 ... waiting .

主要就是加入 [BalancerMember http://192.168.1.101:8140] 的配置.

测试配置结果

默认的负载均衡

# master-1 上执行, 清理log, 重启 apache2 服务

root@master-1:~# rm  /var/log/apache2/* -rf

root@master-1:~# service apache2 restart

[ ok ] Restarting web server: apache2 ... waiting .

root@master-1:~# ll /var/log/apache2/

total 4

-rw-r--r-- 1 root root   0 Jan  7 20:14 access.log

-rw-r--r-- 1 root root   0 Jan  7 20:14 balancer_access.log

-rw-r--r-- 1 root root   0 Jan  7 20:14 balancer_error.log

-rw-r--r-- 1 root root   0 Jan  7 20:14 balancer_ssl_requests.log

-rw-r--r-- 1 root root 155 Jan  7 20:14 error.log

-rw-r--r-- 1 root root   0 Jan  7 20:14 other_vhosts_access.log

-rw-r--r-- 1 root root   0 Jan  7 20:14 puppetmaster_worker_access_1.log

-rw-r--r-- 1 root root   0 Jan  7 20:14 puppetmaster_worker_access_2.log

-rw-r--r-- 1 root root   0 Jan  7 20:14 puppetmaster_worker_error_1.log

-rw-r--r-- 1 root root   0 Jan  7 20:14 puppetmaster_worker_error_2.log

# master-2 上执行, 清理log, 重启 apache2 服务

root@master-2:/etc/apache2/sites-enabled# rm /var/log/apache2/* -rf

root@master-2:/etc/apache2/sites-enabled# service apache2 restart

[ ok ] Restarting web server: apache2 ... waiting .

root@master-2:/etc/apache2/sites-enabled# ll /var/log/apache2/

total 4

-rw-r--r-- 1 root root   0 Jan  7 20:15 access.log

-rw-r--r-- 1 root root 155 Jan  7 20:15 error.log

-rw-r--r-- 1 root root   0 Jan  7 20:15 other_vhosts_access.log

-rw-r--r-- 1 root root   0 Jan  7 20:15 puppetmaster_worker_access.log

-rw-r--r-- 1 root root   0 Jan  7 20:15 puppetmaster_worker_error.log

# node-1 上执行

root@node-1:~# puppet agent -t

Info: Retrieving pluginfacts

Info: Retrieving plugin

Info: Caching catalog for node-1.puppet.com

Info: Applying configuration version '1420633009'

Notice: Finished catalog run in 0.02 seconds

# master-1 上查看 log 结果

root@master-1:~# ll /var/log/apache2/

total 20

-rw-r--r-- 1 root root   0 Jan  7 20:14 access.log

-rw-r--r-- 1 root root 821 Jan  7 20:16 balancer_access.log

-rw-r--r-- 1 root root   0 Jan  7 20:14 balancer_error.log

-rw-r--r-- 1 root root 903 Jan  7 20:16 balancer_ssl_requests.log

-rw-r--r-- 1 root root 155 Jan  7 20:14 error.log

-rw-r--r-- 1 root root   0 Jan  7 20:14 other_vhosts_access.log

-rw-r--r-- 1 root root 300 Jan  7 20:16 puppetmaster_worker_access_1.log

-rw-r--r-- 1 root root 309 Jan  7 20:16 puppetmaster_worker_access_2.log

-rw-r--r-- 1 root root   0 Jan  7 20:14 puppetmaster_worker_error_1.log

-rw-r--r-- 1 root root   0 Jan  7 20:14 puppetmaster_worker_error_2.log

root@master-1:~# cat /var/log/apache2/balancer_access.log

192.168.1.120 - - [07/Jan/2015:20:16:40 +0800] "GET /production/node/node-1.puppet.com?transaction_uuid=2d53569c-b6bf-4396-87b4-c0c341379d3c&fail_on_404=true HTTP/1.1" 200 10466 "-" "Ruby"

192.168.1.120 - - [07/Jan/2015:20:16:41 +0800] "GET /production/file_metadatas/pluginfacts?links=manage&recurse=true&ignore=.svn&ignore=CVS&ignore=.git&checksum_type=md5 HTTP/1.1" 200 569 "-" "Ruby"

192.168.1.120 - - [07/Jan/2015:20:16:42 +0800] "GET /production/file_metadatas/plugins?links=manage&recurse=true&ignore=.svn&ignore=CVS&ignore=.git&checksum_type=md5 HTTP/1.1" 200 569 "-" "Ruby"

192.168.1.120 - - [07/Jan/2015:20:16:49 +0800] "POST /production/catalog/node-1.puppet.com HTTP/1.1" 200 869 "-" "Ruby"

192.168.1.120 - - [07/Jan/2015:20:16:49 +0800] "PUT /production/report/node-1.puppet.com HTTP/1.1" 200 298 "-" "Ruby"

root@master-1:~# cat /var/log/apache2/puppetmaster_worker_access_1.log

127.0.0.1 - - [07/Jan/2015:20:16:40 +0800] "GET /production/node/node-1.puppet.com?transaction_uuid=2d53569c-b6bf-4396-87b4-c0c341379d3c&fail_on_404=true HTTP/1.1" 200 5122 "-" "Ruby"

127.0.0.1 - - [07/Jan/2015:20:16:49 +0800] "POST /production/catalog/node-1.puppet.com HTTP/1.1" 200 867 "-" "Ruby"

root@master-1:~# cat /var/log/apache2/puppetmaster_worker_access_2.log

127.0.0.1 - - [07/Jan/2015:20:16:41 +0800] "GET /production/file_metadatas/pluginfacts?links=manage&recurse=true&ignore=.svn&ignore=CVS&ignore=.git&checksum_type=md5 HTTP/1.1" 200 567 "-" "Ruby"

127.0.0.1 - - [07/Jan/2015:20:16:49 +0800] "PUT /production/report/node-1.puppet.com HTTP/1.1" 200 296 "-" "Ruby"

# master-2 上查看 log 结果

root@master-2:/etc/apache2/sites-enabled# ll /var/log/apache2/

total 8

-rw-r--r-- 1 root root   0 Jan  7 20:15 access.log

-rw-r--r-- 1 root root 155 Jan  7 20:15 error.log

-rw-r--r-- 1 root root   0 Jan  7 20:15 other_vhosts_access.log

-rw-r--r-- 1 root root 195 Jan  7 20:16 puppetmaster_worker_access.log

-rw-r--r-- 1 root root   0 Jan  7 20:15 puppetmaster_worker_error.log

root@master-2:/etc/apache2/sites-enabled# cat /var/log/apache2/puppetmaster_worker_access.log

192.168.1.100 - - [07/Jan/2015:20:16:42 +0800] "GET /production/file_metadatas/plugins?links=manage&recurse=true&ignore=.svn&ignore=CVS&ignore=.git&checksum_type=md5 HTTP/1.1" 200 567 "-" "Ruby"

从上面的log中可以看出, master-1 上的worker_1 和 worker_2 分别处理了 2 个请求,

master-2 上的 worker 处理了 1 个请求.

其他情况

可以仿照 puppet 横向扩展(一) 中设置其中一个 worker 挂了之后的负载均衡的反应.

比如删除 master-1 或者 master-2 中的apache虚拟主机配置, 然后看负载均衡的效果.

我做了尝试, 就不在这里一一列举了. 有问题欢迎一起交流.

puppet 横向扩展(二)的更多相关文章

puppet 横向扩展(三)
Table of Contents 1. 概述 2. 实验环境 3. 实验步骤 3.1. 机器B 的配置 3.2. 机器A 的配置 3.3. 测试配置结果概述横向扩展实验之三 – 将CA 认证服务 ...
puppet 横向扩展(一)
目录 1. 概述 2. 实验环境 3. 实验步骤 3.1. 创建puppetmaster的rack环境 3.2. 配置文件设置 3.3. 补充说明 3.4. 测试配置结果 3.4.1. 默认的负载均衡 ...
presto的动态化应用(一):presto节点的横向扩展与伸缩
一.presto动态化概述近年来,基于hadoop的sql框架层出不穷,presto也是其中的一员.从2012年发展至今,依然保持年轻的活力(版本迭代依然很快),presto的相关介绍,我们就不赘述 ...
.net core 3.0 Signalr - 04 使用Redis做底板来支持横向扩展
在实际的系统中,可能需要多台机器部署;然而,Signalr的连接信息是跟站点走的,举个例子推送系统部署了A.B两个服务器,张三访问A服务器,李四访问B服务器,当张三通过A服务器向李四推送的时候,A服 ...
Ceph如何实现文件系统的横向扩展
前言在跟一个朋友聊天的时候,聊到一个技术问题,他们的一个环境上面小文件巨多,是我目前知道的集群里面规模算非常大的了,但是目前有个问题,一方面会进行一倍的硬件的扩容,而文件的数量也在剧烈的增长着,所以 ...
elasticsearch介绍集群,模拟横向扩展节点、节点宕机、改变分片
出处:[http://www.cnblogs.com/dennisit/p/4133131.html] ,防楼主删博,故保留一份! elasticsearch用于构建高可用和可扩展的系统.扩展 ...
在 Windows Azure 网站中进行纵向扩展和横向扩展
编辑人员注释:本文章由 Windows Azure 网站团队的项目经理 Byron Tardif 撰写. 当您开始一个新的 Web 项目,或者刚刚开始开发一般的网站和应用程序时,您可能希望从小处着手. ...
SignalR学习笔记（五）横向扩展之SQL Server
当一个Web应用程序达到一台服务器能力限制,即请求处理数量限制之后,有2种解决方案:纵向扩展和横向扩展. 纵向扩展即用更强的服务器(或虚拟机),或为当前的服务器添加更多的内存,CPU等横向扩展即添加 ...
转mysql横向扩展和纵向扩展
Scale-up(纵向扩展)和Scale-out(横向扩展)的解释谈到系统的可伸缩性,Scale-up(纵向扩展)和Scale-out(横向扩展)是两个常见的术语,对于初学者来说,很容易搞迷糊这两个 ...

随机推荐

Go基础系列：读取标准输入
fmt包中提供了3类读取输入的函数: Scan家族:从标准输入os.Stdin中读取数据,包括Scan().Scanf().Scanln() SScan家族:从字符串中读取数据,包括Sscan().S ...
JQuery官方学习资料（译）：Attributes
Attributes 元素的属性可以为你的应用程序包含有用的信息,重要的是能够获取和设置它. .attr()方法 .attr()方法是可获取和可设置的,在设置状态下,.attr()可以 ...
谈谈mysql的悲观和乐观锁
悲观锁与乐观锁是两种常见的资源并发锁设计思路,也是并发编程中一个非常基础的概念.之前有写过一篇文章关于并发的处理思路和解决方案,这里我单独将对这两种常见的锁机制在数据库数据上的实现进行比较系统的介绍一 ...
redis实现高并发下的抢购/秒杀功能
之前写过一篇文章,高并发的解决思路(点此进入查看),今天再次抽空整理下实际场景中的具体代码逻辑实现吧:抢购/秒杀是如今很常见的一个应用场景,那么高并发竞争下如何解决超抢(或超卖库存不足为负数的问题)呢 ...
SpringBoot零XML配置的Spring Boot Application
Spring Boot 提供了一种统一的方式来管理应用的配置,允许开发人员使用属性properties文件.YAML 文件.环境变量和命令行参数来定义优先级不同的配置值.零XML配置的Spring B ...
Java基础IO流(一)
IO概念: 大多数应用程序都需要实现与设备之间的数据传输,例如键盘可以输入数据,显示器可以显示程序的运行结果等.在Java中,将这种通过不同输入输出设备(键盘,内存,显示器,网络等)之间的数据传输抽象 ...
在CentOS下面安装hue时报的错
说明:我的系统为CentOS 7 ,系统自带的python版本为2.7.5. 安装hue时,推荐使用2.7.0以上的版本,可以自己查看自己系统自带的版本若是版本不对,要升级为2.7的版本,这里不再说 ...
hive函数应用之操作json
1.创建表 createtable.sql中存放的创建表语句如下 create external table adt.jsontest ( appKey string comment "AP ...
Oracle11g: simple sql script examples
---https://docs.oracle.com/cd/B19306_01/server.102/b14200/statements_8003.htm drop user geovin; drop ...
meta、link、script的常用写法
meta 设置编码格式 <meta charset='utf-8'> 设置关键字 <meta name="keywords" content="音乐播 ...

puppet 横向扩展(二)

Table of Contents

概述