基于docker,consul,consul-template, registrator, nginx服务注册发现集群

 

介绍

该工程主要实现服务的自动注册发现，从而达到提高运维效率，做到服务的自动发现和动态扩展。

服务注册发现

• 服务启动后自动被发现
• 动态变更负载均衡
• 自动伸缩

工具

1.Registrator 这是一个由Go语言编写，针对docker使用的，通过检查本机容器进程在线或者停止运行状态，去注册服务的工具。 它通过docker socket 直接监听容器event，根据容器启动/停止等event来注册/注销服务。 每个容器的每个exposed端口对应不同的服务。 支持可插拔的registry backend，默认支持Consul, etcd and SkyDNS。

2.Consul Consul 是一个分布式高可用的服务发现和配置共享的软件。由 HashiCorp 公司用 Go 语言开发。

3.consul-template consul template可以查询consul中的服务目录、key、key-values等。这种强大的抽象功能和查询语言模板可以使consul template特别适合动态的创建配置文件。例如：创建apache/nginx proxy balancers、haproxy backends、varnish servers、application configurations。

consul-template提供了一个便捷的方式从consul中获取存储的值，consul-template守护进程会查询consul服务，来更新系统上指定的任何模板，当更新完成后，模板可以选择运行一些任意的命令，比如我们这里用它来更新nginx.conf这个配置文件，然后执行nginx -s reload命令，以更新路由，达到动态调节负载均衡的目的。

4.nginx 不用多说，负载均衡软件

运行机制

我们用registrator来监控每个web server的状态。当有新的web server启动的时候，registrator会把它注册到consul这个注册中心上。由于consul_template已经订阅了该注册中心上的服务消息，此时consul注册中心会将新的web server信息推送给consul_template，consul_template则会去修改nginx.conf的配置文件，然后让nginx重新载入配置以达到自动修改负载均衡的目的。同样当一个web server挂了，registrator也能感知到，进而通知consul做出响应。

整个过程不需要运维人工的干预，自动完成。

 

 

环境搭建

build images

build web app image

mvn package docker:build

build nginx-consul-template image

$ cd consul-template-docker

$ docker build -t myimage/nginx-consul-template .

run

$ cd docker/compose

$ docker-compose up -d

scale

启动3个app服务，自动的注册服务，加入Nginx的负载均衡

$ docker-compose down

$ docker-compose scale web=3

$ docker-compose up

访问

http://192.168.14.61:8500

http://192.168.14.61

 

可以发现，每次访问到的后端服务都是动态变化的，并且在服务关闭还是有新的服务加入进来，都能够做到动态感知，无须人工干预。

consul cluster

为了解决consul的单点问题，我们需要建立consul集群。 在这个方案中，每个提供服务的节点上都要部署和运行一个agent，所有运行Consul agent节点的集合构成Consul Cluster。

 

Consul agent有两种运行模式：Server和Client。这里的Server和Client只是Consul集群层面的区分，与搭建在Cluster之上的应用服务无关。

以Server模式运行的Consul agent节点用于维护Consul集群的状态，官方建议每个Consul Cluster至少有3个或以上的运行在Server mode的Agent，Client节点不限。

 

每个数据中心的Consul Cluster都会在运行于server模式下的agent节点中选出一个Leader节点，这个选举过程通过Consul实现的raft协议保证，多个 server节点上的Consul数据信息是强一致的。处于client mode的Consul agent节点比较简单，无状态，仅仅负责将请求转发给Server agent节点。

 

每台机器上部署几个web server，一个registrator和一个consul client，这是基本需求。另外再建立一个consul cluster集群，用来当我们的注册中心。当web server启动后，被registrator感知，进而将注册信息发送给consul client，consul client则访问注册中心的leader节点，上报新加入的服务信息。consul cluster会将新的服务信息推送给已经到它这里订阅了服务消息的consul-template，consul-template再去修改和自己同一台机器上的nginx，以达到动态调整负载均衡的目的。