控制Docker Compose的启动顺序的一个思路
- 起源
- 守护进程daemon
- 从守护进程的角度看Docker Compose
- Docker的解决方案
- 思路
- 代码
- 结果
起源
Docker Compose提供了一个depends_on参数。
https://docs.docker.com/compose/compose-file/#depends_on
depends_on参数用于描述服务之间的依赖关系,服务依赖将导致如下行为:
docker-compose up按照依赖关系的顺序启动服务。docker-compose up SERVICE自动包含SERVICE的依赖关系。
看起来功能强大,不过接下来又说了使用depends_on的注意事项:
depends_on在启动服务时并不会等待相关所依赖的服务完成。
也就是说,depends_on的主要功能是自动包含SERVICE的依赖关系,
而所谓的按照依赖关系的顺序启动服务在实践中几乎毫无意义,
因为很多被依赖的服务往往启动缓慢,例如数据库。
分析Docker的工作原理会发现,
管理依赖关系的挑战在于Docker本身并不管理服务的启动的过程,
一个Docker服务在启动entrypoint或者command进程的时候就开始了,
一直到这个进程退出后才能被Docker识别服务结束。
Docker服务的生命周期不同于使用服务角度的声明周期,
从使用服务的角度看,有这么几个关键点
- 服务的主进程启动
- 服务开始向外提供服务
- 服务向外提供服务
- 服务终止向外提供服务
- 服务的主进程结束
然后结合Docker服务的生命周期的关键点一起看
entrypoint或者command进程启动- 若干启动辅助进程启动到结束
- 服务的主进程启动
- 服务开始向外提供服务
- 服务向外提供服务
- 服务终止向外提供服务
- 服务的主进程结束
- 若干结束辅助进程启动到结束
entrypoint或者command进程结束
Docker可以识别entrypoint或者command进程的启动和结束,
但是里面的细节就很难识别了。
守护进程daemon
在启动服务的过程中还有一个容易混淆的地方————守护进程daemon, Linux中的服务往往以守护进程daemon的形式出现。
所有守护进程的启动脚本,都放在/etc/init.d目录下面。 init进程的主要任务,就是逐一运行这些脚本。
在Linux中一个守护进程的父进程是init进程,
因为守护进程真正的父进程在fork出子进程后就先于子进程exit退出了,
所以守护进程是一个由init继承的孤儿进程。
这种工作方式有两个基本的用途。
- 用于启动的父进程的运行权限较高,
fork子进程的同时可以设置子进程运行于不同的环境,例如不同的用户。 - 用于启动的父进程在
init中是串行的,而且可以依循一定的顺序,
在fork具体提供服务的子进程后,父进程退出,init运行下一个守护进程的启动的父进程,
下一个守护进程的启动的父进程就可以使用前面的守护进程的子进程提供的服务了。
这是和本文所讨论的相同的场景。
免责声明:本段并非专门的Linux技术分析,仅用于介绍相关知识。
从守护进程的角度看Docker Compose
既然Docker Compose中按照顺序启动服务的情况和守护进程类似,
那么能不能使用相同的机制呢?
从技术上没问题,如果所有的服务都采用和守护进程类似的机制,例如fork出子进程,
或者使用&运行后台进程。总之,只要保证主进程退出,
就可以被Docker Compose识别了。
这种方式看上去很美,不过就严格限制了服务的灵活性。
猜测,仅仅是猜测,Docker没有找到尽善尽美的解决方案,所以没有提供这个功能。
Docker的解决方案
Docker没有提供直接的解决方案,不过也并且给出了一篇参考文章:
https://docs.docker.com/compose/startup-order/
这篇文章很神奇,神奇之处不是提出了什么奇思妙想,
神奇之处在于点踩的人数远远多于点赞的人数,
今天(2018年4月3日)的数据是172踩53赞。竟然达到了3倍之多!
这种情况在官方文档中是非常罕见的。
不过我也要赞一下,不是赞这篇文章,
而是为Docker公司把这么一个数字暴露出来的勇气点赞。
文章内容就不讨论了,思路类似。
思路
既然官方给出的思路是服务之间检测,那么检测端口是一个方法,而且是非侵入式的。
不过当另一个服务并没有提供端口,例如仅仅是若干操作环节中的一个步骤,
就不能检查端口了,此时就需要借助其他的方式。
前置的服务设置一个标志,后续的服务检查这个标志。
从这个角度思考,借助文件系统检查时间戳可能是最简单的方法之一。
- 借助
volume在不同的服务之间共享卷 - 前置服务完成启动的时候
touch一个文件作为标记 - 后置服务不停的检查这个文件
具体涉及到两个技术细节。
- 由于服务会重用之前的卷,因此不能仅检查文件是否存在,
还需要比对文件的时间戳是否晚于当前服务的启动时间 - 当前服务的启动时间不能使用
uptime,这个是主机的启动时间,
而是比对 /proc/1/cmdline 这个文件的时间戳
代码
https://github.com/huzhenghui/Docker-Compose-Startup-Order
version: "3"
services:
service_1:
image: ubuntu
volumes:
- Docker-Compose-Startup-Order:/Startup-Order
command: |
bash -c '
echo Service 1 Start;
sleep 10;
echo Service 1 Up;
touch /Startup-Order/service_1;'
service_2:
image: ubuntu
volumes:
- Docker-Compose-Startup-Order:/Startup-Order
command: |
bash -c '
while [[ ! -f /Startup-Order/service_1 || /Startup-Order/service_1 -ot /proc/1/cmdline ]]; do sleep 1; done;
echo Service 2 Start;
sleep 10;
echo Service 2 Up;
touch /Startup-Order/service_2;'
service_3:
image: ubuntu
volumes:
- Docker-Compose-Startup-Order:/Startup-Order
command: |
bash -c '
while [[ ! -f /Startup-Order/service_2 || /Startup-Order/service_2 -ot /proc/1/cmdline ]]; do sleep 1; done;
echo Service 3 Start;
sleep 10;
echo Service 3 Up;'
volumes:
Docker-Compose-Startup-Order:
结果
PS C:\Users\huzh\OneDrive\Docker\Docker-Compose-Startup-Order> docker-compose up
Starting dockercomposestartuporder_service_1_1 ...
Starting dockercomposestartuporder_service_3_1 ...
Starting dockercomposestartuporder_service_3_www.feihuanyule.com1 ... done
Attaching to dockercomposestartuporder_service_1_1, dockercomposestartuporder_service_2_1, dockercomposestartuporder_service_3_1
service_1_1 | Service 1 Start
service_1_1 | Service 1 Up
dockercomposestartuporder_service_1_1 www.feihuanyule.com exited with code 0
service_2_1 | Service 2 Start
service_2_1 | Service 2 Up
dockercomposestartuporder_service_2_1 www.feihuanyule.com exited with code 0
service_3_1 | Service 3 Start
service_3_1 | Service 3 Up
dockercomposestartuporder_service_www.gouyiflb.cn 3_1 exited with code 0
PS C:\Users\huzh\OneDrive\Docker\Docker-Compose-Startup-Order>
控制Docker Compose的启动顺序的一个思路的更多相关文章
- docker compose 服务启动顺序控制
概要 docker-compose 可以方便组合多个 docker 容器服务, 但是, 当容器服务之间存在依赖关系时, docker-compose 并不能保证服务的启动顺序. docker-comp ...
- asp.net core容器&mysql容器network互联 & docker compose方式编排启动多个容器
文章简介 asp.net core webapi容器与Mysql容器互联(network方式) docker compose方式编排启动多个容器 asp.net core webapi容器与Mysql ...
- Docker Compose 启动mysql,redis,rabbitmq
这里使用的centos7,首先切换到root. sudo -s 首先去设置下载镜像,否则下载这三个东西要很久,而且可能失败. vim /etc/docker/daemon.json 内容如下: { & ...
- Docker学习笔记之常用的 Docker Compose 配置项
0x00 概述 与 Dockerfile 一样,编写 Docker Compose 的配置文件是掌握和使用好 Docker Compose 的前提.编写 Docker Compose 配置文件,其本质 ...
- docker-compose下的java应用启动顺序两部曲之二:实战
上篇回顾 本文是<docker-compose下的java应用启动顺序两部曲>的终篇,在上一篇<docker-compose下的java应用启动顺序两部曲之一:问题分析>中,我 ...
- 5种常见的Docker Compose错误
在构建一个容器化应用程序时,开发人员需要一种方法来引导他们正在使用的容器去测试其代码.虽然有几种方法可以做到这一点,但 Docker Compose 是最流行的选择之一.它让你可以轻松指定开发期间要引 ...
- Docker学习笔记之使用 Docker Compose 管理容器
0x00 概述 通过之前的介绍,我们已经基本掌握了构建.运行容器的方法,但这还远远不够,由于 Docker 采用轻量级容器的设计,每个容器一般只运行一个软件,而目前绝大多数应用系统都绝不是一个软件所能 ...
- docker-compose下的java应用启动顺序两部曲之一:问题分析
在docker-compose编排多个容器时,需要按实际情况控制各容器的启动顺序,本文是<docker-compose下的java应用启动顺序两部曲>的第一篇,文中会分析启动顺序的重要性, ...
- docker和docker compose安装使用、入门进阶案例
一.前言 现在可谓是容器化的时代,云原生的袭来,导致go的崛起,作为一名java开发,现在慌得一批.作为知识储备,小编也是一直学关于docker的东西,还有一些持续继承jenkins. 提到docke ...
随机推荐
- 使用Python访问HDFS
最近接触到大数据,对于Skpark和Hadoop的料及都停留在第一次听到这个名词时去搜一把看看大概介绍免得跟不上时代的层次. 在实际读了点别人的代码,又自己写了一些之后,虽然谈不上理解加深,至少对于大 ...
- Appium(Python)驱动手机淘宝App
请注意操作步骤: 1. 用数据线连接手机, 打开开发者模式, 并赋予相关权限, 并保持不锁屏状态: 2. 启动Appium桌面服务端: 3. 运行程序: 首次运行, Appium会在手机上安装3个Ap ...
- JMeter录制Web脚本
设置Firefox浏览器代理, 点击右上角的菜单: 点击选项: 点击高级: 点击设置: 点击手动配置代理, 输入本地的IP地址和端口号8888,与JMeter代理服务器的端口号保持一致: 好了,浏览器 ...
- 【SpringCloud】第五篇: 路由网关(zuul)
前言: 必需学会SpringBoot基础知识 简介: spring cloud 为开发人员提供了快速构建分布式系统的一些工具,包括配置管理.服务发现.断路器.路由.微代理.事件总线.全局锁.决策竞选. ...
- vuex-Actions的用法
Action 类似于 mutation,不同在于: Action 提交的是 mutation,而不是直接变更状态. Action 是异步的,mutation是同步的. 沿用vuex学习---简介的案例 ...
- Django创建App报错
在django下创建APP项目时遇到的坑 python manage.py startapp app01 报错内容如下: 解决:找到报错中的文件夹151行删除items(),)中的逗号即可 在命令行下 ...
- [2018 ACL Short and System] 对话系统
Short Paper(s) 1. Task-oriented Dialogue System for Automatic Diagnosis. (Cited by 0) Zhongyu Wei, ...
- LinQ to SQL 及 non-LinQ方式实现Group的Performance对比
拥有476550数据的一张数据表.使用其中的某个字段分组,然后按该字段进行排序.该需求分别使用LinQ to SQL和non-LinQ的方式实现,然后来看一下performance对比. LinQ w ...
- Python学习之路4 - 文件操作&编码转换
文件操作 文件操作大概分三步: 把文件打开. 操作文件. 把文件关上. 打开文件 打开文件用open()函数,打开成功后返回一个资源,具体语法如下. open(要打开的文件,打开方式,打开文件的格式, ...
- 针对XX系统的可用性和易用性构想
可用性是与系统故障有关的一个质量属性,是指系统正常运行的时间的比例,一般通过两次故障之间的时间长度或在系统崩溃情况下能恢复正常运行的速度来衡量,同时此概念涉及一个公式的计算,就是系统正常运行时间的百分 ...