Supervisor多进程管理 异常自动重启 可视化管理
一、序言
Supervisor是多进程管理工具,在Docker中相关联的进程能够通过supervisor来管理。
微服务项目开发阶段,可用于微服务子项目的启动管理。
支持web可视化管理,能够极大方面开发者对项目状态的监控和重启管理。
二、安装与使用
(一)安装与配置
1、服务安装
服务安装前,建议更新Python版本,使用较新的版本有利于服务拓展,若被管理的服务依赖于较新的Python版本,需要再次重新安装服务。
yum install -y epel-release
yum install -y supervisor
查看版本号
supervisord -v
2、配置文件
配置文件路径为/etc/supervisord.conf
,其中用英文;
表示注释。将配置文件备份,过滤注释配置后形成新的配置文件。
# 备份配置文件
mv /etc/supervisord.conf /etc/supervisord.example.conf
# 保留非注释配置,初始化为新的配置文件
cat /etc/supervisord.example.conf | grep -v '^;' | tr -s "\n" > /etc/supervisord.conf
使用命令echo_supervisord_conf
查看默认配置
[unix_http_server]
file=/var/run/supervisor/supervisor.sock
; 可视化web监控模块(不需要直接注释)
[inet_http_server]
port=0.0.0.0:9001
username=root
password=root
[supervisord]
logfile=/var/log/supervisor/supervisord.log
; 最大单个日志文件大小
logfile_maxbytes=50MB
; 最大日志文件保留份数
logfile_backups=10
loglevel=info
pidfile=/var/run/supervisord.pid
; 如果将设置为系统服务,需要设置为false
nodaemon=false
minfds=1024
minprocs=200
[rpcinterface:supervisor]
supervisor.rpcinterface_factory = supervisor.rpcinterface:make_main_rpcinterface
[supervisorctl]
serverurl=unix:///var/run/supervisor/supervisor.sock
; 子进程配置存放目录
[include]
files = supervisord.d/*.ini
通过如下命令查看版本号:
supervisord -v
(二)启动
1、后台启动
将supervisord设置成开机自启,保证委托其管理的服务能够正常启动,建议使用此方式启动。
# 设置开机自启
systemctl enable supervisord
# 启动主服务
systemctl start supervisord
2、前台启动
在编写Docker镜像,需要在一个镜像中同时管理多个服务,需要使用前台启动
。supervisord的默认启动方式是daemon
,若要配置为前台启动需修改配置文件/etc/supervisord.conf
中nodaemon
属性值为true
。
# 使用脚本替换
sed -i 's/nodaemon=false/nodaemon=true/g' /etc/supervisord.conf
前台启动命令如下
supervisord -c /etc/supervisord.conf
3、启动参数
通常情况下参数都是添加在配置文件中,有些场景下,修改配置文件比较繁琐(比如已经生成的镜像),这时在命令行中添加运行时参数就比较方便。
参数 | 用途 | 默认值 |
---|---|---|
-c |
指定配置文件路径 | /etc/supervisord.conf |
-s |
supervisord服务器监听的URL | http://localhost:9001 |
-u |
用于与服务器进行身份验证的用户名 | user |
-p |
用于与服务器进行身份验证的密码 | 123 |
三、服务管理
服务管理包含对主服务进行管理和对子服务进行管理;子服务分为单个管理和批量(分组)管理。
1、查看主服务状态
如果不指定子服务名称,默认重新查看所有的子服务状态。指定子服务名,仅仅查看当前子服务状态。
# 查看服务状态
supervisorctl status
主进程管理
#进程管理常用命令
systemctl stop supervisord
systemctl start supervisord
systemctl restart supervisord
2、可视化界面管理
可视化界面在软件的不同开发阶段采用不同的策略,项目开发和测试阶段,为了提高开发效率,往往开启可视化界面,当项目开发完毕进行交付时,为保证服务器的安全,通常关闭可视化界面。
开启Web可视化服务需要在配置文件中添加inet_http_server
模块。
(一)单服务管理
单服务管理是指针对单个子服务进行管理,所有子服务在默认分组中,但是不显示的标出。
1、刷新子服务列表
当添加新加入子服务时,需要刷新列表,主服务方能纳入管理范畴。
(1)reload
如果不指定子服务名称,默认重新启动所有的子服务列表。指定子服务名,仅仅重启当前子服务,其它服务不受影响。
所有子服务是指不管配置是否发生修改,都会重启。
# 刷新服务列表
supervisorctl reload
(2)update
重启所有配置发生更改的子服务(包含新增子服务),配置未发生变化的子服务不重启。
# 刷新服务列表
supervisorctl update
2、进程管理运行
此种方式管理子进程颗粒度更小。
# 启动指定服务
supervisorctl start program_name
# 停止指定服务
supervisorctl stop program_name
# 重启指定服务
supervisorctl restart program_name
# 启动所有服务
supervisorctl start all
# 停止所有服务
supervisorctl stop all
(二)分组管理
当有相关联的子服务时,可采用分组管理,一旦设置分组并添加子服务,那么子服务名称就会发生变化:由原来的program_name
变成group_name:program_name
,比如redis:redis80
分组管理需要修改主服务配置文件。
1、查看分组子服务列表
查看指定分组名称下子服务列表,
# 查看分组子服务列表
supervisorctl status group_name:
2、分组子进程管理
以组为单位对子进程进行管理,包含启动服务、停止服务、重启服务。
# 启动指定组名下服务
supervisorctl start group_name:
# 停止指定组名下服务
supervisorctl stop group_name:
# 重启指定组名下服务
supervisorctl restart group_name:
注意组名后的冒号:
。
3、分组应用
将进程委托给Supervisor管理,并分组对于一组关联进程来说很方便,比如Redis主从服务、ES集群、ZK集群、Kafka集群,他们是一组关联度较高的子服务集合。
四、编写子进程运行配置文件
supervisor主进程配置文件为/etc/supervisord.conf
在目录/etc/supervisord.d
下新建以.ini
为后缀的配置文件,每一个配置文件代表一个子进程。执行如下命令,即可添加子进程配置。
快捷脚本传送门
(一)参数解释
1、directory
当子进程启动命令不能从环境变量
读取到时,使用此参数切换到指定的工作目录,然后运行入口命令。
2、priority
当priority
参数越大时,优先级越低。
3、environment
如果子应用无法获取系统环境变量,那么可显式指明特定环境的路径。
environment=JAVA_HOME=/usr/local/java
(二)日志管理
1、查看子进程日志
子进程被Supervisor管理后会产生相应的运行日志,常见的有访问日志和错误日志。
; 访问日志
stdout_logfile=/var/log/park/access.log
; 错误日志
stderr_logfile=/var/log/park/error.log
在子进程配置文件中增加日志配置,可以在不使用可视化界面的情况下查看子进程日志。可视化Web界面查看日志固然方便,缺陷是不能查看错误日志。
tail -f /var/log/park/access.log
子进程配置文件添加参数stdout_logfile
和stderr_logfile
的日志文件会自动纳入主进程日志管理,自动进行日志轮转操作,用户无需干预。
当子进程未显示的指明日志文件路径时,默认日志文件存在于/tmp
路径下。
Supervisord 会基于 logfile_maxbytes
和 logfile_backups
轮转日志,前者限制单个日志文件的大小,后者限制日志备份的数量。此配置存在与主配置文件,非子进程配置文件。
(三)常见组件配置
1、Nginx
cat <<EOF> /etc/supervisord.d/nginx.ini
[program:nginx]
directory=/usr/local/nginx/sbin
command=/usr/local/nginx/sbin/nginx -g 'daemon off;'
; 主服务启动时自动启动当前子服务
autostart=true
; 子服务异常退出自动重启
autorestart=true
; 子服务启动时间(与时间情况尽量一致)
startsecs=5
startretries=3
redirect_stderr=true
stdout_logfile=/usr/local/nginx/logs/access.log
stderr_logfile=/usr/local/nginx/logs/error.log
EOF
子进程的命令必须是以前台运行的方式执行,不能使用后台运行的方式执行。
2、Redis
cat <<EOF> /etc/supervisord.d/redis.ini
[program:redis]
command=/usr/local/redis/bin/redis-server /usr/local/redis/conf/redis.conf --daemonize no
autostart=true
autorestart=true
startsecs=5
startretries=3
redirect_stderr=true
EOF
子进程的命令必须是以前台运行的方式执行,不能使用后台运行的方式执行。
3、Nacos
cat <<EOF> /etc/supervisord.d/nacos.ini
[program:nacos]
command=sh /usr/local/nacos/bin/startup.sh -m standalone
autostart=true
autorestart=true
startsecs=8
startretries=3
redirect_stderr=true
environment=JAVA_HOME=/usr/local/java
priority=1
EOF
子进程的命令必须是以前台运行的方式执行,不能使用后台运行的方式执行。
4、ElasticSearch
cat <<EOF> /etc/supervisord.d/es.ini
[program:es]
command=/usr/local/elasticsearch/bin/elasticsearch -Enetwork.host=127.0.0.1
user=es
password=es.123.456
umask=002
autostart=true
autorestart=true
startsecs=8
startretries=3
redirect_stderr=true
priority=100
EOF
5、ZooKeeper
cat <<EOF> /etc/supervisord.d/zk.ini
[program:zk]
command=/usr/local/zookeeper/bin/zkServer.sh start-foreground
autostart=true
autorestart=true
startsecs=5
startretries=3
redirect_stderr=true
priority=100
EOF
6、Jenkins
cat <<EOF> /etc/supervisord.d/jenkins.ini
[program:jenkins]
command=/usr/local/jenkins/bin/catalina.sh run
autostart=true
autorestart=true
startsecs=8
startretries=3
redirect_stderr=true
priority=100
EOF
7、Kafka
cat <<EOF> /etc/supervisord.d/kafka.ini
[program:kafka]
command=/usr/local/kafka/bin/kafka-server-start.sh /usr/local/kafka/config/server.properties
autostart=true
autorestart=true
startsecs=8
startretries=3
redirect_stderr=true
priority=100
EOF
8、Kibaba
cat <<EOF> /etc/supervisord.d/kibana.ini
[program:kibana]
command=/usr/local/kibana/bin/kibana -H 0.0.0.0
autostart=true
autorestart=true
startsecs=8
startretries=3
redirect_stderr=true
EOF
9、MongoDb
cat <<EOF> /etc/supervisord.d/mongo.ini
[program:mongo]
command=/usr/local/mongo/bin/mongod --config=/usr/local/mongo/conf/config.yml
autostart=true
autorestart=true
startsecs=8
startretries=3
redirect_stderr=true
priority=100
EOF
Supervisor多进程管理 异常自动重启 可视化管理的更多相关文章
- Docker可视化管理工具对比(DockerUI、Shipyard、Rancher、Portainer)
1.前言 谈及docker,避免不了需要熟练的记住好多命令及其用法,对于熟悉shell.技术开发人员而言,还是可以接受的,熟练之后,命令行毕竟是很方便的,便于操作及脚本化.但对于命令行过敏.非技术人员 ...
- systemd实践: 依据情况自动重启服务
systemd服务异常自动重启很好用,但有的时候希望某些服务只在特定情况下进行重启,其他时候不要自动重启(比如OOM,需要人工介入). 本文抛砖引玉,旨在能够让读者对systemd的重启机制有一定了解 ...
- 用Supervisor实现进程守护,在异常退出时自动重启
程序启动后,有些是以daemon的形式运行,但在意外退出后,如果不能及时重新启动,会有比较严重的影响. 比如Zimg在图片处理中由于某些图片处理失败,会导致zimg进程挂掉,影响正常的服务提供,并且只 ...
- node.js零基础详细教程(7.5):mongo可视化工具webstorm插件、nodejs自动重启模块Node Supervisor(修改nodejs后不用再手动命令行启动服务了)
第七章 建议学习时间4小时 课程共10章 学习方式:详细阅读,并手动实现相关代码 学习目标:此教程将教会大家 安装Node.搭建服务器.express.mysql.mongodb.编写后台业务逻辑. ...
- Docker容器可以使用容器平台管理自动重启实现自修复吗?
容器的自修复功能是经常被吹嘘的.因为容器是衣服,人躺下了,衣服也躺下了,容器平台能够马上发现人躺下了,于是可以迅速将人重新唤醒工作. 而虚拟机是房子,人躺下了,房子还站着.因而虚拟机管理平台不知道里面 ...
- supervisor的安装部署及集群管理
supervisor的安装部署及集群管理 supervisor官网:http://www.supervisord.org/ 参考链接: http://blog.csdn.net/xyang81/art ...
- centos7.6使用 supervisor 对filebeat7.3.1进程进行管理
centos7.6使用 supervisor 对filebeat7.3.1进程进行管理 Supervisor 是一个 Python 开发的 client/server 系统,可以管理和监控类 UNIX ...
- 【转】Android Service被关闭后自动重启,解决被异常kill 服务
http://www.kaifajie.cn/android/10182-2.html 每次调用startService(Intent)的时候,都会调用该Service对象的onStartComman ...
- supervisor开机自动启动脚本+redis+MySQL+tomcat+nginx进程自动重启配置
[root@mongodb-host supervisord]# cat mongo.conf [program:mongo]command=/usr/local/mongodb/bin/mongod ...
随机推荐
- HAT
目录 概 主要内容 代码 Rade R. and Moosavi-Dezfooli S. Helper-based adversarial training: reducing excessive m ...
- Browser Events 常用浏览器事件
事件 说明 click 鼠标点击时触发此事件 dblclick 鼠标双击时触发此事件 mousedown 按下鼠标时触发此事件 mouseup 鼠标按下后松开鼠标时触发此事件 mouseover 当鼠 ...
- 如何下载安装JDBC_jar包,MySQL_JDBC_jar包的下载与使用(Windows)
一. 下载 (1) 打开MySQL_JDBC的下载网站:https://dev.mysql.com/downloads/connector/j/ (2) 选择操作系统:Platform Indepen ...
- 查收新年礼物丨DevEco Studio 3.0 Beta2发布,20个新变化详解
HUAWEI DevEco Studio是开发HarmonyOS应用和原子化服务的一站式集成开发环境(IDE),为开发者提供工程模板创建.开发.编译.调试.发布等功能. 2021年12月31日,新版本 ...
- Linux查看RAM内存信息
1.查看/proc/meminfo文件 查看RAM使用情况最简单的方法是通过/proc/meminfo. 这个动态更新的虚拟文件列出了详细的内存使用情况. cat /proc/meminfo 命令输出 ...
- 初识python 之 爬虫:使用正则表达式爬取“糗事百科 - 文字版”网页数据
初识python 之 爬虫:使用正则表达式爬取"古诗文"网页数据 的兄弟篇. 详细代码如下: #!/user/bin env python # author:Simple-Sir ...
- float类型数据精度问题:12.0f-11.9f=0.10000038,"减不尽"为什么?
现在我们就详细剖析一下浮点型运算为什么会造成精度丢失? 1.小数的二进制表示问题 首先我们要搞清楚下面两个问题: (1) 十进制整数如何转化为二进制数 算法很简单.举个例子,11表示成二进制数: 1 ...
- 在 CentOS 7 上安装和配置 Puppet
1 准备 2台 centos7 (master/server:192.168.1.103 agent/client:192.168.1.106) 分别添加puppet自定义仓库 https://yum ...
- vue中自定义属性
<div v-bind:id="name"></div> //v-bind:id="变量" or :id="变量"
- vue中使用两个window.onresize问题解决
在vue开发中,因为引用的父组件和子组件都使用了window.onresize以至于一个window.onresize失效.找了下解决方案,可以采用下面的方式写就可以了. window.onresiz ...