运行多个Tornado实例

  • 网页响应不是特别的计算密集型处理

  • 多个实例充分利用 CPU

  • 多端口怎么处理

  • Linux 常见应用服务配置模式 nginx 和 supervisord:采用主配置文件 + 项目配置文件

使用Supervisor监控Tornado进程

安装(如果用pip安装注意看是否需要指定使用python2版本)

supervisor 默认只支持 Python2

sudo apt-get install supervisor

或者 激活 Python3 的 virtualenv 后执行,安装支持 Python3 版本的 supervisor

pip install git+https://github.com/Supervisor/supervisor.git

  • 检查主配置文件 deploy/supervisord.conf (如果目录不存在需要创建)

  • 使用命令生成一个主服务配置文件 echo_supervisord_conf > deploy/supervisord.conf (如果没有 deploy 目录就建立)

    检查是否 inculde 配置,没有就加上

    [include]
    files = super/*.conf

    如果 sudo 没有权限就用当前目录生成,然后

    sudo cp deploy/supervisord.conf /etc/supervisor/supervisord.conf 过去

  • 增加 Supervisor 项目运行配置文件(名字如 tudo_super.conf)到 /etc/supervisor/super

  • 把这个文件复制到到  /etc/supervisor/super 下
  • sudo cp deploy/todo_super.conf /etc/supervisor/super
  • 找到启动目录
  • 到项目目录下 pwd 打印出路径
  • 还要找到 python 的路径

    which python

todo_super.conf 文件, 这里要改的是 程序启动路径,启动命令

# 增加一个tornadoes组
[group:tornadoes]
programs = tornado-,tornado-,tornado- # 分别定义三个tornado的进程配置 [program:tornado-]
directory = /home/binbin/tornado25/; 程序的启动目录
command = /home/binbin/.virtualenvs/tornado_1/bin/python /home/binbin/tornado25/app.py --port= ; 启动命令,与手动在命令行启动的命令是一样的,注意这里home不可用~代替
autostart = true ; 在 supervisord 启动的时候也自动启动
startsecs = ; 启动 秒后没有异常退出,就当作已经正常启动了
autorestart = true ; 程序异常退出后自动重启
startretries = ; 启动失败自动重试次数,默认是
user = binbin ; 用哪个用户启动
redirect_stderr = true ; 把 stderr 重定向到 stdout,默认 false
stdout_logfile_maxbytes = 20MB ; stdout 日志文件大小,默认 50MB
stdout_logfile_backups = ; stdout 日志文件备份数
; stdout 日志文件,需要注意当指定目录不存在时无法正常启动,所以需要手动创建目录(supervisord 会自动创建日志文件)
stdout_logfile = /tmp/tornado_app_8000.log
loglevel = info [program:tornado-]
directory = /home/binbin/tornado25/; 程序的启动目录
command = /home/binbin/.virtualenvs/tornado_1/bin/python /home/binbin/tornado25/app.py --port= ; 启动命令,与手动在命令行启动的命令是一样的,注意这里home不可用~代替
autostart = true ; 在 supervisord 启动的时候也自动启动
startsecs = ; 启动 秒后没有异常退出,就当作已经正常启动了
autorestart = true ; 程序异常退出后自动重启
startretries = ; 启动失败自动重试次数,默认是
user = binbin ; 用哪个用户启动
redirect_stderr = true ; 把 stderr 重定向到 stdout,默认 false
stdout_logfile_maxbytes = 20MB ; stdout 日志文件大小,默认 50MB
stdout_logfile_backups = ; stdout 日志文件备份数
; stdout 日志文件,需要注意当指定目录不存在时无法正常启动,所以需要手动创建目录(supervisord 会自动创建日志文件)
stdout_logfile = /tmp/tornado_app_8001.log
loglevel = info [program:tornado-]
directory = /home/binbin/tornado25/; 程序的启动目录
command = /home/binbin/.virtualenvs/tornado_1/bin/python /home/binbin/tornado25/app.py --port= ; 启动命令,与手动在命令行启动的命令是一样的,注意这里home不可用~代替
autostart = true ; 在 supervisord 启动的时候也自动启动
startsecs = ; 启动 秒后没有异常退出,就当作已经正常启动了
autorestart = true ; 程序异常退出后自动重启
startretries = ; 启动失败自动重试次数,默认是
user = binbin ; 用哪个用户启动
redirect_stderr = true ; 把 stderr 重定向到 stdout,默认 false
stdout_logfile_maxbytes = 20MB ; stdout 日志文件大小,默认 50MB
stdout_logfile_backups = ; stdout 日志文件备份数
; stdout 日志文件,需要注意当指定目录不存在时无法正常启动,所以需要手动创建目录(supervisord 会自动创建日志文件)
stdout_logfile = /tmp/tornado_app_8002.log
loglevel = info

启动和管理

启动supervisor

一定要先启动 daemon 程序 (supervisord) 才能执行管理操作,否则会报错

使用默认的主配置文件/etc/supervisor/supervisord.conf

sudo supervisord

明确指定主配置文件

sudo supervisord -c /home/pyvip/working/supervisord.conf 使用 user 用户启动supervisord

使用 user 用户启动supervisord

sudo supervisord -u user

查看、操作进程状态

(tornado) pyvip@Vip:~/ws/tudo$ sudo supervisorctl [sudo] password for pyvip: tornadoes:tornado-8000 RUNNING pid 17652, uptime 0:00:28 tornadoes:tornado-8001 RUNNING pid 17653, uptime 0:00:28 tornadoes:tornado-8002 RUNNING pid 17654, uptime 0:00:28

# 停止运行tornado-8001服务器进程 supervisor> stop tornadoes:tornado-8001 tornados:tornado-8001: stopped

# 停止运行整个tornado服务器进程组

supervisor> stop tornadoes: tornadoes:tornado-8000: stopped tornadoes:tornado-8001: stopped tornadoes:tornado-8002: stopped supervisor> status tornadoes:tornado-8000 STOPPED Jun 26 07:43 PM tornadoes:tornado-8001 STOPPED Jun 26 07:43 PM tornadoes:tornado-8002 STOPPED Jun 26 07:43 PM

supervisorctl 命令介绍

停止某一个进程,program_name 为 [program:x] 里的 x supervisorctl stop program_name 启动某个进程 supervisorctl start program_name 重启某个进程 supervisorctl restart program_name 结束所有属于名为 groupworker 这个分组的进程 (start,restart 同理) supervisorctl stop groupworker: 结束 groupworker:name1 这个进程 (start,restart 同理) supervisorctl stop groupworker:name1 停止全部进程,注:start、restart、stop 都不会载入最新的配置文件 supervisorctl stop all 载入最新的配置文件,停止原有进程并按新的配置启动、管理所有进程 supervisorctl reload 根据最新的配置文件,启动新配置或有改动的进程,配置没有改动的进程不会受影响而重启 supervisorctl update

使用 Nginx 作为反向代理

搭配 tornado 服务使用

安装和运行

  • 安装 sudo apt-get install nginx

  • 检测配置文件正确可用 sudo nginx -t

  • 运行 sudo nginx

  • 修改或增加了配置文件后重启 sudo nginx -s reload

nginx 配置文件

主配置文件是 /etc/nginx/nginx.conf

项目对应的配置文件放到 /etc/nginx/conf.d/*.conf 或者 /etc/nginx/sites-enabled/*

比如 tudo_nginx 文件

upstream tornadoes{
   server 127.0.0.1:8000;   # 本地访问,只用 127.0.0.1
   server 127.0.0.1:8001;
   server 127.0.0.1:8002;
}

proxy_next_upstream error;

server {
   listen 8888;   # 一般是 80
   server_name 127.0.0.1; # 根据实际情况填写对应ip

   location /{
       proxy_pass_header Server;
       proxy_set_header Host $http_host;
       proxy_redirect off;
       proxy_set_header X-Real-IP $remote_addr;
       proxy_set_header X-Scheme $scheme;
       # 把请求方向代理传给tornado服务器,负载均衡
       proxy_pass http://tornadoes;
  }
}

复制到 这个路径下

sudo cp /home/binbin/tornado25/deploy/todo_nginx /etc/nginx/sites-enabled/

常见问题

  1. Linux 目录和文件的操作

  2. 命令的输入 tab 键补全的操作

  3. 按文档操作的顺序 (supervisord 没有启动的报错)

  4. supervisor 的 web 管理界面

  5. 配置文件修改定制应用的套路

  6. nginx 配置解释,conf 文件的作用

  7. vim 的使用和 sudo

  8. 为什么要用 nginx

潭州课堂25班:Ph201805201 tornado 项目 第十二课 项目部署(课堂笔记)的更多相关文章

  1. 潭州课堂25班:Ph201805201 django 项目 第二十六课 docker简介 (课堂笔记)

    官方文档: https://docs.docker.com/install/linux/docker-ce/ubuntu/#set-up-the-repository 1,更新下sudo apt-ge ...

  2. 潭州课堂25班:Ph201805201 django 项目 第二十二课 文章主页 新闻列表页面滚动加载,轮播图后台实现 (课堂笔记)

    新建static/js/news/index.js文件 ,主要用于向后台发送请求, // 新建static/js/news/index.js文件 $(function () { // 新闻列表功能 l ...

  3. 潭州课堂25班:Ph201805201 django 项目 第十八课 前台 注解 (课堂笔记)

    在静态文件 js/user上当下,的 auth.js 文件中 $(function () { let $username = $('#user_name'); // 选择id为user_name的网页 ...

  4. 潭州课堂25班:Ph201805201 爬虫高级 第十二 课 Scrapy-redis分布 项目实战 (课堂笔记)

    建代理池, 1,获取多个网站的免费代理IP, 2,对免费代理进行检测,>>>>>携带IP进行请求, 3,检测到的可用IP进行存储, 4,实现api接口,方便调用, 5,各 ...

  5. 潭州课堂25班:Ph201805201 django框架 第十二课 自定义中间件,上下文处理,admin后台 (课堂笔记)

    中间件 在项目主目录下的配置文件 在项目主目录下创建文件 写个自定义异常处理 方法1 要让其生效,要在主目录下,的中间件中进行注册 主目录下.该文件名.类名 在进入视图函数之前进行判断,  给 req ...

  6. 潭州课堂25班:Ph201805201 爬虫基础 第十四课 js破解 (课堂笔记)

    打断点 找要的数据 鼠标的点击事件 新浪微博登录 表单提交分析 : 先佃输入错误密码开始调式 f10 往下走, f11 进入函数 sh + f11 跳出函数 # -*- coding: utf-8 - ...

  7. 潭州课堂25班:Ph201805201 爬虫基础 第十二课 点触验证码二 (课堂笔记)

    为上次代码添加 模拟人操作 的鼠标的移动轨迹 # -*- coding:utf-8 -*- # 斌彬电脑 # @Time : 2018/9/14 0014 上午 8:08 from selenium ...

  8. FromBottomToTop第十二周项目博客

    FromBottomToTop第十二周项目博客 本周项目计划 设计整体架构,收集素材,制作出静态界面部分 项目进展 已完成游戏整体架构设计 已完成游戏界面.背景音乐等素材的收集 正在进行静态界面部分的 ...

  9. 潭州课堂25班:Ph201805201 django 项目 第五课 静态页面转为模板 (课堂笔记)

    一.分析静态页面   1.静态vs动态 条目 静态页面 动态页面 网站内容 固定不变 经常变动 浏览器加载速度 更快(无需向服务器发起请求) 更慢 改变网站内容 很难(修改或者创建新的html页面) ...

随机推荐

  1. vue---由nextTick原理引出的js执行机制

    最开始查看nextTick这个方法的时候,眼瞎看成了nextClick...我还在疑问难道是下一次click之后处理事件... 然后用这个方法的时候,就只知道是用在DOM更新之后调用回调方法. 这时就 ...

  2. PowerShell Empire使用笔记

    ##安装过程 git clone https://github.com/EmpireProject/Empire.git cd Empire cd setup sudo ./install.sh ## ...

  3. Go语言系列(八)- Goroute和Channel

    一.Goroute 1. 进程和线程 A. 进程是程序在操作系统中的一次执行过程,系统进行资源分配合调度的一个独立单位 B. 线程是进程的一个执行实体,是CPU调度和分派的基本单位,它是比进程更小的能 ...

  4. 【asp.net】asp.net遍历Request的信息

    #需求: 在服务端获取从客户端发送过来的所有数据信息: #方案: 1.服务端代码 public void ProcessRequest(HttpContext context) { //打印所有参数信 ...

  5. ArcGis恢复初始设置(默认设置、出厂设置)的方法

    警告:下面的操作涉及更改操作系统的重要组成部分.必要时,请咨询计算机系统专业人士. 重命名 ESRI 文件夹即对 ArcGIS 恢复出厂设置,因此必须重新安装当前安装的所有第三方工具.自定义脚本和自定 ...

  6. django drf 基础学习3

    一 简述 这里来谈下一些基本原理 二 汇总 1 restful规范 1 根据method不同做不同的操作          request.method='          get(获取) 返回完整 ...

  7. C#(在WeBAPI)获取Oracle(在PL/SQL)游标类型的存储过程(用到了RefCursor)

    需求:WebAPI服务端,通过Oracle数据库的存储过程,获取数据. 在PL/SQL 建立存储过程:(先来最简单的,就是把整个表都查出来) create or replace procedure S ...

  8. 一个基于Net 的CMS -- Umbraco CMS

    一个基于Net 的CMS  -- Umbraco CMS:   https://umbraco.com/ Sitecore 和 EPiServer    http://www.bubuko.com/i ...

  9. Tomcat zabbix监控、jmx监控、zabbix_java_gateway

    几种方式监控tomcat,如标题. 下面就是参考的网上的连接.自己可以试一下. 由于牵扯到jvm的很多东西, 在这里就只是粘贴处连接参考. http://www.cnblogs.com/chrisDu ...

  10. udp/tcp流程

    udp: 1.创建套接字 socket 2.绑定本地ip/port bind 3.收发数据 sendto/recvfrom 4.关闭套接字 close tcp客户端: 1.创建套接字 socket 2 ...