Django+Celery框架自动化定时任务开发

本章介绍使用DjCelery即Django+Celery框架开发定时任务功能，在Autotestplat平台上实现单一接口自动化测试脚本、业务场景接口自动化测试脚本、App自动化测试脚本、Web自动化测试脚本等任务的定时执行、调度、管理等，从而取代Jenkins上的定时执行脚本和发送邮件等功能。

自动化测试逻辑流程图11.1所示。

▲图11.1

11.1 环境搭建

1．安装

步骤1 安装Celery。pyramid_celery-3.0.0，

配置https://pypi.python.org/pypi/pyramid_celery/。

步骤2 安装django-clery。django-celery-3.2.2，

配置https://pypi.python.org/pypi/django- celery。

INSTALLED_APPS= []

加入2：

'djcelery',

运行 Python manage.py migrate

步骤 3 安装celery-with-redis-3.0，

地址为https://pypi.python.org/pypi/celery-with-redis/。

步骤 4 安装django-clery-beat。django-celery-beat-1.1.0，

https://pypi.python.org/pypi/ django_celery_beat。

步骤5 下载Redis-x64-3.2.100，

Redis-x64-3.2.100.zip https://github.com/MicrosoftArchive/redis/releases。

2．配置

步骤1 在Settings.py中增加如下内容。

加入1：

import djcelery

djcelery.setup_loader() #加载djcelery

加入2:

#数据库调度

CELERYBEAT_SCHEDULER ='djcelery.schedulers.DatabaseScheduler'

加入3:

BROKER_URL = 'redis://127.0.0.1:6379/0'

BROKER_TRANSPORT = 'redis'

步骤2 在应用Apitest目录下新建celery.py文件1，加入如下内容。

from __future__ import absolute_import

import os

import django

from celery import Celery

from django.conf import settings

os.environ.setdefault('DJANGO_SETTINGS_MODULE','autotest.settings')

django.setup()

app = Celery('autotest')

app.config_from_object('django.conf:settings')

app.autodiscover_tasks(lambda:settings.INSTALLED_APPS)

步骤3 新建tasks.py文件，加入如下内容。

# -*-coding:utf-8 -*-

importrequests, time, sys, re

importurllib, zlib#,

importpymysql

importunittest

from traceimport CoverageResults

importjson

fromidlelib.rpc import response_queue

fromapitest.celery import app

from timeimport sleep

@app.task

def hello_world():

print('已运行')

步骤4 启动服务python manage.py runserver。

步骤5 解压缩后，运行CMD，切换到相应目录，输入启动Redis指令redis-server redis. windows.conf，成功后出现如图11.2所示界面。

▲图11.2

步骤6 启动指令python manage.py celery worker -l info。

步骤7 启动指令python manage.py celery beat。

11.2 前端功能实现

1．功能描述

完成实现单一接口测试用例、业务场景接口API测试用例、AppUI测试用例、WebUI测试用例的自动化定时任务。

2．程序清单

在autotest\apitest\templates目录下新建periodic_task.html文件，加入如下内容。

<html>

<head>

{% load bootstrap4 %}

{% bootstrap_css %}

{% bootstrap_javascript %}

<title>产品自动化测试平台</title>

</head>

<div>

<ahref="#"> </a>

<ul>

</ul>

<ul>

</ul>

</div>

</nav>

<div>

<formmethod="get" action="/tasksearch/">

{% csrf_token %}

<div >

</select>

<imgsrc="/static/admin/img/icon-changelink.svg" alt="修改"/>

</a>

<imgsrc="/static/admin/img/icon-addlink.svg" alt="增加"/>增加

</a>

</form>

</div>

<div>

<thead>

<tr>

</tr>

</thead>

<tbody>

{% for task in tasks %}{% for periodic inperiodics %}

<tr>

{% if task.interval_id != null andtask.interval_id == periodic.id %}

<td><a style='color:green'>每{{ periodic.period }} {{ periodic.every}}次</a></td>

<td>{{ task.date_changed }}</td>

<td>{{ task.enabled }}</td>

<td>{% if task.id == 1 %}

{% elif task.id == 2 %}

{% else %}

{% endif %}

</td>

{% else %}

{% endif %}

{% for crontab in crontabs %}

{% if task.crontab_id != null and task.crontab_id ==crontab.id and task.interval_id == 1 %}

<td><a style='color:green'>{{crontab.month_of_year }}年{{crontab.day_of_month }}月{{crontab.day_of_week }}日{{crontab.hour }}时{{ crontab.minute}}分</a></td>

<td>{{ task.date_changed }}</td>

<td>{{ task.enabled }}</td>

{% else %}

{% endif %}

{% endfor %}{% endfor %}{% endfor %}

</tbody>

</table>

</div>

<span > {# 把翻页功能固定显示在右下角#}

<div >

<tr><th>总数</th><td>{{ taskcounts }}</td></tr> {# 前端读取定义的变量#}

</div>

<div>

<ulclass="pagination" id="pager">

{#上一页链接开始#}

{%if tasks.has_previous %}

{# 如果有上一页，则正常显示上一页链接#}

<li><ahref="/periodic_task/?page={{ tasks.previous_page_number }}">上一页</a></li> {# 上一页标签 #}

{%else %}

<li class="previous disabled"><ahref="#">上一页</a></li>{# 如果当前不存在上一页，则上一页的链接不可单击#}

{%endif %}

{# 上一页链接开始#}

{%for num in tasks.paginator.page_range %}

{% if num == currentPage %}

<li><a href="/periodic_task/?page={{ num }}">{{ num}}</a></li> {#显示当前页数链接#}

{% else %}

<liclass="item"><a href="/periodic_task/?page={{ num}}">{{ num }}</a></li>

{% endif %}

{% endfor %}

{# 下一页链接开始#}

{% if tasks.has_next %} {# 如果有下一页，则正常显示下一页链接#}

<liclass="next"><a href="/periodic_task/?page={{tasks.next_page_number }}">下一页</a></li>

{% else %}

{% endif %}

{# 下一页链接结束#}

</ul>

</div>

</body>

</html>

功能描述：实现自动化测试任务调度执行，包括单一接口、扫描、流程接口、业务场景、Web搜索、自动化平台测试开发、App登录，CSDN定时任务注册，定时任务执行等功能。

程序清单：在apitest/views.py中加入如下内容。

from .tasks importhello_world

from .tasks importtest_readSQLcase

from djcelery.modelsimport PeriodicTask,CrontabSchedule,IntervalSchedule

# 任务计划

@login_required

defperiodic_task(request):

username = request.session.get('user', '')

task_list = PeriodicTask.objects.all()

task_count =PeriodicTask.objects.all().count() #统计数

periodic_list =IntervalSchedule.objects.all() # 周期任务（如每隔1小时执行1次）

crontab_list =CrontabSchedule.objects.all() # 定时任务（如某年某月某日的某时，每# 天的某时）

paginator = Paginator(task_list, 5) #生成paginator对象,设置每页显示5条记录

page = request.GET.get('page',1) #获取当前的页码数,默认为第1页

currentPage=int(page) #把获取的当前页码数转换成整数类型

try:

task_list = paginator.page(page)#获取当前页码数的记录列表

except PageNotAnInteger:

task_list = paginator.page(1)#如果输入的页数不是整数，则显示第1页内容

except EmptyPage:

task_list =paginator.page(paginator.num_pages)#如果输入的页数不在系统的页数中，# 则显示最后一页内容

return render(request,"periodic_task.html", {"user": username,"tasks":task_list,"taskcounts": task_count, "periodics":periodic_list,"crontabs": crontab_list })

# 搜索功能

@login_required

deftasksearch(request):

username = request.session.get('user', '')# 读取浏览器登录Session

search_name =request.GET.get("task", "")

task_list = PeriodicTask.objects.filter(task__icontains=search_name)

periodic_list =IntervalSchedule.objects.all() # 周期任务（如每隔1小时执行1次）

crontab_list =CrontabSchedule.objects.all() # 定时任务（如某年某月某日的某时，每# 天的某时）

return render(request,'periodic_task.html',{"user": username,"tasks":task_list,"periodics":periodic_list,"crontabs": crontab_list })

在autotest/urls.py中加入：

path('periodic_task/',views.periodic_task),

path('tasksearch/', views.tasksearch),

在apitest/left.html中加入：

<li>

<iclass="glyphicon glyphicon-fire"></i>

任务计划

</a>

</li>

</tr> </td>

查看前端页面效果，如图11.3所示。

▲图11.3

本篇选自：《自动化平台测试开发-Python测试开发实战》

- To Be Continued -

Django+Celery框架自动化定时任务开发的更多相关文章

Django + Celery 实现动态配置定时任务
哈喽,今天给大家分享一篇Django+Celery实现动态配置定时任务,因为最近也是无意间看到一位大佬关于这块的文章,然后自己觉得不错,也想学习写一下,然后最终实现功能是在前端页面统一管理计划任务,大 ...

基于Django+celery二次开发动态配置定时任务（一）
需求: 前端时间由于开发新上线一大批系统,上完之后没有配套的报表系统.监控,于是乎开发.测试.产品.运营.业务部.财务等等各个部门就跟那饥渴的饿狼一样需要各种各样的系统数据满足他们.刚开始一天一个还 ...

基于Django+celery二次开发动态配置定时任务（二）
一.需求结合上一篇,使用djcelery模块开发定时任务时,定时任务的参数都保存在djcelery_periodictask表的args.kwargs字段里,并且是json格式.那么,当定时任务多了 ...

django celery redis 定时任务
0.目的在开发项目中,经常有一些操作时间比较长(生产环境中超过了nginx的timeout时间),或者是间隔一段时间就要执行的任务. 在这种情况下,使用celery就是一个很好的选择. cele ...

Celery 分布式任务队列快速入门以及在Django中动态添加定时任务
Celery 分布式任务队列快速入门以及在Django中动态添加定时任务转自金角大王 http://www.cnblogs.com/alex3714/articles/6351797.html ...

django+celery+redis实现运行定时任务
0.目的在开发项目中,经常有一些操作时间比较长(生产环境中超过了nginx的timeout时间),或者是间隔一段时间就要执行的任务. 在这种情况下,使用celery就是一个很好的选择. cele ...

结合Django+celery二次开发定时周期任务
需求: 前端时间由于开发新上线一大批系统,上完之后没有配套的报表系统.监控,于是乎开发.测试.产品.运营.业务部.财务等等各个部门就跟那饥渴的饿狼一样需要各种各样的系统数据满足他们.刚开始一天一个还 ...

django —— Celery实现异步和定时任务
1. 环境 python==2.7 djang==1.11.2 # 1.8, 1.9, 1.10应该都没问题 celery-with-redis==3.0 # 需要用到redis作为中间人服务(Bro ...

django celery异步框架
描述:实现运维平台的异步执行与定时任务,以下简单描述了安装过程及使用. 安装django和celery pip install django pip install celery pip inst ...

随机推荐

C语言指针理解
1.指针指针全称是指针变量,其实质是C语言的一种变量.这种变量比较特殊,通常他的值会被赋值为某个变量的地址值(p = &a),然后我们可以使用 *p 这样的方式去间接访问p所指向的那个变量. ...

2019收藏盘点（编程语言/AI/面试/实用工具）
2020.1.5更新我看过的后面会加上评价编程学习 java开源项目汇总: https://github.com/Snailclimb/awesome-java 大数据学习入门: https:// ...

\_\_doc\_\_
__doc__ 注释信息一.doc 返回类的注释信息 class Foo: '我是描述信息' pass print(Foo.__doc__) 我是描述信息该属性无法被继承 class Foo: ' ...

CodeForces 263E Rhombus
洛谷题目页面传送门 & CodeForces题目页面传送门给定一个$n$行$m$列的矩阵,第$i$行$j$列为$a_{i,j}$,以及一个常数$s\in\left[1,\left\lceil ...

linux上systemctl使用
转载:https://www.cnblogs.com/zdz8207/p/linux-systemctl.html Linux服务器,服务管理--systemctl命令详解,设置开机自启动 syete ...

前端Js复习-前后台的搭建-结合Bootstrap和JQuery搭建vue项目
流式布局思想 """ 页面的尺寸改变动态改变页面布局,或是通过父集标签控制多个子标签,这种布局思想就称之为 - 流式布局思想 1) 将标签宽高设置成百分比,就可以随屏幕 ...

学习ECC及Openssl下ECC生成密钥的部分源代码心得
一.ECC的简介椭圆曲线算法可以看作是定义在特殊集合下数的运算,满足一定的规则.椭圆曲线在如下两个域中定义:Fp域和F2m域. Fp域,素数域,p为素数: F2m域:特征为2的有限域,称之为二元域或 ...

mplayer 的安装步骤
编译mplayer: make distclean ./configure --disable-png --disable-gif //加后面的是因为编译时出错了,也可以直接 ./con ...

CHINA SHOP 2019 | 奇点云“云+端”产品及解决方案赋能线下零售
第二十一届中国零售业博览会(CHINA SHOP) 在山东青岛世界博览城盛大开幕作为CHINA SHOP的老朋友奇点云自然不会缺席 China Shop逛展直击灵魂“双拷问”: No.1 今年CH ...

AI动作捕捉技术，会让制造业大幅度降低成本吗？
现代动作捕捉系统应该是起源于100多年前的动画工业,通过一种叫做"动态遮罩或影像描摹"的技术,动画师们可以获得流畅的.栩栩如生的动作:后来到了20世纪80年代,动画师们设计出带有活 ...

Django+Celery框架自动化定时任务开发

Django+Celery框架自动化定时任务开发的更多相关文章

随机推荐

热门专题