分 时 日 月 周 命令(最好用绝对路径)比如: * * * * * rm -fr /mnt/* //每分钟执行一次对/mnt目录下文件的删除*/2 * * * * rm -fr /mnt/* //每隔两分钟执行一次*/2 08-17 1,15 3-5 3 rm -fr /mnt/* //在3-5月的每周三的1号和15号的8点到17点每隔两分钟执行 查看 crontab -e https://crontab.guru/#13_*/1_*_*_* https://www.cnblogs.com/p…

Django+小程序技术打造微信小程序助手 (一个人学习或许会很枯燥,但是寻找更多志同道合的朋友一起,学习将会变得更加有意义✌✌) 从零到一的完整项目开发实战过程,项目开发聚焦重要知识点,先原理后实战! 第1章 Django2.0+微信小程序+高可用部署上线,带你打通全栈开发 1-1 Django+小程序技术打造微信小程序助手试看 第2章 小程序开发入门,从零入手小程序开发的流程与网络.存储等常见API 从几个方面介绍小程序开发相关的内容,包括小程序开发者账号注册.小程序开发流程.小程序开发规范…

Django 与 Tornado 各自的优缺点Django优点: 大和全(重量级框架)自带orm,template,view 需要的功能也可以去找第三方的app注重高效开发全自动化的管理后台(只需要使用起ORM,做简单的定义,就能自动生成数据库结构,全功能的管理后台)session功能缺点: template不怎么好用(来自自身的缺点)数据库用nosql不方便(来自自身的缺点)如果功能不多,容易臃肿 Tornado优点: 少而精(轻量级框架)注重性能优越,速度快解决高并发(请求处理是基于回调的非…

参考资料: https://github.com/yueyongyue/saltshaker http://blog.sina.com.cn/s/blog_b21312340102whzw.html saltshaker是saltstack的可视化GUI界面. saltshaker: GUI For SaltStack 此安装说明适用于2.0版本 saltshaker 环境搭建 Ubuntu 14.04.3 LTSsaltshaker 环境搭建 Centos6.x 1.安装pip 详细文档及使用…

最近需要考虑如何在django环境中跑定时任务. 这个在  stackoverflow 也有对应的 讨论 , 方法也有不少, 这边简单尝试和总结下. 假设我们现在的定期任务就是睡眠  n 秒, 然后往数据库里面写一条记录, 记录这个任务的起始以及结束时间, 并且我们  不关心 该任务的返回结果. 项目名称为  mmtest , 应用名称为  mma_cron (说实话我也不知道自己怎么取这样的名称….), 数据库使用 sqlite , model代码如下: mma_cron/models.py…

目的是想通过定时任务来执行一次数据统计,本来可以用celery来做,但是想着这个项目整个就没用到异步的地方,所以决定用crontab来做.之前做过数据库的热备份,想来用该没啥问题,但是现实打脸啪啪响. 具体现象是: 通过注册新的定时任务执行shell脚本,脚本中执行Python脚本,然后Python脚本一直没有执行效果. 这不应该呀,然后写了个普通的helloworld类型的脚本,发现跑着没问题. 那就应该是环境问题,然后按照通常的方案来处理,在Python文件中添加path路径,还是不行. 最…

一.编写自定义django-admin命令 注:利用django-admin自定义命令我们可以ORM框架对model进行操作,如:定时更新数据库,检测数据库状态..... Django为项目中每一个应用下的management/commands目录中名字没有以下划线开始的Python模块都注册了一个manage.py命令,例如: polls/ __init__.py models.py management/ __init__.py commands/ __init__.py _private.…

最近用Django写了一个项目,但是有一个地方需要应用在后台自动定期执行检查,并存入数据库,如果单纯的写Python程序的话不能很好的跟django的结合在一起,写起来也和麻烦,查找资料的时候发现了django有一个功能,就是django command,通过这个就可以使用django的manage.py去执行命令了. 参考:资料1   资料2   资料3 实现思路: 1.首先把需要自动执行的django method写成django command 2.将自己定义的django command…

前言 django的调试模式配置简单,用于测试十分方便,但众所周知,这个只适合于调试,生产上运行效率十分低下. 后来考虑用nginx+uwsgi的模式进行,但之前配置过apache+wsgi的方式,感觉配置起来十分繁琐,后来发现了神器gunicorn,兼顾性能的同时,配置起来像django调试模式一样简单,它有点类似于一个容器(类似tomcat),但无法处理静态资源,所以必须要有apache或者nginx的配合(动静分离). 考虑环境的整洁性,将整个项目先运行在virtualenv上. 一.vi…

实现思路:1.首先把需要自动执行的django method写成django command2.将自己定义的django command添加到cron中使用cron服务实现定期执行 Part1 在django工程中添加自定义的django command1.我们自己建立的application叫做myapp,首先在这个app目录下,我们需要新建management目录,这个目录里应该包括:__init__.py(内容为空,用于打包)和commands目录,然后在commands目录下包括:__i…

原文连接:http://blog.csdn.net/zc02051126/article/details/20480289 come from http://www.360doc.com/content/12/1010/14/7492958_240641022.shtml 设置了一个crontab 30 0 * * * cd /home/work/user/huangbx/research/getfeature/data/current; sh resample.sh &>/dev/null…

原文链接: http://www.weiguda.com/blog/73/ 本篇博文主要介绍在开发环境中的celery使用,请勿用于部署服务器. 许多Django应用需要执行异步任务, 以便不耽误http request的执行. 我们也可以选择许多方法来完成异步任务, 使用Celery是一个比较好的选择, 因为Celery 有着大量的社区支持, 能够完美的扩展, 和Django结合的也很好. Celery不仅能在Django中使用, 还能在其他地方被大量的使用. 因此一旦学会使用Celery,…

要在django项目中定期执行任务,比如每天一定的时间点抓取数据,刷新数据库等,可以参考stackoverflow的方法,先编写一个manage.py命令,然后使用crontab来定时执行这个命令. 定制manage.py命令 app可以使用manage.py注册自己的命令,比如要在polls这个app中定制一个closepoll命令,要先向polls文件夹中添加一个management/commands的目录: polls/ __init__.py models.py management/…

crontab如果不注意的话早晚会出问题,而且这种问题一旦出一次,就会永远记得,因为这种问题很折腾人.                                                                                                          ——某前辈 设置了一个crontab30 0 * * * cd /home/work/user/huangbx/research/getfeature/data/current; sh…

update.py import os import sys import django sys.path.append(r'C:\Users\Administrator\PycharmProjects\s6day109') os.chdir(r'C:\Users\Administrator\PycharmProjects\s6day109') os.environ.setdefault("DJANGO_SETTINGS_MODULE", "s6day109.settings…

1  Celery简介 Celery是异步任务队列,可以独立于主进程运行,在主进程退出后,也不影响队列中的任务执行. 任务执行异常退出,重新启动后,会继续执行队列中的其他任务,同时可以缓存停止期间接收的工作任务,这个功能依赖于消息队列(MQ.Redis). 1.1  Celery原理 Celery的架构由三部分组成,消息中间件(message broker),任务执行单元(worker)和任务执行结果存储(task result store)组成. 消息中间件:Celery本身不提供消息服务,但…

事情是这样的,大概也就几万注册用户的站点(使用django1.6), session 存储在关系型数据库,这次上线之后发现session表几十万数据了,过期session没有被自动删除 思考 官网 session文档 django的 session是可以存储在多种介质下的,db,文件,cache(缓存也可以定义)都行,也可以使用cookie base的session 默认的序列化方式是BaseJSONSerializer,1.5和以前的版本使用的是pickle 默认的session时间是2周,1…

1. python生产环境, 多层modules 导入问题: 多个modules 如何导入不同级别的包: 在每个modules下新建 __init__.pyimport os, sys dir_mytest = os.path.dirname(os.path.abspath(__file__))      # crontab 跑时 os.getcwd() 只会取到用户的路径....sys.path.insert(0, dir_mytest+"tmp\\t1") #sys.path.in…

django 日志 四大块,格式器,过滤器,处理器,日志管理器 LOGGING = { 'version': 1, 'disable_existing_loggers': True, 'formatters': {# 日志格式 'standard': { 'format': '%(asctime)s [%(threadName)s:%(thread)d] ' '[%(pathname)s:%(funcName)s:%(lineno)d] [%(levelname)s]- %(message)s'…

0.基本概念 & 实现原理  定时任务基本概念: 调度器:负责管理Quartz应用运行时环境,用于调度定时任务. 定时任务:按照某种时间规则,被调度的任务. a.从有无状态来说,有以下两种: 有状态任务:每次执行的任务是同一个实例,不能被并行执行:如果该任务的执行时间超过下次触发的时刻,那么下次的触发将不会有作用.比如,一个有状态任务执行时间是5分钟,它的间隔时间是3分钟:如果正在执行的时候,下次触发时刻到达,则不会被执行. 无状态任务:每次执行任务都是一个新的实例,可以并行执行. b.从执行的…

调试orm 在django项目根目录下创建文件test_orm.py,它和manage.py是同级的 import os if __name__ == "__main__": # 设置django环境 os.environ.setdefault("DJANGO_SETTINGS_MODULE", "项目名称.settings") import django django.setup() from app01 import models obj =…

celery是什么 1 celery是一个简单,灵活且可靠的,处理大量消息的分布式系统 2 专注于实时处理的异步任务队列 3 同时也支持任务调度 执行流程 Celery 基本使用 tasks.py import time from celery import Celery # 消息中间件 broker = 'redis://localhost:6379/1' # 存取任务执行的结果 backend = 'redis://localhost:6379/2' app = Celery('my_tas…

转自[https://simpleisbetterthancomplex.com/series/2017/10/16/a-complete-beginners-guide-to-django-part-7.html] Django的初学者指南 - 第7部分 2017年10月16日 23分钟阅读 评论 37388 意见 第7部分,共7部分 苹果电脑 视窗 Linux的 7/7系列   介绍 欢迎来到我们教程系列的最后一部分!在本教程中,我们将把Django应用程序部署到生产服务器.我们还将为我们的…

前言 一.docker 1.docker是什么? Docker的英文本意是“搬运工”,Docker搬运的是集装箱(Container)可以成为容器,我可以把写的Django的WEB应用以及Python依赖库打包进一个可移植的容器里传播,解决了应用部署的平台兼容性问题,同时她也是一种轻量级的虚拟化技术可以做到秒级启动一个容器(类似小虚拟机,区别启动快.可以传播): j 2.docker和镜像的关系 镜像是docker 创建.启动一个容器的文件系统,这个文件系统包含依赖包.命令工具.APP等: 3.…

Django教程 Python一直是我最喜欢的语言,在Django和Tornado之间我选择了前者,没有特别的原因,网上人云亦云的,肯定不会有一方离另一方差很远,我就直接去看了看Github上两个项目的活跃度,所以选择了前者. 应该说Django坚持自己造轮子,确实为开发者节约了不少的时间,我很看重它的扩展功能,packages数量十分丰富.Django采用的是最流行也是我最熟悉的MVC设计模式,虽然在之前的一个PHP(Laravel)项目中也是采用的MVC模式,但一直都没怎么吃透,始终在各层分…

异步任务介绍 在写项目过程中经常会遇到一些耗时的任务, 比如:发送邮件.发送短信等等~.这些操作如果都同步执行耗时长对用户体验不友好,在这种情况下就可以把任务放在后台异步执行 celery就是用于处理异步任务的框架,celery能完成的功能远不止异步任务,还有一个很常用的功能定时任务 架构图 Celery包含如下组件: Celery Beat:任务调度器,Beat进程会读取配置文件的内容,周期性地将配置中到期需要执行的任务发送给任务队列. Celery Worker:执行任务的消费者,通常会在多…

Django Celery 配置实践 所需环境 python 3.5.2 rabbitmq 安装所需的包 pip install -r requirements.txt QuickStart 创建Django项目 创建一个名为proj的Django项目 django-admin startproject proj 创建Django App 创建一个用于演示的django app,这里名为demo django-admin startapp demo 在创建的app中,增加tasks.py文件,用…

昨日内容回顾 1. 内容回顾 1. VueX VueX分三部分 1. state 2. mutations 3. actions 存放数据 修改数据的唯一方式 异步操作 修改state中数据的步骤: 1. 页面上交互 触发数据的变化 2. 去后端获取新的数据(异步操作 ajax请求) 3. dispatch('获取新数据') --> 放在actions中 4. 拿到了新数据了 5. 去更新state中对应的数据(同步操作 state.noteList=[xx,xx,xx])--> 放在muta…

一.概述 已经写好了一个Django项目,需要将这个项目用docker封装一个镜像,使用k8s发布! 在封装并运行的过程中,发现了很多问题,这里会一一介绍! 二.时区问题 采用的是镜像是 ubuntu:16.04 默认的时区是UTC,比中国时间,晚了8个小时! 那么因此,需要将默认的时区给覆盖掉! 默认是没有安装 tzdata,因此没有 /usr/share/zoneinfo 目录! 安装tzdata,使用命令 apt-get install -y tzdata 设置时区为 上海,使用以下命令…

本文主要知识点: 1.使用Django的signals来获取Model的新建/删除操作更新 2.使用数据库的select for update来正确处理并发的数据库操作 3.使用redis的sorted set来缓存计数器的修改操作 一,起始 我们要实现消息未读记录,常规做法: class Notification(models.Model): """一个简化过的Notification类,拥有三个字段: - `user_id`: 消息所有人的用户ID - `has_read…