最近接到这样一个任务: 定期(每天、每月)向“特定服务器”传输“软件服务”的运营数据,因此这里涉及到一个定时任务,计划使用Python语言添加Crontab依赖写一个定时任务的脚本,实现每天、每月向服务器上传运营数据。

这篇文章是我在实现以上需求过程中,对于Crontab的使用总结。

  • Crontab 概述
  • Crontab 环境搭建
  • Crontab 使用案例(Python)
  • Crontab 使用详解
  • Crontab 操作命令行(Linux)

一、Crontab 概述

Linux环境中,Crontab是一个调度守护进程,可以按分钟、小时、每月的某天、每月、每周的某天来执行特定任务,这些特定的任务被称为 Cron 作业,基于这个特点,Crontab 经常被用于自动执行系统维护与管理

例如:可以使用 Crontab 来自动执行一些重复性的工作,比如定期发送邮件、备份数据库、备份软件运行数据、下载最近的软件补丁等等。

Crontab 文件:

在 Linux 环境中,当我们使用Crontab命令创建cron 作业后,系统中会生成一个 Crontab 文本文件,用于指定 cron 作业的时间表

  • 在基于 Red Hat 的发行版系统,如 CentOS,crontab 该文件的存储在/var/spool/cron/目录下;
  • Debian 、Ubuntu等系统中,该文件存储在/var/spool/cron/crontabs/目录下。

如下所示/var/spool/cron/目录下的Crontab文件:

注:

虽然我们了解到了 Crontab 的文件路径,但并不建议手动编辑该文件,官方推荐在终端使用crontab命令操作该文件。

二、Crontab 环境搭建

当然在正式介绍环境搭建之前,先向朋友们汇报一下我的虚拟机环境与使用的Python版本。

我使用的虚拟机环境为CentOS 7



Python版本为Python 3.11.1

  • Centos 安装 cronie
  • Python 安装 python-crontab 依赖

2.1 Centos 安装 cronie

在Linux中使用Crontab之前,需要先确保安装了Crontab,安装命令如下:

# Centos 安装 cronie
yum install cronie
# 查看 Crontab 任务
crontab -l

Centos 7安装 Crontab:

2.2 Python 安装 python-crontab

在Python中使用 crontab ,还需要下载其对应的依赖包,下载安装方式如下:

# 安装Crontab
pip3 install python-crontab

Python 安装 Crontab 依赖:

若安装过程中遇到SSH支持问题相关的错误提醒,可更换如下方式进行安装:

# 安装Pycrypto:(豆瓣源)
pip3 install python-crontab -i http://pypi.douban.com/simple/ --trusted-host pypi.douban.com

三、Python中使用Crontab

Crontab 在 Python中的使用相对简单,我们采用如下方式创建定时任务。


from crontab import CronTab # 创建linux系统当前用户的crontab(当然也可以创建其他用户的,但需要对应的权限,如:user='root')
my_user_cron = CronTab(user=True)
# ~~~~~每日任务~~~~~
# 创建任务(指定绝对路径)
daily_job = my_user_cron.new(
command='python3 /home/workspace/Python3ForSftpjy5g/sftp_daily.py >> /home/workspace/Python3ForSftpjy5g/assets/output/log_crontab.txt')
# "每天凌晨2点" 执行一次 sftp_daily.py
daily_job.setall('0 2 * * *')
# ~~~~~每月任务~~~~~
# 创建任务(指定绝对路径)
monthly_job = my_user_cron.new(
command='python3 /home/workspace/Python3ForSftpjy5g/sftp_monthly.py >> /home/workspace/Python3ForSftpjy5g/assets/output/log_crontab.txt')
# "每月1日凌晨2点" 执行一次 sftp_monthly.py
monthly_job.setall('0 2 1 * *')
# 将crontab写入linux系统配置文件
my_user_cron.write() # 命令行输入:python3 crontab_job.py 执行该py脚本,则定时任务设定完毕!
# 此刻在Linux终端 输入 contrab -l 可查看所有定时任务。

四、Crontab 使用详解

在crontab文件与crontab命令中,每一行都包含由空格分隔的5个字段,其后跟要执行的定时任务。

4.1 crontab五个字段含义

这里举了几个简单的例子,帮助大家理解这五个字段的含义:

0 * * * *   # 每小时(整点)执行一次
0 1 * * * # 每天凌晨1点执行一次
0 1 * * 0 # 每周星期日凌晨1点执行一次
0 1 1 * * # 每月1号1点执行一次
0 1 1 1 * # 每年1月1日1点执行一次

4.2 分隔与连字符用法

crontab的五个字段可能包含一个或多个值字段内由逗号分隔或由连字符分隔

  • * 星号运算符表示任何值或始终:

    如果您在 Hour 字段中有星号符号,则表示该任务将每小时执行一次。
  • , 逗号运算符允许指定要重复的值的列表:

    例如,如果1,3,5设置在“小时”字段中,任务将在凌晨1点、凌晨3点、凌晨 5点执行。
  • -连字符运算符允许指定一个值范围:

    入力,如果1-5设置在“星期”字段中,任务将从星期一到星期五运行。
  • /斜杠运算符允许指定将在它们之间的特定间隔内重复的值。

    例如,如果*/4设置在“小时”字段中,则表示该操作将每四个小时执行一次;其与0,4,8,12,16,20的设定含义相同。

这里举了几个简单的例子,帮助大家理解分隔与连字符用法:

*/5 * * * *    # 每5分钟执行一次
0 8-16 * * * # 每天从上午8点到下午4点整点执行一次
0 15 * * 1-5 # 周一到周五每天15:00执行一次
0 3 1,15 * * # 每个月1号、15号凌晨3点执行一次

五、Linux Crontab 命令行

Linux Crontab 命令行简述如下:

  • crontab -e 编辑 crontab 文件,如果不存在则创建一个。
  • crontab -l 显示 crontab 文件内容。
  • crontab -r 删除当前的 crontab 文件。
  • crontab -i 删除您当前的 crontab 文件,并在删除前提示。

参考

python-crontab:

https://pypi.org/project/python-crontab/

使用 Crontab 设置 Cron 任务:

https://linuxize.com/post/scheduling-cron-jobs-with-crontab/

= THE END =

文章首发于公众号”CODING技术小馆“,如果文章对您有帮助,欢迎关注我的公众号。

一文详解 Linux Crontab 调度任务的更多相关文章

  1. 一文详解 Linux 系统常用监控工一文详解 Linux 系统常用监控工具(top,htop,iotop,iftop)具(top,htop,iotop,iftop)

    一文详解 Linux 系统常用监控工具(top,htop,iotop,iftop)     概 述 本文主要记录一下 Linux 系统上一些常用的系统监控工具,非常好用.正所谓磨刀不误砍柴工,花点时间 ...

  2. 一文详解 Linux 系统常用监控工具(top,htop,iotop,iftop)

      概 述 本文主要记录一下 Linux 系统上一些常用的系统监控工具,非常好用.正所谓磨刀不误砍柴工,花点时间总结一下是值得的! 本文内容脑图如下: top 命令 top 命令我想大家都挺熟悉吧! ...

  3. Linux进程上下文切换过程context_switch详解--Linux进程的管理与调度(二十一)

    1 前景回顾 1.1 Linux的调度器组成 2个调度器 可以用两种方法来激活调度 一种是直接的, 比如进程打算睡眠或出于其他原因放弃CPU 另一种是通过周期性的机制, 以固定的频率运行, 不时的检测 ...

  4. 详解linux运维工程师入门级必备技能

    详解linux运维工程师入门级必备技能 | 浏览:659 | 更新:2013-12-24 23:23 | 标签:linux it自动化运维就是要很方便的运用各种工具进行管理维护,有效的实施服务器保护 ...

  5. linux下sort命令使用详解---linux将文本文件内容加以排序命令

    转载自:http://www.cnblogs.com/hitwtx/archive/2011/12/03/2274592.html linux下sort命令使用详解---linux将文本文件内容加以排 ...

  6. 从苦逼到牛逼,详解Linux运维工程师的打怪升级之路

    做运维也快四年多了,就像游戏打怪升级,升级后知识体系和运维体系也相对变化挺大,学习了很多新的知识点. 运维工程师是从一个呆逼进化为苦逼再成长为牛逼的过程,前提在于你要能忍能干能拼,还要具有敏锐的嗅觉感 ...

  7. (转)详解Linux中SSH远程访问控制

    详解Linux中SSH远程访问控制 原文:http://blog.51cto.com/dengqi/1260038 SSH:是一种安全通道协议,主要用来实现字符界面的远程登录,远程复制等功能(使用TC ...

  8. 详解Linux运维工程师

    运维工程师是从一个呆逼进化为苦逼再成长为牛逼的过程,前提在于你要能忍能干能拼,还要具有敏锐的嗅觉感知前方潮流变化.如:今年大数据,人工智能比较火……(相对表示就是 Python 比较火) 之前写过运维 ...

  9. 一文详解Hexo+Github小白建站

    作者:玩世不恭的Coder时间:2020-03-08说明:本文为原创文章,未经允许不可转载,转载前请联系作者 一文详解Hexo+Github小白建站 前言 GitHub是一个面向开源及私有软件项目的托 ...

  10. Linux下ps命令详解 Linux下ps命令的详细使用方法

    http://www.jb51.net/LINUXjishu/56578.html Linux下的ps命令比较常用 Linux下ps命令详解Linux上进程有5种状态:1. 运行(正在运行或在运行队列 ...

随机推荐

  1. go-zero docker-compose搭建课件服务(四):生成Dockerfile

    0.转载 go-zero docker-compose 搭建课件服务(四):生成Dockerfile并在docker-compose中启动 0.1源码地址 https://github.com/liu ...

  2. Linux网络管理命令

    Linux网络管理命令 ifconfig 用于配置网卡ip地址信息等网络参数或显示网络接口状态,类似于windows的ipconfig命令. 可以用这个工具来临时性的配置网卡的IP地址.掩码.广播地址 ...

  3. ahk精简自用

    ;9:03 2022/8/20 自用 #NoEnv #Warn #SingleInstance Force ;设工作目录为桌面 SetWorkingDir %A_Desktop% ;托盘提示必须放在热 ...

  4. ML-梯度下降法的详细推导与代码实现

    计算 对于线性回归,梯度下降法的目标就是找到一个足够好的向量\(\theta\),使代价函数\(J(\theta) = \sum_{i=1}^{m}(\hat{y}-y_{i})^{2}\)取得最小值 ...

  5. 所有selenium相关的库

    通过爬虫 获取 官方文档库 如果想获取 相应的库 修改对应配置即可 代码如下 from urllib.parse import urljoin import requests from lxml im ...

  6. OpenMP 教程(一) 深入人剖析 OpenMP reduction 子句

    OpenMP 教程(一) 深入人剖析 OpenMP reduction 子句 前言 在前面的教程OpenMP入门当中我们简要介绍了 OpenMP 的一些基础的使用方法,在本篇文章当中我们将从一些基础的 ...

  7. js高级之对象高级部分

    基于尚硅谷的尚硅谷JavaScript高级教程提供笔记撰写,加入一些个人理解 github源码 博客下载 对象的创建模式 Object构造函数模式 套路: 先创建空Object对象, 再动态添加属性/ ...

  8. Day09:switch——case结构的使用详解

    switch--case结构的使用详解 什么是switch--case结构 他也是一种多选择结构 switch--case结构是类于if--else的语法,通过比较而输出对应的内容: 通俗的讲,好比我 ...

  9. C#在Xp系统执行.exe程序的报错怎么查看原因

    我的电脑---->管理---->事件查看器----->应用程序,查看错误来源

  10. C#面试题基础

    1.什么是GAC,他的作用是什么? 我的这篇文章有详细的介绍 https://www.cnblogs.com/zxtang/p/14313273.html 2.描述一个被protected inter ...