Python定时任务如何实现自动化
创始人
2024-11-19 15:02:45
0次

1. 安装cron

基本上所有的Linux发行版在默认情况下都预安装了cron工具。

即使未预装cron,也很简单,执行几条简单的命令就可手动安装

# 检查是否已经预装了cron
service cron status复制代码

安装并启动服务

安装:apt-get install cron
启动/停止/重启:service cron start/stop/restart
查询当前任务:crontab -l复制代码

2. 安装检查

安装完成后检查一下是否安装成功,同样使用 status命令查看

出现如下提示表示安装成功:

Python定时任务如何实现自动化

另外,在ubuntu下可能会出现这样的提示:

Python定时任务如何实现自动化

这个也表示可以正常使用

3. cron用法

有几个关于cron的简单用法可以了解一下,后面也会通过一个案例详细介绍如何使用

首先,列出当前用户计划的cron作业:

crontab -l复制代码

查看其它用户的cron作业:

crontab –l –u username复制代码

移除已经计划的cron作业:

crontab –r复制代码

4. 调度crontab计划

首先,通过如下命令添加或更新crontab中的任务

Python定时任务如何实现自动化

第一次进入会要求你选择编辑器,这个根据自己的习惯选择。

选择好之后会进入到这样的一个界面:

Python定时任务如何实现自动化

用过vim的同学应该对这个界面不陌生,类似的操作:按A键开始编辑,按ESC输入wq保存并退出

重点是最下面的一段内容:

m h dom mon dow commmand复制代码

这个其实就是crontab调度作业的一个使用介绍,可以用来设置定时任务。

具体一点的语法是这样的:

m h dom mon dow command
* * * * * command
- - - - - -
| | | | | |
| | | | | --- 预执行的命令
| | | | ----- 表示星期0~7(其中星期天可以用0或7表示)
| | | ------- 表示月份1~12
| | --------- 表示日期1~31
| ----------- 表示小时1~23(0表示0点)
------------- 表示分钟1~59 每分钟用*或者 */1表示复制代码
举几个简单的应用案例:
  • 每天 02:00 执行任务
0 2 * * * command复制代码
  • 每天 5:00和17:00执行任务
0 5,17 * * * command复制代码
  • 每 10min 执行一次任务
*/10 * * * * command复制代码
  • 在特定的某几个月的周日 17:00 执行任务
0 17 * jan,may,aug sun command复制代码

差不多常用的就这些,更多的使用案例还可以参考这个链接:http://linux.51yip.com/search/crontab

上面案例中的command 表示你具体需要执行的任务,例如打印一段话:

echo "Hello xiaoyi" >> /tmp/test.txt 
复制代码

或者将这段话输出到txt中:

echo "Hello xiaoyi" >> /tmp/test.txt 
复制代码

或者是你需要执行一个Python脚本:

python demo.py filepath复制代码

后面的filepath表示输入的参数args,这个可能有的同学会用到,例如下面的案例中需要输入文件下载路径。

5. 实战

上面的都搞清楚了,就可以开始今天的重头戏了。

首先我们需要每天从ftp服务器中下载最新的任务数据,将数据下载到本地后通过Python进行数据汇总统计,最后将结果存入数据库中,如果期间某个环节出现问题则发送告警邮件。

① Python脚本

首先需要Python脚本完成以下功能:

  • 从数据库中获取最新数据日期
  • 从ftp中下载最新数据到本地
  • 对本地最新数据进行汇总统计
  • 统计结果存入数据库汇总
  • 邮件通知

上面这个流程大致的伪代码是这样的:

if __name__ == '__main__':    """获取最新数据日期"""
    latest_date = get_max_date()    # 以最新日期为名创建文件夹
    download_dir = os.path.join(sys.argv[1], latest_date)    if not os.path.exists(download_dir):
        os.makedirs(download_dir)        
    """从ftp中下载最新数据"""
    download_file(latest_date, download_dir)    """处理最新数据并保存"""
    process_data(latest_date, download_dir)复制代码

邮件监控可以在加一个try catch的异常捕获,有异常发生的时候则发送邮件

Python编辑邮件内容并发送以前也有写过,可以参考下面这个:Python邮件发送

②编写cron任务

打开crontab,编辑如下内容到最后一行,保存并退出

crontab是会自动实时更新任务列表的,如果不放心也可以通过restart命令重启cron 服务【参考文章开头】

Python定时任务如何实现自动化

这里有个小建议,所有的路径都填写绝对路径

③ 效果监控

如果Python代码没有问题,任务会定时执行。

这里建议可以把自己的command单独在控制台运行下,没有问题的时候再写进到cron任务列表红。

最终小一的定时任务运行截图如下:

最下面是ftp文件下载,上面是数据汇总统计

Python定时任务如何实现自动化

相关内容

热门资讯

空调连续工作多久需要停机休息 空调连续工作的时间取决于多个因素,包括空调的型号、功率、使用环境和维护情况等。一般来说,空调可以连续...
空调哪个符号是除湿的 空调除湿功能通常用一个水滴形状的符号表示。不同品牌和型号的空调遥控器可能会有所差异,但一般来说,除湿...
格力空调多长时间加一次氟利昂 1、一般情况下,空调对氟利昂的使用量是非常小的,所以在空调使用了四年左右的时候再考虑加也没问题。2、...
空调用多长时间需要加氟一次 一般情况下是五年。当出现以下这几种情况时,空调才需要加氟。1、空调的室内机和室外机各有两个接口,当接...
格调生活·C标思享荟:卡萨帝在... 9月12日的郑州龙湖金融岛,夜风轻拂,灯光璀璨。“C标时刻共传奇——卡萨帝思享荟暨20周年品牌盛典郑...
品牌价值破千亿、高端份额持续领... 9月12日,“C标时刻共传奇——卡萨帝思享荟暨20周年品牌盛典郑州站”在郑州龙湖金融岛举办。2026...
空调主板坏了修800还是换新的 空调主板坏了是修还是换新,需要考虑多个因素,以下是一些建议:1. 维修成本:如果维修费用较低,比如 ...
空调开多久需要休息多长时间 问题:空调开多久需要休息多长时间回答:1、在使用空调的过程中,一般空调开7~8个小时左右需要休息2~...
中央空调多长时间清洗一次 1、一般空调开机前清洗一次即可,空调开机中间时段再清洗一次,空调关机时清洗一次,这样比较合理。2、空...
中央空调氟利昂多久加一次 看空调制热和制冷程度,很多人的观点认为氟利昂必须一年放一次,其实这个观点是错误的,理解上面有点偏差,...