zoukankan      html  css  js  c++  java
  • Python 任务调度模块 – APScheduler

    APScheduler是一个Python定时任务框架,使用起来十分方便。提供了基于日期、固定时间间隔以及crontab类型的任务,并且可以持久化任务、并以daemon方式运行应用。


            在APScheduler中有四个组件: 

            触发器(trigger)包含调度逻辑,每一个作业有它自己的触发器,用于决定接下来哪一个作业会运行。除了他们自己初始配置意外,触发器完全是无状态的。简单说就是应该说明一个任务应该在什么时候执行。 

            作业存储(job store)存储被调度的作业,默认的作业存储是简单地把作业保存在内存中,其他的作业存储是将作业保存在数据库中。一个作业的数据将在保存在持久化作业存储时被序列化,并在加载时被反序列化。调度器不能分享同一个作业存储。 

            执行器(executor)处理作业的运行,他们通常通过在作业中提交制定的可调用对象到一个线程或者进城池来进行。当作业完成时,执行器将会通知调度器。 

            调度器(scheduler)任务控制器:通过配置executor、jobstore、trigger,使用线程池(ThreadPoolExecutor默认值20)或进程池(ProcessPoolExecutor 默认值5)并且默认最多3个(max_instances)任务实例同时运行,实现对job的增删改查等调度控制

            你需要选择合适的调度器,这取决于你的应用环境和你使用APScheduler的目的。通常最常用的两个: 

            BlockingScheduler:当调度器是你应用中唯一要运行的东西时使用。 

            BackgroundScheduler:当你不运行任何其他框架时使用,并希望调度器在你应用的后台执行


    作业存储

            支持4中作业存储,分别是:MemoryJobStore(存储在内存中)、sqlalchemy(关系型数据库)、mongodb(文档数据库)、redis(内存型键值对数据库)

    触发方式

            date:固定日期触发器:任务只运行一次,运行完毕自动清除;若错过指定运行时间,任务不会被创建

            interval:时间间隔触发器,每个一定时间间隔执行一次。

            cron:cron风格的任务触发。

     
     
     
     

    作业操作

            1. 添加作业:上面是通过add_job()来添加作业,另外还有一种方式是通过scheduled_job()修饰器来修饰函数。

            @sched.scheduled_job('cron', id='my_job_id', day='last sun')

            def some_decorated_task():

                    print("I am printed at 00:00:00 on the last Sunday of every month!")

            2. 移除作业

            job = scheduler.add_job(myfunc,'interval', minutes=2)

            job.remove()

            Same,using an explicit job ID:

            scheduler.add_job(myfunc,'interval', minutes=2, id='my_job_id')

            scheduler.remove_job('my_job_id')

            3. 暂停和恢复作业

            暂停作业:

                –apscheduler.job.Job.pause()

                –apscheduler.schedulers.base.BaseScheduler.pause_job()

            恢复作业:

                –apscheduler.job.Job.resume()

                –apscheduler.schedulers.base.BaseScheduler.resume_job()

            4. 获得job列表

            获得调度作业的列表,可以使用get_jobs()来完成,它会返回所有的job实例。或者使用print_jobs()来输出所有格式化的作业列表。

            5. 修改作业

            def some_decorated_task():

                print("I am printed at 00:00:00 on the last Sunday of every month!")

            6. 关闭调度器

            默认情况下调度器会等待所有正在运行的作业完成后,关闭所有的调度器和作业存储。如果你不想等待,可以将wait选项设置为False

            scheduler.shutdown()

            scheduler.shutdown(wait=False)


    作业运行的控制

            add_job的第二个参数是trigger,它管理着作业的调度方式。它可以为date, interval或者cron。对于不同的trigger,对应的参数也相同。




  • 相关阅读:
    MySQL 分库分表方案
    MySQL高性能优化实战总结
    MySQL太慢?试试这些诊断思路和工具
    Get MySQL这5个优化技巧
    一次MySQL两千万数据大表的优化过程,三种解决方案
    MySQL 常用30种SQL查询语句优化方法
    掌握 MySQL 这 19 个骚操作,效率至少提高3倍
    分分钟解决 MySQL 查询速度慢与性能差
    总结 | 慢 SQL 问题经验总结
    MySQL主从延时这么长,要怎么优化?
  • 原文地址:https://www.cnblogs.com/xiaozengzeng/p/12159231.html
Copyright © 2011-2022 走看看