定時任務框架APScheduler學習詳解

APScheduler簡介

在日常的工做中幾乎有一半的功能模塊都須要定時任務來推進,例如項目中有一個定時統計程序,定時爬出網站的URL程序,定時檢測釣魚網站的程序等等,都涉及到了關於定時任務的問題,第一時間想到的是利用time模塊的time.sleep()方法使程序休眠來達到定時任務的目的,雖然這樣也能夠,可是總以爲不是那麼的專業,^_^因此就找到了python的定時任務模塊APScheduler:python

APScheduler基於Quartz的一個Python定時任務框架,實現了Quartz的全部功能,使用起來十分方便。提供了基於日期、固定時間間隔以crontab類型的任務,而且能夠持久化任務。基於這些功能,咱們能夠很方便的實現一個python定時任務系統git

安裝

一、利用pip進行安裝

$ pip install apscheduler

二、源碼安裝(https://pypi.python.org/pypi/APScheduler/)

$ python setup.py install

APScheduler有四種組成部分:

觸發器(trigger)包含調度邏輯,每個做業有它本身的觸發器,用於決定接下來哪個做業會運行。除了他們本身初始配置意外,觸發器徹底是無狀態的。數據庫

做業存儲(job store)存儲被調度的做業,默認的做業存儲是簡單地把做業保存在內存中,其餘的做業存儲是將做業保存在數據庫中。一個做業的數據講在保存在持久化做業存儲時被序列化,並在加載時被反序列化。調度器不能分享同一個做業存儲。框架

執行器(executor)處理做業的運行,他們一般經過在做業中提交制定的可調用對象到一個線程或者進城池來進行。看成業完成時,執行器將會通知調度器。函數

調度器(scheduler)是其餘的組成部分。你一般在應用只有一個調度器,應用的開發者一般不會直接處理做業存儲、調度器和觸發器,相反,調度器提供了處理這些的合適的接口。配置做業存儲和執行器能夠在調度器中完成,例如添加、修改和移除做業。 網站

簡單應用:

import time
from apscheduler.schedulers.blocking import BlockingScheduler

def my_job():
    print time.strftime('%Y-%m-%d %H:%M:%S', time.localtime(time.time()))

sched = BlockingScheduler()
sched.add_job(my_job, 'interval', seconds=5)
sched.start()

上面的例子表示每隔5s執行一次my_job函數,輸出當前時間信息spa

操做做業

1. 添加做業

上面是經過add_job()來添加做業,另外還有一種方式是經過scheduled_job()修飾器來修飾函數線程

import time
from apscheduler.schedulers.blocking import BlockingScheduler

sched = BlockingScheduler()

@sched.scheduled_job('interval', seconds=5)
def my_job():
    print time.strftime('%Y-%m-%d %H:%M:%S', time.localtime(time.time()))

sched.start()

2. 移除做業

job = scheduler.add_job(myfunc, 'interval', minutes=2)
job.remove()
#若是有多個任務序列的話能夠給每一個任務設置ID號,能夠根據ID號選擇清除對象,且remove放到start前纔有效
sched.add_job(myfunc, 'interval', minutes=2, id='my_job_id')
sched.remove_job('my_job_id')

3. 暫停和恢復做業

 暫停做業:3d

apsched.job.Job.pause()
apsched.schedulers.base.BaseScheduler.pause_job()

 恢復做業:code

apsched.job.Job.resume()
apsched.schedulers.base.BaseScheduler.resume_job()

4. 得到job列表

 得到調度做業的列表,可使用get_jobs()來完成,它會返回全部的job實例。或者使用print_jobs()來輸出全部格式化的做業列表。也能夠利用get_job(任務ID)獲取指定任務的做業列表

job = sched.add_job(my_job, 'interval', seconds=2 ,id='123')
print sched.get_job(job_id='123')
print sched.get_jobs()

5. 關閉調度器

 默認狀況下調度器會等待全部正在運行的做業完成後,關閉全部的調度器和做業存儲。若是你不想等待,能夠將wait選項設置爲False。

sched.shutdown()
sched.shutdown(wait=False)

 做業運行的控制(trigger)

add_job的第二個參數是trigger,它管理着做業的調度方式。它能夠爲date, interval或者cron。對於不一樣的trigger,對應的參數也相同。

(1). cron定時調度(某必定時時刻執行)

(int|str) 表示參數既能夠是int類型,也能夠是str類型
(datetime | str) 表示參數既能夠是datetime類型,也能夠是str類型

year (int|str) – 4-digit year -(表示四位數的年份,如2008年)
month (int|str) – month (1-12) -(表示取值範圍爲1-12月)
day (int|str) – day of the (1-31) -(表示取值範圍爲1-31日)
week (int|str) – ISO week (1-53) -(格里曆2006年12月31日能夠寫成2006年-W52-7(擴展形式)或2006W527(緊湊形式))
day_of_week (int|str) – number or name of weekday (0-6 or mon,tue,wed,thu,fri,sat,sun) - (表示一週中的第幾天,既能夠用0-6表示也能夠用其英語縮寫表示)
hour (int|str) – hour (0-23) - (表示取值範圍爲0-23時)
minute (int|str) – minute (0-59) - (表示取值範圍爲0-59分)
second (int|str) – second (0-59) - (表示取值範圍爲0-59秒)
start_date (datetime|str) – earliest possible date/time to trigger on (inclusive) - (表示開始時間)
end_date (datetime|str) – latest possible date/time to trigger on (inclusive) - (表示結束時間)
timezone (datetime.tzinfo|str) – time zone to use for the date/time calculations (defaults to scheduler timezone) -(表示時區取值)

參數的取值格式:

例子:

#表示2017年3月22日17時19分07秒執行該程序
sched.add_job(my_job, 'cron', year=2017,month = 03,day = 22,hour = 17,minute = 19,second = 07)

#表示任務在6,7,8,11,12月份的第三個星期五的00:00,01:00,02:00,03:00 執行該程序
sched.add_job(my_job, 'cron', month='6-8,11-12', day='3rd fri', hour='0-3')

#表示從星期一到星期五5:30(AM)直到2014-05-30 00:00:00
sched.add_job(my_job(), 'cron', day_of_week='mon-fri', hour=5, minute=30,end_date='2014-05-30')

#表示每5秒執行該程序一次,至關於interval 間隔調度中seconds = 5
sched.add_job(my_job, 'cron',second = '*/5')

(2). interval 間隔調度(每隔多久執行)

weeks (int) – number of weeks to wait
days (int) – number of days to wait
hours (int) – number of hours to wait
minutes (int) – number of minutes to wait
seconds (int) – number of seconds to wait
start_date (datetime|str) – starting point for the interval calculation
end_date (datetime|str) – latest possible date/time to trigger on
timezone (datetime.tzinfo|str) – time zone to use for the date/time calculations

例子:

#表示每隔3天17時19分07秒執行一次任務
sched.add_job(my_job, 'interval',days  = 03,hours = 17,minutes = 19,seconds = 07)

(3). date 定時調度(做業只會執行一次)

run_date (datetime|str) – the date/time to run the job at  -(任務開始的時間)
timezone (datetime.tzinfo|str) – time zone for run_date if it doesn’t have one already

例子:

# The job will be executed on November 6th, 2009
sched.add_job(my_job, 'date', run_date=date(2009, 11, 6), args=['text'])
# The job will be executed on November 6th, 2009 at 16:30:05
sched.add_job(my_job, 'date', run_date=datetime(2009, 11, 6, 16, 30, 5), args=['text'])
相關文章
相關標籤/搜索