對於每個學習 Python 的同窗,想必對 @ 符號必定不陌生了,正如你所知, @ 符號是裝飾器的語法糖,@符號後面的函數就是咱們本文的主角:裝飾器。python
裝飾器放在一個函數開始定義的地方,它就像一頂帽子同樣戴在這個函數的頭上。和這個函數綁定在一塊兒。在咱們調用這個函數的時候,第一件事並非執行這個函數,而是將這個函數作爲參數傳入它頭頂上這頂帽子,這頂帽子咱們稱之爲 裝飾器 。程序員
曾經我在剛轉行作程序員時的一次的面試中,被面試官問過這樣的兩個問題:面試
一、你都用過裝飾器實現過什麼樣的功能?閉包
二、如何寫一個能夠傳參的裝飾器?app
對於當時實戰經驗很是有限的我,第一個問題只能回答一些很是簡單的用法,而第二個問題卻沒能回答上來。函數
當時帶着這兩個問題,我就開始系統的學習裝飾器的全部內容。這些一直整理在本身的博客中,今天對其進行了大量的補充和勘誤,發表在這裏分享給你們。但願對剛入門以及進階的朋友能夠提供一些參考。 學習
01. Hello,裝飾器裝飾器的使用方法很固定編碼
先定義一個裝飾器(帽子)spa
再定義你的業務函數或者類(人)設計
最後把這裝飾器(帽子)扣在這個函數(人)頭上
就像下面這樣子
def decorator(func):
def wrapper(*args, **kw):
return func()
return wrapper
@decorator
def function():
print("hello, decorator")
複製代碼
實際上,裝飾器並非編碼必須性,意思就是說,你不使用裝飾器徹底能夠,它的出現,應該是使咱們的代碼
更加優雅,代碼結構更加清晰
將實現特定的功能代碼封裝成裝飾器,提升代碼複用率,加強代碼可讀性
接下來,我將以實例講解,如何編寫出各類簡單及複雜的裝飾器。
02. 入門:日誌打印器
首先是日誌打印器。
實現的功能:
在函數執行前,先打印一行日誌告知一下主人,我要執行函數了。
在函數執行完,也不能拍拍屁股就走人了,咱但是有禮貌的代碼,再打印一行日誌告知下主人,我執行完啦。
# 這是裝飾器函數,參數 func 是被裝飾的函數
def logger(func):
def wrapper(*args, **kw):
print('主人,我準備開始執行:{} 函數了:'.format(func.__name__))
# 真正執行的是這行。
func(*args, **kw)
print('主人,我執行完啦。')
return wrapper
複製代碼
假如,個人業務函數是,計算兩個數之和。寫好後,直接給它帶上帽子。
@logger
def add(x, y):
print('{} + {} = {}'.format(x, y, x+y))
複製代碼
而後執行一下 add 函數。
add(200, 50)
複製代碼
來看看輸出了什麼?
主人,我準備開始執行:add 函數了:
200 + 50 = 250
主人,我執行完啦。
複製代碼
03. 入門:時間計時器
再來看看 時間計時器 實現功能:顧名思義,就是計算一個函數的執行時長。
# Python學習交流QQ羣:857662006
# 這是裝飾函數
def timer(func):
def wrapper(*args, **kw):
t1=time.time()
# 這是函數真正執行的地方
func(*args, **kw)
t2=time.time()
# 計算下時長
cost_time = t2-t1
print("花費時間:{}秒".format(cost_time))
return wrapper
複製代碼
假如,咱們的函數是要睡眠10秒。這樣也能更好的看出這個計算時長到底靠不靠譜。
import time
@timer
def want_sleep(sleep_time):
time.sleep(sleep_time)
want_sleep(10)
複製代碼
來看看輸出,如預期同樣,輸出10秒。
花費時間:10.0073800086975098秒
複製代碼
04. 進階:帶參數的函數裝飾器
經過上面兩個簡單的入門示例,你應該能體會到裝飾器的工做原理了。
不過,裝飾器的用法還遠不止如此,深究下去,還大有文章。今天就一塊兒來把這個知識點學透。
回過頭去看看上面的例子,裝飾器是不能接收參數的。其用法,只能適用於一些簡單的場景。不傳參的裝飾器,只能對被裝飾函數,執行固定邏輯。
裝飾器自己是一個函數,作爲一個函數,若是不能傳參,那這個函數的功能就會很受限,只能執行固定的邏輯。這意味着,若是裝飾器的邏輯代碼的執行須要根據不一樣場景進行調整,若不能傳參的話,咱們就要寫兩個裝飾器,這顯然是不合理的。
好比咱們要實現一個能夠定時發送郵件的任務(一分鐘發送一封),定時進行時間同步的任務(一天同步一次),就能夠本身實現一個 periodic_task (定時任務)的裝飾器,這個裝飾器能夠接收一個時間間隔的參數,間隔多長時間執行一次任務。
能夠這樣像下面這樣寫,因爲這個功能代碼比較複雜,不利於學習,這裏就不貼了。
@periodic_task(spacing=60)
def send_mail():
pass
@periodic_task(spacing=86400)
def ntp()
pass
複製代碼
那咱們來本身創造一個僞場景,能夠在裝飾器裏傳入一個參數,指明國籍,並在函數執行前,用本身國家的母語打一個招呼。
# 小明,中國人
@say_hello("china")
def xiaoming():
pass
# jack,美國人
@say_hello("america")
def jack():
pass
複製代碼
那咱們若是實現這個裝飾器,讓其能夠實現 傳參 呢?
會比較複雜,須要兩層嵌套。
def say_hello(contry):
def wrapper(func):
def deco(*args, **kwargs):
if contry == "china":
print("你好!")
elif contry == "america":
print('hello.')
else:
return
# 真正執行函數的地方
func(*args, **kwargs)
return deco
return wrapper
複製代碼
來執行一下
xiaoming()
print("------------")
jack()
複製代碼
看看輸出結果。
你好!
------------
hello.
複製代碼
05. 高階:不帶參數的類裝飾器
以上都是基於函數實現的裝飾器,在閱讀別人代碼時,還能夠時常發現還有基於類實現的裝飾器。
基於類裝飾器的實現,必須實現 __ call__ 和 __init__兩個內置函數。 __ init __ :接收被裝飾函數 __ call __ :實現裝飾邏輯。
仍是以日誌打印這個簡單的例子爲例
class logger(object):
def __init__(self, func):
self.func = func
def __call__(self, *args, **kwargs):
print("[INFO]: the function {func}() is running..."
.format(func=self.func.__name__))
return self.func(*args, **kwargs)
@logger
def say(something):
print("say {}!".format(something))
say("hello")
複製代碼
執行一下,看看輸出
[INFO]: the function say() is running...
say hello!
複製代碼
06. 高階:帶參數的類裝飾器 上面不帶參數的例子,你發現沒有,只能打印INFO級別的日誌,正常狀況下,咱們還須要打印DEBUG WARNING等級別的日誌。這就須要給類裝飾器傳入參數,給這個函數指定級別了。
帶參數和不帶參數的類裝飾器有很大的不一樣。
__ init __ :再也不接收被裝飾函數,而是接收傳入參數。 __ call __ :接收被裝飾函數,實現裝飾邏輯。
class logger(object):
def __init__(self, level='INFO'):
self.level = level
def __call__(self, func): # 接受函數
def wrapper(*args, **kwargs):
print("[{level}]: the function {func}() is running..."
.format(level=self.level, func=func.__name__))
func(*args, **kwargs)
return wrapper #返回函數
@logger(level='WARNING')
def say(something):
print("say {}!".format(something))
say("hello")
複製代碼
咱們指定WARNING級別,運行一下,來看看輸出。
[WARNING]: the function say() is running...
say hello!
複製代碼
07. 使用偏函數與類實現裝飾器
絕大多數裝飾器都是基於函數和閉包實現的,但這並不是製造裝飾器的惟一方式。
事實上,Python 對某個對象是否能經過裝飾器( @decorator)形式使用只有一個要求:decorator 必須是一個「可被調用(callable)的對象。
對於這個 callable 對象,咱們最熟悉的就是函數了。
除函數以外,類也能夠是 callable 對象,只要實現了__ call__ 函數(上面幾個例子已經接觸過了)。
還有容易被人忽略的偏函數其實也是 callable 對象。
接下來就來講說,如何使用 類和偏函數結合實現一個不同凡響的裝飾器。
以下所示,DelayFunc 是一個實現了 __ call__ 的類,delay 返回一個偏函數,在這裏 delay 就能夠作爲一個裝飾器。(如下代碼摘自 Python工匠:使用裝飾器的小技巧)
import time
import functools
class DelayFunc:
def __init__(self, duration, func):
self.duration = duration
self.func = func
def __call__(self, *args, **kwargs):
print(f'Wait for {self.duration} seconds...')
time.sleep(self.duration)
return self.func(*args, **kwargs)
def eager_call(self, *args, **kwargs):
print('Call without delay')
return self.func(*args, **kwargs)
def delay(duration):
""" 裝飾器:推遲某個函數的執行。 同時提供 .eager_call 方法當即執行 """
# Python學習交流QQ羣:857662006
# 此處爲了不定義額外函數,
# 直接使用 functools.partial 幫助構造 DelayFunc 實例
return functools.partial(DelayFunc, duration)
咱們的業務函數很簡單,就是相加
@delay(duration=2)
def add(a, b):
return a+b
複製代碼
來看一下執行過程
>>> add # 可見 add 變成了 Delay 的實例
<__main__.DelayFunc object at 0x107bd0be0>
>>>
>>> add(3,5) # 直接調用實例,進入 __call__
Wait for 2 seconds...
8
>>>
>>> add.func # 實現實例方法
<function add at 0x107bef1e0>
複製代碼
08. 如何寫能裝飾類的裝飾器?
用 Python 寫單例模式的時候,經常使用的有三種寫法。其中一種,是用裝飾器來實現的。
如下即是我本身寫的裝飾器版的單例寫法。
instances = {}
def singleton(cls):
def get_instance(*args, **kw):
cls_name = cls.__name__
print('===== 1 ====')
if not cls_name in instances:
print('===== 2 ====')
instance = cls(*args, **kw)
instances[cls_name] = instance
return instances[cls_name]
return get_instance
@singleton
class User:
_instance = None
def __init__(self, name):
print('===== 3 ====')
self.name = name
複製代碼
能夠看到咱們用singleton 這個裝飾函數來裝飾 User 這個類。裝飾器用在類上,並非很常見,但只要熟悉裝飾器的實現過程,就不難以實現對類的裝飾。在上面這個例子中,裝飾器就只是實現對類實例的生成的控制而已。
其實例化的過程,你能夠參考我這裏的調試過程,加以理解。
09. wraps 裝飾器有啥用? 在 functools 標準庫中有提供一個 wraps 裝飾器,你應該也常常見過,那他有啥用呢?先來看一個例子
def wrapper(func):
def inner_function():
pass
return inner_function
@wrapper
def wrapped():
pass
print(wrapped.__name__)
#inner_function
複製代碼
爲何會這樣子?不是應該返回 func 嗎?
這也不難理解,由於上邊執行func 和下邊 decorator(func) 是等價的,因此上面 func.__ name__ 是等價於下面decorator(func).__ name__ 的,那固然名字是 inner_function
def wrapper(func):
def inner_function():
pass
return inner_function
def wrapped():
pass
print(wrapper(wrapped).__name__)
#inner_function
複製代碼
那如何避免這種狀況的產生?方法是使用 functools .wraps 裝飾器,它的做用就是將 被修飾的函數(wrapped) 的一些屬性值賦值給 修飾器函數(wrapper) ,最終讓屬性的顯示更符合咱們的直覺。
from functools import wraps
def wrapper(func):
@wraps(func)
def inner_function():
pass
return inner_function
@wrapper
def wrapped():
pass
print(wrapped.__name__)
# wrapped
複製代碼
準確點說,wraps 實際上是一個偏函數對象(partial),源碼以下
def wraps(wrapped, assigned = WRAPPER_ASSIGNMENTS, updated = WRAPPER_UPDATES):
return partial(update_wrapper, wrapped=wrapped,
assigned=assigned, updated=updated)
複製代碼
能夠看到wraps其實就是調用了一個函數update_wrapper,知道原理後,咱們改寫上面的代碼,在不使用 wraps的狀況下,也可讓 wrapped.__ name__ 打印出 wrapped,代碼以下:
from functools import update_wrapper
WRAPPER_ASSIGNMENTS = ('__module__', '__name__', '__qualname__', '__doc__',
'__annotations__')
def wrapper(func):
def inner_function():
pass
update_wrapper(inner_function, func, assigned=WRAPPER_ASSIGNMENTS)
return inner_function
@wrapper
def wrapped():
pass
print(wrapped.__name__)
複製代碼
10. 內置裝飾器:property
以上,咱們介紹的都是自定義的裝飾器。
其實Python語言自己也有一些裝飾器。好比property這個內建裝飾器,咱們再熟悉不過了。
它一般存在於類中,能夠將一個函數定義成一個屬性,屬性的值就是該函數return的內容。
一般咱們給實例綁定屬性是這樣的
class Student(object):
def __init__(self, name, age=None):
self.name = name
self.age = age
# 實例化
xiaoming = Student("小明")
# 添加屬性
xiaoming.age=25
# 查詢屬性
xiaoming.age
# 刪除屬性
del xiaoming.age
複製代碼
可是稍有經驗的開發人員,一下就能夠看出,這樣直接把屬性暴露出去,雖然寫起來很簡單,可是並不能對屬性的值作合法性限制。爲了實現這個功能,咱們能夠這樣寫。
class Student(object):
def __init__(self, name):
self.name = name
self.name = None
def set_age(self, age):
if not isinstance(age, int):
raise ValueError('輸入不合法:年齡必須爲數值!')
if not 0 < age < 100:
raise ValueError('輸入不合法:年齡範圍必須0-100')
self._age=age
def get_age(self):
return self._age
def del_age(self):
self._age = None
xiaoming = Student("小明")
# 添加屬性
xiaoming.set_age(25)
# 查詢屬性
xiaoming.get_age()
# 刪除屬性
xiaoming.del_age()
複製代碼
上面的代碼設計雖然能夠變量的定義,可是能夠發現不論是獲取仍是賦值(經過函數)都和咱們平時見到的不同。 按照咱們思惟習慣應該是這樣的。
# 賦值
xiaoming.age = 25
# 獲取
xiaoming.age
複製代碼
那麼這樣的方式咱們如何實現呢。請看下面的代碼。
class Student(object):
def __init__(self, name):
self.name = name
self.name = None
@property
def age(self):
return self._age
@age.setter
def age(self, value):
if not isinstance(value, int):
raise ValueError('輸入不合法:年齡必須爲數值!')
if not 0 < value < 100:
raise ValueError('輸入不合法:年齡範圍必須0-100')
self._age=value
@age.deleter
def age(self):
del self._age
xiaoming = Student("小明")
# 設置屬性
xiaoming.age = 25
# 查詢屬性
xiaoming.age
# 刪除屬性
del xiaoming.age
複製代碼
用@property裝飾過的函數,會將一個函數定義成一個屬性,屬性的值就是該函數return的內容。同時,會將這個函數變成另一個裝飾器。就像後面咱們使用的@age.setter和@age.deleter。
property 的底層實現機制是「描述符」,爲此我還寫過一篇文章。
這裏也介紹一下吧,正好將這些看似零散的文章所有串起來。
以下,我寫了一個類,裏面使用了 property 將 math 變成了類實例的屬性
class Student:
def __init__(self, name):
self.name = name
@property
def math(self):
return self._math
@math.setter
def math(self, value):
if 0 <= value <= 100:
self._math = value
else:
raise ValueError("Valid value must be in [0, 100]")
複製代碼
爲何說 property 底層是基於描述符協議的呢?經過 PyCharm 點擊進入 property 的源碼,很惋惜,只是一份相似文檔同樣的僞源碼,並無其具體的實現邏輯。
不過,從這份僞源碼的魔法函數結構組成,能夠大致知道其實現邏輯。
這裏我本身經過模仿其函數結構,結合「描述符協議」來本身實現類 property 特性。
代碼以下:
class TestProperty(object):
def __init__(self, fget=None, fset=None, fdel=None, doc=None):
self.fget = fget
self.fset = fset
self.fdel = fdel
self.__doc__ = doc
def __get__(self, obj, objtype=None):
print("in __get__")
if obj is None:
return self
if self.fget is None:
raise AttributeError
return self.fget(obj)
def __set__(self, obj, value):
print("in __set__")
if self.fset is None:
raise AttributeError
self.fset(obj, value)
def __delete__(self, obj):
print("in __delete__")
if self.fdel is None:
raise AttributeError
self.fdel(obj)
def getter(self, fget):
print("in getter")
return type(self)(fget, self.fset, self.fdel, self.__doc__)
def setter(self, fset):
print("in setter")
return type(self)(self.fget, fset, self.fdel, self.__doc__)
def deleter(self, fdel):
print("in deleter")
return type(self)(self.fget, self.fset, fdel, self.__doc__)
複製代碼
而後 Student 類,咱們也相應改爲以下
class Student:
def __init__(self, name):
self.name = name
# Python學習交流QQ羣:857662006
# 其實只有這裏改變
@TestProperty
def math(self):
return self._math
@math.setter
def math(self, value):
if 0 <= value <= 100:
self._math = value
else:
raise ValueError("Valid value must be in [0, 100]")
複製代碼
爲了儘可能讓你少產生一點疑惑,我這裏作兩點說明:
使用TestProperty裝飾後,math 再也不是一個函數,而是TestProperty類的一個實例。因此第二個math函數可使用 math.setter 來裝飾,本質是調用TestProperty.setter 來產生一個新的 TestProperty 實例賦值給第二個math。
第一個 math 和第二個 math 是兩個不一樣 TestProperty 實例。但他們都屬於同一個描述符類(TestProperty),當對 math 對於賦值時,就會進入 TestProperty.__ set__,當對math 進行取值裏,就會進入 TestProperty.__ get__。仔細一看,其實最終訪問的仍是Student實例的 _math 屬性。
說了這麼多,仍是運行一下,更加直觀一點。
# 運行後,會直接打印這一行,這是在實例化 TestProperty 並賦值給第二個math
in setter
>>>
>>> s1.math = 90
in __set__
>>> s1.math
in __get__
90
複製代碼
如對上面代碼的運行原理,有疑問的同窗,請務必結合上面兩點說明加以理解,那兩點至關關鍵。
11. 其餘裝飾器:裝飾器實戰
讀完並理解了上面的內容,你能夠說是Python高手了。別懷疑,自信點,由於不少人都不知道裝飾器有這麼多用法呢。
在我看來,使用裝飾器,能夠達到以下目的:
使代碼可讀性更高,逼格更高;
代碼結構更加清晰,代碼冗餘度更低;
恰好我在最近也有一個場景,能夠用裝飾器很好的實現,暫且放上來看看。
這是一個實現控制函數運行超時的裝飾器。若是超時,則會拋出超時異常。
有興趣的能夠看看。
import signal
class TimeoutException(Exception):
def __init__(self, error='Timeout waiting for response from Cloud'):
Exception.__init__(self, error)
def timeout_limit(timeout_time):
def wraps(func):
def handler(signum, frame):
raise TimeoutException()
def deco(*args, **kwargs):
signal.signal(signal.SIGALRM, handler)
signal.alarm(timeout_time)
func(*args, **kwargs)
signal.alarm(0)
return deco
return wraps
複製代碼
以上,即是我對裝飾器的全部分享。