Python中的装饰器(decorator)

想理解Python的decorator首先要知道在Python中函数也是一个对象,所以你可以

函数在Python中给变量的用法一样也是一等公民,也就是高阶函数(High Order Function)。所有的魔法都是由此而来。

1,起源

我们想在函数login中输出调试信息,我们可以这样做

def login():
    print('in login')

def printdebug(func):
    print('enter the login')
    func()
    print('exit the login')

printdebug(login)

这个方法讨厌的是每次调用login是,都通过printdebug来调用,但毕竟这是可行的。

2,让代码变得优美一点

既然函数可以作为返回值,可以赋值给变量,我们可以让代码优美一点。

def login():
    print('in login')

def printdebug(func):
    def __decorator():
        print('enter the login')
        func()
        print('exit the login')
    return __decorator  #function as return value

debug_login = printdebug(login)  #function assign to variable
debug_login()  #execute the returned function

这样我们每次只要调用debug_login就可以了,这个名字更符合直觉。我们将原先的两个函数printdebuglogin绑定到一起,成为debug_login。这种耦合叫内聚:-)。

3,让代码再优美一点

printdebuglogin是通过debug_login = printdebug(login)这一句来结合的,这一句似乎也是多余的,能不能在定义login是加个标注,从而将printdebug和login结合起来?

上面的代码从语句组织的角度来讲很难再优美了,Python的解决方案是提供一个语法糖(Syntax Sugar),用一个@符号来结合它们。

def printdebug(func):
    def __decorator():
        print('enter the login')
        func()
        print('exit the login')
    return __decorator  

@printdebug  #combine the printdebug and login
def login():
    print('in login')

login()  #make the calling point more intuitive

可以看出decorator就是一个:使用函数作参数并且返回函数的函数。通过改进我们可以得到:

在Python解释器发现login调用时,他会将login转换为printdebug(login)()。也就是说真正执行的是__decorator这个函数。

4,加上参数

4.1,login函数带参数

login函数可能有参数,比如login的时候传人user的信息。也就是说,我们要这样调用login:

login(user)

Python会将login的参数直接传给__decorator这个函数。我们可以直接在__decorator中使用user变量:

def printdebug(func):
    def __decorator(user):    #add parameter receive the user information
        print('enter the login')
        func(user)  #pass user to login
        print('exit the login')
    return __decorator  

@printdebug 
def login(user):
    print('in login:' + user)

login('jatsz')  #arguments:jatsz

我们来解释一下login('jatsz')的调用过程:

[decorated] login('jatsz') =>  printdebug(login)('jatsz')  =>  __decorator('jatsz')  =>  [real] login('jatsz')

4.2,装饰器本身有参数

我们在定义decorator时,也可以带入参数,比如我们这样使用decorator,我们传入一个参数来指定debug level。

@printdebug(level=5)
def login
    pass

为了给接收decorator传来的参数,我们在原本的decorator上在包装一个函数来接收参数:

def printdebug_level(level):  #add wrapper to recevie decorator's parameter
    def printdebug(func):
        def __decorator(user):    
            print('enter the login, and debug level is: ' + str(level)) #print debug level
            func(user)  
            print('exit the login')
        return __decorator  
    return printdebug    #return original decorator

@printdebug_level(level=5)   #decorator's parameter, debug level set to 5
def login(user):
    print('in login:' + user)

login('jatsz')

我们再来解释一下login('jatsz')整个调用过程:

[decorated]login(‘jatsz’) => printdebug_level(5) => printdebug[with closure value 5](login)(‘jatsz’) => __decorator(‘jatsz’)[use value 5]  => [real]login(‘jatsz’)

5,装饰有返回值的函数

有时候login会有返回值,比如返回message来表明login是否成功。

login_result = login('jatsz')

我们需要将返回值在decorator和调用函数间传递:

def printdebug(func):
    def __decorator(user):    
        print('enter the login')
        result = func(user)  #recevie the native function call result
        print('exit the login')
        return result        #return to caller
    return __decorator  

@printdebug 
def login(user):
    print('in login:' + user)
    msg = "success" if user == "jatsz" else "fail"
    return msg  #login with a return value

result1 = login('jatsz');
print result1  #print login result

result2 = login('candy');
print result2

我们解释一下返回值的传递过程:

...omit for brief…[real][msg from login('jatsz') => [result from]__decorator => [assign to] result1

6,应用多个装饰器

我们可以对一个函数应用多个装饰器,这时我们需要留心的是应用装饰器的顺序对结果会产生。影响比如:

def printdebug(func):
    def __decorator():    
        print('enter the login')
        func() 
        print('exit the login')
    return __decorator  

def others(func):    #define a other decorator
    def __decorator():
        print '***other decorator***'
        func()
    return __decorator

@others         #apply two of decorator
@printdebug
def login():
    print('in login:')

@printdebug     #switch decorator order
@others
def logout():
    print('in logout:')

login()
print('---------------------------') 
logout()

我们定义了另一个装饰器others,然后我们对login函数和logout函数分别应用这两个装饰器。应用方式很简单,在函数定义是直接用两个@@就可以了。我们看一下上面代码的输出:

$ python deoc.py
***other decorator***
enter the login
in login:
exit the login
---------------------------
enter the login
***other decorator***
in logout:
exit the login

我们看到两个装饰器都已经成功应用上去了,不过输出却不相同。造成这个输出不同的原因是我们应用装饰器的顺序不同。回头看看我们login的定义,我们是先应用others,然后才是printdebug。而logout函数真好相反,发生了什么?如果你仔细看logout函数的输出结果,可以看到装饰器的递归。从输出可以看出:logout函数先应用printdebug,打印出enter the loginprintdebug__decorator调用中间应用了others的__decorator,打印出***other decorator***。其实在逻辑上我们可以将logout函数应用装饰器的过程这样看(伪代码):

@printdebug    #switch decorator order
(
    @others
    (
        def logout():
            print('in logout:')
    )
)

我们解释一下整个递归应用decorator的过程:

[printdebug decorated]logout() =>
printdebug.__decorator[call [others decorated]logout() ] =>
printdebug.__decorator.other.__decorator[call real logout]

7,灵活运用

什么情况下装饰器不适用?装饰器不能对函数的一部分应用,只能作用于整个函数。

login函数是一个整体,当我们想对部分函数应用装饰器时,装饰器变的无从下手。比如我们想对下面这行语句应用装饰器:

msg = "success" if user == "jatsz" else "fail"

怎么办?

一个变通的办法是“提取函数”,我们将这行语句提取成函数,然后对提取出来的函数应用装饰器:

def printdebug(func):
    def __decorator(user):    
        print('enter the login')
        result = func(user) 
        print('exit the login')
        return result      
    return __decorator  

def login(user):
    print('in login:' + user)
    msg = validate(user)  #exact to a method
    return msg  

@printdebug  #apply the decorator for exacted method
def validate(user):
    msg = "success" if user == "jatsz" else "fail"
    return msg

result1 = login('jatsz');
print result1

来个更加真实的应用,有时候validate是个耗时的过程。为了提高应用的性能,我们会将validate的结果cache一段时间(30 seconds),借助decorator和上面的方法,我们可以这样实现:

import time

dictcache = {}

def cache(func):
    def __decorator(user):    
        now = time.time()
        if (user in dictcache):
            result,cache_time = dictcache[user]
            if (now - cache_time) > 30:  #cache expired
                result = func(user)
                dictcache[user] = (result, now)  #cache the result by user
            else:
                print('cache hits')
        else:
            result = func(user)
            dictcache[user] = (result, now)
        return result      
    return __decorator  

def login(user):
    print('in login:' + user)
    msg = validate(user)  
    return msg  

@cache  #apply the cache for this slow validation
def validate(user):
    time.sleep(5)  #simulate 10 second block
    msg = "success" if user == "jatsz" else "fail"
    return msg

result1 = login('jatsz'); print result1  
result2 = login('jatsz'); print result2    #this login will return immediately by hit the cache
result3 = login('candy'); print result3

Reference:

http://stackoverflow.com/questions/739654/understanding-python-decorators --Understanding Python decorators

http://www.cnblogs.com/rhcad/archive/2011/12/21/2295507.html --Python装饰器学习(九步入门)

http://www.python.org/dev/peps/pep-0318/ --PEP 318 -- Decorators for Functions and Methods

@ 2012-05-23 08:00

Comments:

Sharing your thoughts: