本篇,我们说说 Python 中的函数式编程的基本概念。
高阶函数(Higher-order function)
map()
Python 内建了 map() 函数。
map() 函数接收两个参数,一个是函数,一个是 Iterable,map 将传入的函数依次作用到序列的每个元素,并把结果作为新的 Iterator 返回。由于结果是一个 Iterator,Iterator 是惰性序列,因此我们还可以通过 list() 函数让它把整个序列都计算出来并返回一个 list。
def f(x): return x * x
r = map(f, [1, 2, 3, 4, 5, 6, 7, 8, 9]) list(r)
list(map(str, [1, 2, 3, 4, 5, 6, 7, 8, 9]))
|
reduce()
reduce 把一个函数作用在一个序列 [x1, x2, x3, …] 上,这个函数必须接收两个参数,reduce 把结果继续和序列的下一个元素做累积计算,效果就是:
reduce(f, [x1, x2, x3, x4]) = f(f(f(x1, x2), x3), x4)
|
from functools import reduce def fn(x, y): return x * 10 + y
def char2num(s): digits = {'0': 0, '1': 1, '2': 2, '3': 3, '4': 4, '5': 5, '6': 6, '7': 7, '8': 8, '9': 9} return digits[s]
reduce(fn, map(char2num, '13579'))
|
filter()
和 map() 类似,filter() 也接收一个函数和一个序列。和 map() 不同的是,filter() 把传入的函数依次作用于每个元素,然后根据返回值是 True 还是 False 决定保留还是丢弃该元素。
def not_empty(s): return s and s.strip()
list(filter(not_empty, ['A', '', 'B', None, 'C', ' ']))
|
与 map() 一样,filter() 函数返回的也是一个 Iterator,也就是一个惰性序列,所以要强迫 filter() 完成计算结果,需要用 list() 函数获得所有结果并返回 list。
sorted()
之前我们说过,Python 内置的 sorted() 函数可以对 list 进行排序:
sorted([36, 5, -12, 9, -21])
|
此外,sorted() 函数也是一个高阶函数,它还可以接收一个 key 函数来实现自定义的排序:
sorted([36, 5, -12, 9, -21], key=abs)
|
key 指定的函数将作用于 list 的每一个元素上,并根据 key 函数返回的结果进行排序。
返回函数
高阶函数除了可以接受函数作为参数外,还可以把函数作为结果值返回。
def lazy_sum(*args): def sum(): ax = 0 for n in args: ax = ax + n return ax return sum
f = lazy_sum(1, 3, 5, 7, 9) f()
|
在这个例子中,我们在函数 lazy_sum 中又定义了函数 sum,并且,内部函数 sum 可以引用外部函数 lazy_sum 的参数和局部变量,当 lazy_sum 返回函数 sum 时,相关参数和变量都保存在返回的函数中,这种结构被称为”闭包(Closure)”。
闭包
闭包需要注意的问题是,返回的函数并没有立刻执行,而是直到调用了才执行。
def count(): fs = [] for i in range(1, 4): def f(): return i*i fs.append(f) return fs
f1, f2, f3 = count()
|
你可能认为调用 f1(),f2() 和 f3() 结果应该是 1,4,9,但实际结果是 9,9,9。
原因就在于返回的函数引用了变量 i,但它并非立刻执行。等到 3 个函数都返回时,它们所引用的变量 i 已经变成了 3,因此最终结果为 9。返回闭包时牢记一点: 返回函数不要引用任何循环变量,或者后续会发生变化的变量。
如果一定要引用循环变量怎么办?方法是再创建一个函数,用该函数的参数绑定循环变量当前的值,无论该循环变量后续如何更改,已绑定到函数参数的值不变:
def count(): def f(j): def g(): return j*j return g fs = [] for i in range(1, 4): fs.append(f(i)) return fs
f1, f2, f3 = count() f1()
f2()
f3()
|
匿名函数
当我们在传入函数时,有些时候,不需要显式地定义函数,直接传入匿名函数更方便。
以 map() 函数为例,计算 f(x)=x2 时,除了定义一个 f(x) 的函数外,还可以直接传入匿名函数:
list(map(lambda x: x * x, [1, 2, 3, 4, 5, 6, 7, 8, 9]))
|
关键字 lambda 表示匿名函数,冒号前面的 x 表示函数参数。
匿名函数有个限制,就是只能有一个表达式,不用写 return,返回值就是该表达式的结果。
用匿名函数有个好处,因为函数没有名字,不必担心函数名冲突。此外,匿名函数也是一个函数对象,也可以把匿名函数赋值给一个变量,再利用变量来调用该函数:
同样,也可以把匿名函数作为返回值返回:
def build(x, y): return lambda: x * x + y * y
|
装饰器
在代码运行期间动态增加功能的方式,称之为”装饰器”(Decorator)。
本质上,decorator就是一个返回函数的高阶函数。
def log(func): def wrapper(*args, **kw): print('call %s():' % func.__name__) return func(*args, **kw) return wrapper
@log def now(): print('2019-2-12')
now = log(now)
|
如果 decorator 本身需要传入参数,那就需要编写一个返回 decorator 的高阶函数:
def log(text): def decorator(func): def wrapper(*args, **kw): print('%s %s():' % (text, func.__name__)) return func(*args, **kw) return wrapper return decorator
@log('execute') def now(): print('2019-2-12')
|
和两层嵌套的 decorator 相比,3 层嵌套的效果是这样的:
now = log('execute')(now)
|
Python 内置的 functools.wraps 用于还原函数的 __name__:
import functools
def log(func): @functools.wraps(func) def wrapper(*args, **kw): print('call %s():' % func.__name__) return func(*args, **kw) return wrapper
import functools
def log(text): def decorator(func): @functools.wraps(func) def wrapper(*args, **kw): print('%s %s():' % (text, func.__name__)) return func(*args, **kw) return wrapper return decorator
|
偏函数
Python 的 functools 模块提供了很多有用的功能,其中一个就是偏函数(Partial function)。
functools.partial 就是帮助我们创建一个偏函数的,简单总结 functools.partial 的作用就是,把一个函数的某些参数给固定住(也就是设置默认值),返回一个新的函数,调用这个新函数会更简单。
import functools int2 = functools.partial(int, base=2) int2('1000000')
|