Map/Reduce概念就是出自Google的那篇大名鼎鼎的论文
关于Map
map()函数接收两个参数,一个是函数,一个是Iterable
map将传入的函数依次作用到序列的每个元素,并把结果作为新的Iterator返回
从结果上看,for循环也可以实现该功能,但从for循环代码看是无法一眼看明白其把f作用在Iterable的每一个元素并把结果生成一个新的Iterable的
map()作为高阶函数,事实上它把运算规则抽象了,因此不但可以计算简单函数运算,还可以计算任意复杂的函数
def f(x): return x * x r = map(f, [1, 2, 3, 4, 5, 6, 7, 8, 9]) #map()传入的第一个参数是f,即函数对象本身 print(list(r)) #输出:[1, 4, 9, 16, 25, 36, 49, 64, 81] #由于结果r是一个Iterator,Iterator是惰性序列,因此通过list()函数让它把整个序列都计算出来并返回一个list list(map(str, [1, 2, 3, 4, 5, 6, 7, 8, 9])) #输出:['1', '2', '3', '4', '5', '6', '7', '8', '9'] #把这个list所有数字转为字符串
关于Reduce
reduce()把一个函数作用在一个序列[x1, x2, x3, …]上,这个函数必须接收两个参数,reduce把结果继续和序列的下一个元素做累积计算
reduce(f, [x1, x2, x3, x4])的执行过程为: f(f(f(x1, x2), x3), x4)
对一个序列求和
from functools import reduce def add(x, y): return x + y reduce(add, [1, 3, 5, 7, 9]) #输出:25,当然求和运算可以直接用Python内建函数sum(),没必要动用reduce
把序列[1, 3, 5, 7, 9]变换成整数13579
from functools import reduce def add(x, y): return x * 10 + y reduce(add, [1, 3, 5, 7, 9]) #输出:13579
把str转换为int的函数
from functools import reduce def fn(x, y): return x * 10 + y def char2num(s): digits = {'0': 0, '1': 1, '2': 2, '3': 3, '4': 4, '5': 5, '6': 6, '7': 7, '8': 8, '9': 9} return digits[s] print(reduce(fn, map(char2num, '13579'))) #输出:13579
整理成一个str2int的函数
from functools import reduce DIGITS = {'0': 0, '1': 1, '2': 2, '3': 3, '4': 4, '5': 5, '6': 6, '7': 7, '8': 8, '9': 9} def str2int(s): def fn(x, y): return x * 10 + y def char2num(s): return DIGITS[s] return reduce(fn, map(char2num, s)) print(str2int(['1','3','5','7','9']))
给到一个字符串,通过map/reduce方式转换为数字13579(lamada表达式实现)
from functools import reduce DIGITS = {'0': 0, '1': 1, '2': 2, '3': 3, '4': 4, '5': 5, '6': 6, '7': 7, '8': 8, '9': 9} def char2num(s): return DIGITS[s] def str2int(s): return reduce(lambda x, y: x * 10 + y, map(char2num, s)) print(str2int(['1','3','5','7','9'])) #输出:13579