python學習進度11（map reduce）

python內建了map()和reduce()函式。

如果你讀過google的那篇大名鼎鼎的**「mapreduce: simplified data processing on large clusters」，你就能大概明白map/reduce的概念。

我們先看map。map()函式接收兩個引數，乙個是函式，乙個是iterable，map將傳入的函式依次作用到序列的每個元素，並把結果作為新的iterator返回。

舉例說明，比如我們有乙個函式f(x)=x2，要把這個函式作用在乙個list[1, 2, 3, 4, 5, 6, 7, 8, 9]上，就可以用map()實現如下：

f(x) = x * x││ ┌───┬───┬───┬───┼───┬───┬───┬───┐ │ │ │ │ │ │ │ │ │ ▼ ▼ ▼ ▼ ▼ ▼ ▼ ▼ ▼ [ 1 2 3 4 5 6 7 8 9 ] │ │ │ │ │ │ │ │ │ │ │ │ │ │ │ │ │ │ ▼ ▼ ▼ ▼ ▼ ▼ ▼ ▼ ▼ [ 1 4 9 16 25 36 49 64 81 ]

現在，我們用python**實現：

>>> def f(x):
... return x * x
...>>> r = map(f, [1, 2, 3, 4, 5, 6, 7, 8, 9])
>>> list(r)
[1, 4, 9, 16, 25, 36, 49, 64, 81]

map()傳入的第乙個引數是f，即函式物件本身。由於結果r是乙個iterator，iterator是惰性序列，因此通過list()函式讓它把整個序列都計算出來並返回乙個list。

你可能會想，不需要map()函式，寫乙個迴圈，也可以計算出結果：

l = 
for n in [1, 2, 3, 4, 5, 6, 7, 8, 9]:
print(l)

的確可以，但是，從上面的迴圈**，能一眼看明白「把f(x)作用在list的每乙個元素並把結果生成乙個新的list」嗎？

所以，map()作為高階函式，事實上它把運算規則抽象了，因此，我們不但可以計算簡單的f(x)=x2，還可以計算任意複雜的函式，比如，把這個list所有數字轉為字串：

>>> list(map(str, [1, 2, 3, 4, 5, 6, 7, 8, 9]))
['1', '2', '3', '4', '5', '6', '7', '8', '9']

只需要一行**。

再看reduce的用法。reduce把乙個函式作用在乙個序列[x1, x2, x3, ...]上，這個函式必須接收兩個引數，reduce把結果繼續和序列的下乙個元素做累積計算，其效果就是：

reduce(f, [x1, x2, x3, x4]) = f(f(f(x1, x2), x3), x4)

比方說對乙個序列求和，就可以用reduce實現：

>>> from functools import reduce
>>> def add(x, y):
... return x + y
...>>> reduce(add, [1, 3, 5, 7, 9])
25

當然求和運算可以直接用python內建函式sum()，沒必要動用reduce。

但是如果要把序列[1, 3, 5, 7, 9]變換成整數13579，reduce就可以派上用場：

>>> from functools import reduce
>>> def fn(x, y):
... return x * 10 + y
...>>> reduce(fn, [1, 3, 5, 7, 9])
13579

這個例子本身沒多大用處，但是，如果考慮到字串str也是乙個序列，對上面的例子稍加改動，配合map()，我們就可以寫出把str轉換為int的函式：

>>> from functools import reduce
>>> def fn(x, y):
... return x * 10 + y
...>>> def char2num(s):
... digits = 
... return digits[s]
...>>> reduce(fn, map(char2num, '13579'))
13579

from functools import reduce
digits = 
def str2int(s):
def fn(x, y):
return x * 10 + y
def char2num(s):
return digits[s]
return reduce(fn, map(char2num, s))

還可以用lambda函式進一步簡化成：

from functools import reduce
digits = 
def char2num(s):
return digits[s]
def str2int(s):
return reduce(lambda x, y: x * 10 + y, map(char2num, s))

也就是說，假設python沒有提供int()函式，你完全可以自己寫乙個把字串轉化為整數的函式，而且只需要幾行**！

原**：

python學習進度11（map reduce）

C 學習筆記11 map

11 map和reduce的使用

Python程式設計教程學習進度

python學習進度11（map reduce）

C 學習筆記11 map

11 map和reduce的使用

Python程式設計教程學習進度

相關推薦