• Map/Reduce


    Map/Reduce概念就是出自Google的那篇大名鼎鼎的论文

    关于Map
      map()函数接收两个参数,一个是函数,一个是Iterable
      map将传入的函数依次作用到序列的每个元素,并把结果作为新的Iterator返回

      从结果上看,for循环也可以实现该功能,但从for循环代码看是无法一眼看明白其把f作用在Iterable的每一个元素并把结果生成一个新的Iterable的
      map()作为高阶函数,事实上它把运算规则抽象了,因此不但可以计算简单函数运算,还可以计算任意复杂的函数

      def f(x):
        return x * x
      r = map(f, [1, 2, 3, 4, 5, 6, 7, 8, 9]) #map()传入的第一个参数是f,即函数对象本身
      print(list(r)) 
      #输出:[1, 4, 9, 16, 25, 36, 49, 64, 81]
      #由于结果r是一个Iterator,Iterator是惰性序列,因此通过list()函数让它把整个序列都计算出来并返回一个list
    
      list(map(str, [1, 2, 3, 4, 5, 6, 7, 8, 9])) 
      #输出:['1', '2', '3', '4', '5', '6', '7', '8', '9']
      #把这个list所有数字转为字符串

    关于Reduce
      reduce()把一个函数作用在一个序列[x1, x2, x3, ...]上,这个函数必须接收两个参数,reduce把结果继续和序列的下一个元素做累积计算
      reduce(f, [x1, x2, x3, x4])的执行过程为: f(f(f(x1, x2), x3), x4)

      对一个序列求和

      from functools import reduce
      def add(x, y):
        return x + y
      reduce(add, [1, 3, 5, 7, 9]) #输出:25,当然求和运算可以直接用Python内建函数sum(),没必要动用reduce

      把序列[1, 3, 5, 7, 9]变换成整数13579

      from functools import reduce
      def add(x, y):
        return x * 10 + y
      reduce(add, [1, 3, 5, 7, 9]) #输出:13579


      把str转换为int的函数

      from functools import reduce
      def fn(x, y):
        return x * 10 + y
    
      def char2num(s):
        digits = {'0': 0, '1': 1, '2': 2, '3': 3, '4': 4, '5': 5, '6': 6, '7': 7, '8': 8, '9': 9}
        return digits[s]
      print(reduce(fn, map(char2num, '13579'))) #输出:13579

      整理成一个str2int的函数

      from functools import reduce
    
      DIGITS = {'0': 0, '1': 1, '2': 2, '3': 3, '4': 4, '5': 5, '6': 6, '7': 7, '8': 8, '9': 9}
    
      def str2int(s):
        def fn(x, y):
          return x * 10 + y
        def char2num(s):
          return DIGITS[s]
        return reduce(fn, map(char2num, s))
    
      print(str2int(['1','3','5','7','9']))

      给到一个字符串,通过map/reduce方式转换为数字13579(lamada表达式实现)

      from functools import reduce
    
      DIGITS = {'0': 0, '1': 1, '2': 2, '3': 3, '4': 4, '5': 5, '6': 6, '7': 7, '8': 8, '9': 9}
    
      def char2num(s):
        return DIGITS[s]
    
      def str2int(s):
        return reduce(lambda x, y: x * 10 + y, map(char2num, s))
    
      print(str2int(['1','3','5','7','9'])) #输出:13579
  • 相关阅读:
    Python有哪些华而不实的技巧?
    json:dumps/loads & pickl
    json模块与第三方模块的引入
    os 及 sys 模块补充
    如何白嫖视频会员
    python和SAS的思考
    5、根据进程号PID查询其服务路径
    5、安装mongodb 异常
    2、shell 判断字符串是否包含另一个字符串
    【九校2D2T1】旋转子段
  • 原文地址:https://www.cnblogs.com/shiliye/p/10917887.html
Copyright © 2020-2023  润新知