python迭代和解析(3)：range、map、zip、filter和reduce函數

来源:https://www.cnblogs.com/f-ck-need-u/archive/2019/01/12/10260776.html
-Advertisement-
Play Games

range range()是一個內置函數，它返回一個數字序列，功能和Linux下的seq命令差不多。 range()返回的是一個可迭代對象(迭代器)，可以被迭代工具for/in/map/zip等操作。 作為一個可迭代對象，它還支持len()操作和索引操作： 如果想要實現其它功能，可以將其轉換為lis ...


解析、迭代和生成系列文章：https://www.cnblogs.com/f-ck-need-u/p/9832640.html

range

range()是一個內置函數，它返回一個數字序列，功能和Linux下的seq命令差不多。

>>> list(range(10))
[0, 1, 2, 3, 4, 5, 6, 7, 8, 9]

>>> list(range(5,10))
[5, 6, 7, 8, 9]

>>> list(range(1,10,2))
[1, 3, 5, 7, 9]

range()返回的是一個可迭代對象(迭代器)，可以被迭代工具for/in/map/zip等操作。

>>> 1 in range(10)
True

>>> for i in range(10):print(i,end=" ")
...
0 1 2 3 4 5 6 7 8 9

>>> R = range(4)
>>> I = iter(R)
>>> next(I)
0
>>> I.__next__()
1
>>> next(I)
2
>>> next(I)
3
>>> next(I)
Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
StopIteration

作為一個可迭代對象，它還支持len()操作和索引操作：

>>> R = range(5)
>>> len(R)
5
>>> R[2]
2

如果想要實現其它功能，可以將其轉換為list/tuple/set，然後使用這些類型的功能。

總歸要記住，迭代器是惰性的，不會一次性生成所有數據，而是按需一個一個收集起來的。

正如上面的range()，它不會一次性將所有數字序列都生成出來再返回，而是生成一個返回一個，需要的時候再生成一個返回一個，這能夠節約記憶體空間。

map

map無論在Perl還是在Python中都是非常強大的工具，Python中map的作用是對給定列表/元組/集合中的每個元素都應用一個函數操作。

比如，對一系列的數值全都乘2：

>>> def time2(x):return 2*x
>>> M = map(time2, [1,2,3,4,5])
>>> M
<map object at 0x000001AFDC2C57B8>
>>> list(M)
[2, 4, 6, 8, 10]

再比如將字元串中的字元全都轉換成大寫，這次直接將map的結構全部收集到一個列表中：

>>> list( map(str.upper,"abcd") )
['A', 'B', 'C', 'D']

map支持多個元素集合，它會每次從這些元素集合中並行取出一個元素作為函數的參數：

>>> list( map(pow, [1,2,3], [2,3,4]) )
[1, 8, 81]

第一次取出1和2作為pow的參數，所以計算的是pow(1,2)得到1；第二次取出2和3作為pow的參數，所以計算的是pow(2,3)得到8，第三次取出的是3和4，所以計算的是pow(3,4)得到81。

對於map，有幾個註意點：

  1. map可以有多個參數，從第二個參數開始是元素集合，這些元素集合可以是任意可迭代對象，比如內置容器類型、range等
  2. map的第一個參數是想要對每個元素進行操作的函數，可以是已定義的函數，也可以是lambda。它是map的回調函數
    • 如果是已定義的函數，則只需傳遞函數名稱
    • 如果是lambda，則需要指定正確數量的參數
  3. map自身返回的就是迭代器，也就是說它自己是自己的迭代器
  4. map是迭代操作，所以它的工作方式是惰性的，按需一次返回一個數據，而不是收集完所有數據後一次性返回
  5. 所有map操作都能替換成等價的for迴圈，但map的效率比for要高的多，基本能和解析操作的效率差不多

因為map返回的是自身的迭代器，所以可以被for/map/zip/in等迭代工具操作，例如手動迭代：

>>> 2 in map(time2,[1,2,3,4,5])
True

>>> M = map(str.upper,"abcd")
>>> M
<map object at 0x000001AFDC2C5748>
>>> next(M)
'A'
>>> next(M)
'B'
>>> next(M)
'C'
>>> next(M)
'D'
>>> next(M)
Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
StopIteration

例如，使用lambda作為map的第一個回調函數的參數：

>>> M = map(lambda x: x * 2, [2,3,4,5])
>>> list(M)
[4, 6, 8, 10]

由於map操作的是迭代器中的每個元素，所以map一般都可以寫成等價的列表解析操作。

>>> [ x * 2 for x in [1,2,3,4,5] ]
[2, 4, 6, 8, 10]

>>> list( map(lambda x: x * 2, [1,2,3,4,5]) )
[2, 4, 6, 8, 10]

一般來說，如果map中使用了lambda，則map效率要稍低於列表解析，如果沒有使用lambda，則map效率要稍高於列表解析。雖然它們效率差不多，但是如果可以的話，強烈建議使用列表解析，因為列表解析是python中極簡潔、極可讀的編碼方式。

zip

zip()函數可以從一個或多個可迭代對象中並行取出元素進行並行的迭代。它也是返回自身的迭代器。

例如：

>>> L1 = ["one","two","three"]
>>> L2 = [1,2,3]

>>> zip(L1,L2)
<zip object at 0x000001AFDC2D9A08>
>>> list(zip(L1,L2))
[('one', 1), ('two', 2), ('three', 3)]

之所以能並行迭代多個可迭代對象，是因為它同時標記多個可迭代對象的迭代位置。如果zip的多個可迭代對象的長度不同，則以最短的長度為標準，因為zip最多只能標記到最短長度的迭代位置。

因為zip返回的是迭代器，所以可以使用迭代工具去操作zip的結果：

>>> L1 = ["one","two","three"]
>>> L2 = [1,2,3]

>>> ("one",1) in zip(L1,L2)
True

>>> for (x,y) in zip(L1,L2):print(x,"-->",y)
...
one --> 1
two --> 2
three --> 3

zip常用於構建dict，因為它並行從多個迭代對象中取數據：

>>> L1 = ["one","two","three"]
>>> L2 = [1,2,3]

>>> dict(zip(L1,L2))
{'one': 1, 'two': 2, 'three': 3}

需要註意的是，zip可以從任意可迭代對象中取元素，而集合/字典中的元素順序是不定的，所以並行取出來的順序可能不像想象中在位置上那般一一對應。

>>> L1={"one","two","three"}
>>> L2=[1,2,3]
>>> list(zip(L1,L2))
[('one', 1), ('three', 2), ('two', 3)]

filter

Python中的filter函數類似於Perl中的grep，用於從可迭代對象中篩選出元素被函數操作後為True的元素。

filter(function or None, iterable) --> filter object

例如，篩選出列表中字元串元素長度大於2的字元串：

>>> L = ["a","ab","abc","abcd"]
>>> L1 = filter( (lambda x: len(x) > 2), L )
>>> print(list(L1))
['abc', 'abcd']

上面的工作過程是迭代列表L，每取一個元素都放進函數中操作一番，如果這個元素放進函數中使得函數返回真，則保留這個元素，否則丟棄這個元素。

如果filter的函數部分為None，則表示直接從可迭代對象中取出元素為True的元素：

>>> list(filter(None,["a","ab",0,"","c"]))
['a', 'ab', 'c']

filter的返回結果是一個可迭代對象，可以進行迭代操作：

>>> for i in filter( (lambda x: len(x) > 2), L ): print(i)
...
abc
abcd

reduce

reduce的功能非常好用，看下麵的示例：

>>> import functools
>>> functools.reduce(lambda x, y: x+y, [1,2,3,4,5])
15

它的語法為：

reduce(func, sequence[, initial]) -> value

reduce有兩個過程：

  1. 先從sequence中取兩個元素作為func的參數，該函數返回一個結果A。這是初始化的過程
  2. 將結果A與sequence的下一個元素作為func的參數，繼續返回一個結果B，將結果B與下一個元素作為func參數，依次類推，直到迭代完sequence中所有元素

如果給reduce設置了initial參數，則跳過初始化的過程，直接將Initial與sequence的第一個元素作為func的參數。如果沒有給定sequence，而給了Initial，則initial作為直接返回的預設值。

例如，從序列中取出最大值：

>>> reduce( lambda x, y: x if x > y else y, [1,2,3,4,5] )
5

>>> reduce( lambda x, y: x if x>y else y, [1,2,3,4,5],10 )
10

多迭代和單迭代

range()和zip()、map()、filter()稍有不同。range()支持多迭代、而後三者只支持單迭代。

何為單迭代、何為多迭代？多迭代的意思是同一個對象上可以有多個互不影響的獨立迭代器，各迭代器自己記住自己的迭代位置(狀態信息)。單迭代的意思是同一個對象上只能有一個迭代器，即使創建了多個迭代器，它們也是串聯起來互相影響的。

下麵是range()的多迭代特性：

>>> R = range(3)   # 一個range對象R
>>> I1 = iter(R)   # range對象的一個迭代器
>>> I2 = iter(R)   # range對象的第二個迭代器
>>> next(I1)
0
>>> next(I1)
1
>>> next(I2)     # 和I1互不影響
0
>>> next(I2)
1
>>> next(I1)
2

下麵的zip、map、filter單迭代的特性：

# zip的單迭代
>>> Z = zip([1,2,3],[10,11,12]) # 自身是迭代器
>>> I1 = iter(Z)       # 從自身獲取可迭代對象I1
>>> I2 = iter(Z)       # 從自身獲取可迭代對象I2
>>> next(I1)
(1, 10)
>>> next(I2)  # I1和I2迭代的是同一個對象：自身
(2, 11)
>>> next(I1)
(3, 12)

之所以range()支持多迭代，而zip/map/filter都只支持單迭代，是因為：

  1. zip/map/filter返回的是自身的迭代器，它們的返回結果自身同時都實現了__iter__()和__next__()兩個方法，所以無論從它們的返回結果上產生多少個可迭代對象，操作的都是它們的對象自身，從而只支持單迭代
  2. range返回的不是自身迭代器，它的返回結果只實現了__iter__而沒有實現__next__，所以需要通過iter()來生成可迭代對象(迭代器)。無論使用iter()從該返回結果產生多少個可迭代對象，都是互相獨立的可迭代對象，從而支持多迭代

所以一般來說，不是自身迭代器的對象支持多個迭代器，而自身是自身迭代器的對象只支持單個迭代器。

常見的多迭代有range()和那些支持迭代的內置類型，比如字元串、列表、元組等。例如字元串的多迭代：

>>> S = "abc"
>>> for x in S:
...   for y in S:
...     print(x + y, end=" ")
aa ab ac ba bb bc ca cb cc

您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 打造一個健壯高效的網路爬蟲
    反爬 / 封 IP 對於封 IP 的情況，可以分為幾種情況來處理： 首先尋找手機站點、App 站點，如果存在此類站點，反爬會相對較弱。 使用代理，如抓取免費代理、購買付費代理、使用 Tor 代理、Socks 代理等。 在代理的基礎上維護自己的代理池，防止代理浪費，保證實時可用。 搭建 ADSL 撥... ...
  • Ruby入門知識總結
    ruby入門掌握其實很簡單，下麵對我司主要使用的部分入門做一個簡單的歸納總結： 文章結構: 1、變數 2、操作符 3、if~else~end 、unless 4、數組（Array） 5、哈希（Hash） 6、迴圈（each do|變數|） 1、變數操作 變數分為：整數型（int）；浮點型（float ...
  • mybatis在xml文件中處理轉義字元
    mybatis xml格式文件中，不允許出現類似“>”這樣的字元，但是都可以使用符號進行說明，將此類符號不進行解析。或者進行轉義。 ...
  • SpringBoot整合Swagger測試api構建
    @Author:SimpleWu 什麼是Swagger？ Swagger是什麼：THE WORLD’S MOST POPULAR API TOOLING 根據官網的介紹： Swagger Inspector：測試API和生成OpenAPI的開發工具。Swagger Inspector的建立是為瞭解決 ...
  • 笨辦法學Python - 習題 1: 第一個程式
    在windows上安裝完Python環境後，開始按照《笨辦法學Python》書上介紹的章節進行練習。 習題 1: 第一個程式 第一天主要是介紹了Python中輸出函數print的使用方法，但是有一個註意點需要註意的是： Python2中可以不加括弧直接(單/雙)引號輸出,Python3中必須要加括弧 ...
  • 我的Python分析成長之路7
    類 一、編程範式： 1.函數式編程 def 2.面向過程編程 (Procedural Programming) 基本設計思路就是程式一開始是要著手解決一個大的問題，然後把一個大問題分解成很多個小問題或子過程，這些子過程再執行的過程再繼 續分解直到小問題足夠簡單到可以在一個小步驟範圍內解決。 3.面向 ...
  • Java高階語法---Volatile
    背景：聽說Volatile Java高階語法亦是挺進BAT的必經之路。 Volatile： volatile同步機制又涉及Java記憶體模型中的可見性、原子性和有序性，惡補基礎一波。 可見性： 可見性簡單的說是線程之間的可見性，一個線程修改的狀態對另一個線程是可見對，也就是一個線程的修改結果另一個線程 ...
  • Apache2.4+PHP7.3 安裝及整合教程[Windows]
    Apache2.4+PHP7.3 安裝及整合教程 系統環境：Win10 64位 Apache版本：2.4.37 64位 PHP版本：7.3.1 64位 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發（一）：使用.NET MAUI開發第一個安卓APP
    移動開發（一）：使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說，近來想嘗試開發一款安卓APP，考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP，畢竟是使用Visual Studio開發工具，使用起來也比較的順手，結合微軟官方的教程進行了安卓 ...
  • wpf ToggleButton選中效果和一個登錄界面
    前言 QuestPDF 是一個開源 .NET 庫，用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫，它徹底改變了我們生成 PDF 文檔的方 ...
  • 彈幕樹洞項目功能新增篇
    項目地址 項目後端地址： https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址： ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址： http://tree ...
  • 第27篇 sqlserver2022詳細安裝步驟
    話不多說，直接開乾 一.下載 1.官方鏈接下載： https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe，運行開始下載SQL server； 二. ...
  • .NET 開源高性能 MQTT 類庫
    前言 隨著物聯網（IoT）技術的迅猛發展，MQTT（消息隊列遙測傳輸）協議憑藉其輕量級和高效性，已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫，為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog文檔翻譯系列（六） - 可用的接收器、增強器、格式化輸出
    Serilog支持多種接收器用於日誌存儲，增強器用於添加屬性，LogContext管理動態屬性，支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項，適用於不同需求。 ...
  • 警惕 Visual Studio 屬性求值副作用導致邏輯不符合預期
    目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據，爬取信息時需要模擬瀏覽器行為，否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下： 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • [使用目前最新版]HybridCLR6.9.0+YooAsset2.2.4實現純C# Unity熱更新方案 (一)
    1.前言 什麼是熱更新 游戲或者軟體更新時，無需重新下載客戶端進行安裝，而是在應用程式啟動的情況下，在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR，Xlua，ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles，Addressable， ...
  • 在 ASP.NET Core Web API 中使用操作篩選器統一處理通用操作
    本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺，其實像阿裡雲，騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後，它會送 ...
  • 第28篇 如何.net中實現高效可靠數據同步api
    通過以下方式可以高效，並保證數據同步的可靠性 1.API設計 使用RESTful設計，確保API端點明確，並使用適當的HTTP方法（如POST用於創建，PUT用於更新）。 設計清晰的請求和響應模型，以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證，確保接收到的數據符合預期格 ...
所有分類