国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 編程 > Python > 正文

Python基礎教程之利用期物處理并發

2020-01-04 15:27:17
字體:
來源:轉載
供稿:網友

前言

抨擊線程的往往是系統程序員,他們考慮的使用場景對一般的應用程序員來說,也許一生都不會遇到……應用程序員遇到的使用場景,99% 的情況下只需知道如何派生一堆獨立的線程,然后用隊列收集結果。

本文章記錄了本人在學習Python基礎之控制流程篇的重點知識及個人心得,打算入門Python的朋友們可以來一起學習并交流。

本文重點:

      1、掌握異步編程的相關概念;

      2、了解期物future的概念、意義和使用方法;

      3、了解Python中的阻塞型I/O函數釋放GIL的特點。

一、異步編程相關概念

阻塞:程序未得到所需計算資源時被掛起的狀態。換句話說,程序在等待某個操作完成期間,自身無法繼續干別的事情,則稱該程序在該操作上是阻塞的。

并發:描述的是程序的組織結構。指程序要被設計成多個可獨立執行的子任務。并發以利用有限的計算機資源使多個任務可以被實時或近實時執行為目的。

并行:指的是多任務同時執行的程序狀態,以利用多核CPU加速完成多任務為目的。

異步:為完成某個任務,不同程序單元之間過程中無需通信協調,也能完成任務的方式。

不相關的程序單元之間可以是異步的。簡言之,異步意味著無序。

異步編程:以進程、線程、協程、函數/方法作為執行任務的基本單位,結合回調,事件循環、信號量等機制,以提高整體執行效率和并發能力的編程方式。

二、期物

就下載國旗為目標實現的三個客戶端中,兩個HTTP并發客戶端比依序下載的腳本性能高很多。

由此說明使用并發可以高效處理網絡I/O。

期物(future)指一種對象,表示異步執行的操作。

期物對象:concurrent.futures.Future或asyncio.Future類的實例。

三大方法:

  • Executor.submit():創建期物。
  • concurrent.futures.as_completed():迭代運行結束的期物,返回一個迭代器。
  • Executor.map(): 處理參數不同的同一個可調用對象。

小結:Executor.submit()加futures.as_completed()的組合比Executor.map()更靈活,因為submit()能處理不同的可調用對象和參數。

concurrent.futures模塊的主要特色是ThreadPoolExecutor和ProcessPoolExecutor類,這兩個類實現的接口能分別在不同的線程或進程中執行可調用的對象。

注意:通常情況下自己不應該創建期物,而只能由并發框架(concurrent.futures或asyncio)實例化。

實例:concurrent.futures模塊應用

from concurrent import futuresfrom flags import save_flag, get_flag, show, mainMAX_WORKERS = 20def download_one(cc):   image = get_flag(cc)  show(cc)  save_flag(image, cc.lower() + '.gif')  return ccdef download_many(cc_list):  workers = min(MAX_WORKERS, len(cc_list))   with futures.ThreadPoolExecutor(workers) as executor:     res = executor.map(download_one, sorted(cc_list))   return len(list(res))if __name__ == '__main__':  main(download_many) 

三、阻塞性I/O與GIL

Python標準庫中所有阻塞型I/O函數都會釋放全局解釋器鎖(GIL),允許其他線程運行。

因此盡管有GIL,Python線程仍然適合在I/O密集型系統使用。

四、線程和多進程的替代方案

對CPU密集型工作來說,要啟動多個進程,規避GIL。

創建多進程最簡單的方式是使用futures.ProcessPoolExecutor類。

threading和multiprocessing模塊:是Python中多線程和多進程并發的低層實現。

總結

以上就是這篇文章的全部內容了,希望本文的內容對大家的學習或者工作具有一定的參考學習價值,如果有疑問大家可以留言交流,謝謝大家對VEVB武林網的支持。


注:相關教程知識閱讀請移步到python教程頻道。
發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
主站蜘蛛池模板: 呼伦贝尔市| 西乌珠穆沁旗| 武宁县| 奇台县| 凤冈县| 泰兴市| 鄱阳县| 延安市| 鱼台县| 蕲春县| 全椒县| 南康市| 曲阜市| 河南省| 福建省| 横峰县| 历史| 大安市| 英吉沙县| 隆德县| 合肥市| 林甸县| 台东市| 海晏县| 扶余县| 嘉义县| 辽宁省| 郑州市| 山东省| 仙居县| 云阳县| 中阳县| 滨海县| 通江县| 随州市| 师宗县| 望奎县| 秦皇岛市| 天镇县| 确山县| 渝北区|