python語言線程標準庫threading.local源碼解讀

来源:https://www.cnblogs.com/duanming/archive/2019/11/10/11829354.html
-Advertisement-
Play Games

本段源碼可以學習的地方: 1. 考慮到效率問題,可以通過上下文的機制,在屬性被訪問的時候臨時構建; 2. 可以重寫一些魔術方法,比如 __new__ 方法,在調用 object.__new__(cls) 前後進行屬性的一些小設置; 3. 在本庫中使用的重寫魔術方法,上下文這兩種基礎之上,我們可以想... ...


本段源碼可以學習的地方:

1. 考慮到效率問題,可以通過上下文的機制,在屬性被訪問的時候臨時構建;

2. 可以重寫一些魔術方法,比如 __new__ 方法,在調用 object.__new__(cls) 前後進行屬性的一些小設置;

3. 在本庫中使用的重寫魔術方法,上下文這兩種基礎之上,我們可以想到函數裝飾器,類裝飾器,異常捕獲,以及兩種上下文的結構;

靈活運用這些手法,可以讓我們在代碼架構上更上一層,能夠更加省時省力。

  1 from weakref import ref  # ref用在了構造大字典元素元組的第一個位置即 (ref(Thread), 線程字典)
  2 from contextlib import contextmanager  # 上下文管理,用來確保__dict__屬性的存在
  3 from threading import current_thread, RLock
  4 __all__ = ["local"]
  5 
  6 class _localimpl:  # local()._local__impl = _localimpl()  # local()實例的屬性_local__impl就是這個類的實例
  7     """一個管理線程字典的類"""
  8     __slots__ = 'key', 'dicts', 'localargs', 'locallock', '__weakref__'  # _local__impl有這麼多屬性
  9 
 10     def __init__(self):
 11         # 這個self.key是用線上程對象的字典中的key
 12         # self.key使用的一個字元串,這樣既能運行的快,
 13         # 但是通過'_threading_local._localimpl.' + str(id(self)也能保證不會衝突別的屬性
 14 
 15         self.key = '_threading_local._localimpl.' + str(id(self))
 16         #
 17         self.dicts = {}  # 大字典
 18         # 格式是: { id(線程1):(ref(Thread), 線程1自身的字典), id(線程2):(ref(Thread), 線程2自身的字典), ... }
 19 
 20     def get_dict(self):  # 從大字典中拿(ref(Thread), 線程字典), 然後取線程字典
 21         thread = current_thread()
 22         return self.dicts[id(thread)][1]
 23 
 24     def create_dict(self):  # 為當前線程創建一個線程字典,就是(ref(Thread), 線程字典)[1],即元組的第二部分
 25         localdict = {}
 26         key = self.key  # key使用'_threading_local._localimpl.' + str(id(self)
 27         thread = current_thread()  # 當前線程
 28         idt = id(thread)  # 當前線程的id
 29         def local_deleted(_, key=key):  # 這個函數不看  pass
 30             # When the localimpl is deleted, remove the thread attribute.
 31             thread = wrthread()
 32             if thread is not None:
 33                 del thread.__dict__[key]
 34         def thread_deleted(_, idt=idt):  # 這個函數不看 pass
 35             # When the thread is deleted, remove the local dict.
 36             # Note that this is suboptimal if the thread object gets
 37             # caught in a reference loop. We would like to be called
 38             # as soon as the OS-level thread ends instead.
 39             local = wrlocal()
 40             if local is not None:
 41                 dct = local.dicts.pop(idt)
 42         wrlocal = ref(self, local_deleted)
 43         wrthread = ref(thread, thread_deleted)  # 大字典中每一個線程對應的元素的第一個位置: (ref(Thread), 小字典)
 44         thread.__dict__[key] = wrlocal
 45         self.dicts[idt] = wrthread, localdict  # 在大字典中構造: id(thread) : (ref(Thread), 小字典)
 46         return localdict
 47 
 48 
 49 @contextmanager
 50 def _patch(self):
 51     impl = object.__getattribute__(self, '_local__impl')  # 此時的self是local(), 拿local()._local__impl
 52     try:
 53         dct = impl.get_dict()   # 然後從拿到的local()._local__impl調用線程字典管理類的local()._local__impl.get_dict()方法
 54                                 # 從20行到22這個get_dict()方法的定義可以看出來,拿不到會報KeyError的
 55 
 56     except KeyError:  # 如果拿不到報 KeyError之後捕捉
 57         dct = impl.create_dict()  # 然後再通過線程字典管理類臨時創建一個
 58         args, kw = impl.localargs  # 這個時候把拿到
 59         self.__init__(*args, **kw)
 60     with impl.locallock:  # 通過上下文的方式上鎖
 61         object.__setattr__(self, '__dict__', dct)  # 給local() 實例增加__dict__屬性,這個屬性指向大字典中value元組的第二個元素,即線程小字典
 62         yield  # 到目前為止,local()類的兩個屬性都構造完成
 63 
 64 
 65 class local:  # local類
 66     __slots__ = '_local__impl', '__dict__'  # local類有兩個屬性可以訪問
 67 
 68     def __new__(cls, *args, **kw):
 69         if (args or kw) and (cls.__init__ is object.__init__):  # pass不看
 70             raise TypeError("Initialization arguments are not supported")
 71         self = object.__new__(cls)  # pass不看
 72         impl = _localimpl()  # _local_impl屬性對應的是_localimpl類的實例
 73         impl.localargs = (args, kw)  # _local_impl屬性即_localimpl類的實例 的 localargs屬性是一個元組
 74         impl.locallock = RLock()  # pass 不看
 75         object.__setattr__(self, '_local__impl', impl)
 76         # 把_local__impl 增加給local(), 所以:local()._local__impl is ipml 即 _localimp()
 77 
 78         # __slots__規定了local()有兩個屬性,這裡已經設置了一個_local__impl;
 79         # 第二個屬性__dict__當我們以後在訪問的時候使用上下文進行臨時增加,比如第85行
 80 
 81         impl.create_dict()  # 就是local._local__impl.create_dict()
 82         return self  # 返回這個配置好_local__impl屬性的local()實例
 83 
 84     def __getattribute__(self, name):  # 當我們取local()的屬性時
 85         with _patch(self):  # 會通過上下文先把數據準備好
 86             return object.__getattribute__(self, name)  # 在準備好的數據中去拿要拿的屬性name
 87 
 88     def __setattr__(self, name, value):
 89         if name == '__dict__':  # 這個判斷語句是控制local()實例的__dict__屬性只能讀不能被替換
 90             raise AttributeError(
 91                 "%r object attribute '__dict__' is read-only"
 92                 % self.__class__.__name__)
 93         with _patch(self):  # 同理, 通過上下文先把__dict__構造好
 94             return object.__setattr__(self, name, value)  # 然後調用基類的方法設置屬性
 95 
 96     def __delattr__(self, name):  # 刪除屬性,同理,和__setattr__手法相似
 97         if name == '__dict__':   # 這個判斷語句是控制local()實例的__dict__屬性只能讀不能被替換
 98             raise AttributeError(
 99                 "%r object attribute '__dict__' is read-only"
100                 % self.__class__.__name__)
101         with _patch(self):  # 同理, 通過上下文先把__dict__構造好
102             return object.__delattr__(self, name)
103 
104 # 整體架構圖:
105 '''
106 
107                                                                                / ——  key 屬性
108                                                                               /  ——  dicts 屬性, 格式{id(Thread):(ref(Thread), 線程小字典)}
109                         ———— : _local__impl屬性   ----------  是_local類的實例                                                     |
110                       /                                                          —— 其他屬性...                                    |
111                      /                          /—————————————————————————————————————————————————————————————————————————————————/
112     創建一個local實例                           /
113                      \                        /
114                       \                     /
115                         ———— : __dict__屬性  --------  對應的是_local__impl屬性的dicts 中的線程小字典
116 
117 
118 
119 '''

您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • <h1>~</h6>標題系列標簽 解釋:h1到h6 中h1標簽最大,h6標簽最小,逐一遞增。 例如: <h1>標簽</h1> <h2>標簽</h2> <h3>標簽</h3> <h4>標簽</h4> <h5>標簽</h5> <h6>標簽</h6> 顯示效果: 我是h1 我是h2 我是h3 我是h4 我 ...
  • <code> 標簽 解釋:保留輸入的格式空格等不變,原樣顯示在網頁上 例如: <pre> 通知 即日起不再提供公共設施 個店鋪需自行準備。 望周知~!! 2020/10/10 </pre> ...
  • <code> 標簽 解釋:要讓一段電腦代碼顯示在網頁中,那麼這段代碼需要用<code> 標簽包起來,不然他會被當作網頁的代碼被 運行。 例如: <code><img src="" alt=""></code> ...
  • 第一次接觸混合開發,然後碰到了很多H5+api,調用手機相冊,掃碼,保存圖片等。做技術的註定了要終生學習,但學無止境,我們不可能把所有的知識技能都學完了,學精通了再去工作,我們需要在工作中去提升自己,在工作紅去總結去成長。 我項目是用mui加H5+去開發的,所以在調用H5+的api時要等plusre ...
  • 在很多web項目中我們保存的圖片都是後臺的我們負責渲染到頁面上,但是前端也是可以截圖的,可是會有很多出人意料的bug,由於工作中遇到過所以就記錄下來吧。 前提:後臺傳一張二維碼的圖片以及個人頭像名稱性別然後在頁面展示,這很簡單,但是我們需要將二維碼個人頭像名稱性別合成一張圖片保存下來。 工具插件:h ...
  • 前言 在上一篇中,我們通過初步的認識,簡單瞭解 Vue 生命周期的八個階段,以及可以應用在之後的開發中,針對不同的階段的鉤子採取不同的操作,更好的實現我們的業務代碼,處理更加複雜的業務邏輯。 而在這一篇中,我們將通過配置vue的開發環境以及搭建項目,進一步的學習vue在開發中的使用方式。 對於開發v ...
  • 23種GoF設計模式概述 在前面,我們對 GoF 的 23 種設計模式進行了分類,這裡先對各個設計模式的功能進行簡要介紹,以便有個大概瞭解。後面的章節再進行詳細介紹。 創建型模式 關註於怎麼創建對象的創建型模式,他們將對象的創建與使用相互分離,對象的使用者無需關心如何創建對象,只知道怎麼使用就行,以 ...
  • 1 基礎概念 1.1. 什麼是事務 什麼是事務?舉個生活的例子 :你去小賣部買東西,“一手交錢,一手交貨“就是一個事務的例子,交錢和交貨必須全部成功,事務才算成功,任一個活動失敗,事務將撤銷所有已成功的活動。明白上述例子,再來看事務的定義 :事務可以看做是一次大的活動,它由不同的小活動組成,這些活動 ...
一周排行
    -Advertisement-
    Play Games
  • JWT(JSON Web Token)是一種用於在網路應用之間傳遞信息的開放標準(RFC 7519)。它使用 JSON 對象在安全可靠的方式下傳遞信息,通常用於身份驗證和信息交換。 在Web API中,JWT通常用於對用戶進行身份驗證和授權。當用戶登錄成功後,伺服器會生成一個Token並返回給客戶端 ...
  • 老周在幾個世紀前曾寫過樹莓派相關的 iOT 水文,之所以沒寫 Nano Framework 相關的內容,是因為那時候這貨還不成熟,可玩性不高。不過,這貨現在已經相對完善,老周都把它用在項目上了——第一個是自製的智能插座,這個某寶上50多塊可以買到,搜“esp32 插座”就能找到。一種是 86 型盒子 ...
  • 引言 上一篇我們創建了一個Sample.Api項目和Sample.Repository,並且帶大家熟悉了一下Moq的概念,這一章我們來實戰一下在xUnit項目使用依賴註入。 Xunit.DependencyInjection Xunit.DependencyInjection 是一個用於 xUnit ...
  • 在 Avalonia 中,樣式是定義控制項外觀的一種方式,而控制項主題則是一組樣式和資源,用於定義應用程式的整體外觀和感覺。本文將深入探討這些概念,並提供示例代碼以幫助您更好地理解它們。 樣式是什麼? 樣式是一組屬性,用於定義控制項的外觀。它們可以包括背景色、邊框、字體樣式等。在 Avalonia 中,樣 ...
  • 在處理大型Excel工作簿時,有時候我們需要在工作表中凍結窗格,這樣可以在滾動查看數據的同時保持某些行或列固定不動。凍結窗格可以幫助我們更容易地導航和理解複雜的數據集。相反,當你不需要凍結窗格時,你可能需要解凍它們以獲得完整的視野。 下麵將介紹如何使用免費.NET庫通過C#實現凍結Excel視窗以鎖 ...
  • .NET 部署 IIS 的簡單步驟一: 下載 dotnet-hosting-x.y.z-win.exe ,下載地址:.NET Downloads (Linux, macOS, and Windows) (microsoft.com) .NET 部署 IIS 的簡單步驟二: 選擇對應的版本,點擊進入詳 ...
  • 拓展閱讀 資料庫設計工具-08-概覽 資料庫設計工具-08-powerdesigner 資料庫設計工具-09-mysql workbench 資料庫設計工具-10-dbdesign 資料庫設計工具-11-dbeaver 資料庫設計工具-12-pgmodeler 資料庫設計工具-13-erdplus ...
  • 初識STL STL,(Standard Template Library),即"標準模板庫",由惠普實驗室開發,STL中提供了非常多對信息學奧賽很有用的東西。 vector vetor是STL中的一個容器,可以看作一個不定長的數組,其基本形式為: vector<數據類型> 名字; 如: vector ...
  • 前言 最近自己做了個 Falsk 小項目,在部署上伺服器的時候,發現雖然不乏相關教程,但大多都是將自己項目代碼複製出來,不講核心邏輯,不太簡潔,於是將自己部署的經驗寫成內容分享出來。 uWSGI 簡介 uWSGI: 一種實現了多種協議(包括 uwsgi、http)並能提供伺服器搭建功能的 Pytho ...
  • 1 文本Embedding 將整個文本轉化為實數向量的技術。 Embedding優點是可將離散的詞語或句子轉化為連續的向量,就可用數學方法來處理詞語或句子,捕捉到文本的語義信息,文本和文本的關係信息。 ◉ 優質的Embedding通常會讓語義相似的文本在空間中彼此接近 ◉ 優質的Embedding相 ...