python 之 併發編程(守護進程、互斥鎖、IPC通信機制)

来源:https://www.cnblogs.com/mylu/archive/2019/07/19/11215797.html
-Advertisement-
Play Games

9.5 守護進程 主進程創建守護進程 其一:守護進程會在主進程代碼執行結束後就立即終止 其二:守護進程內無法再開啟子進程,否則拋出異常:AssertionError: daemonic processes are not allowed to have children 註意:進程之間是互相獨立的, ...


9.5 守護進程

主進程創建守護進程

  其一:守護進程會在主進程代碼執行結束後就立即終止

  其二:守護進程內無法再開啟子進程,否則拋出異常:AssertionError: daemonic processes are not allowed to have children

註意:進程之間是互相獨立的,主進程代碼運行結束,守護進程隨即終止

  • p.daemon:預設值為False,如果設為True,代表p為後臺運行的守護進程,當p的父進程終止時,p也隨之終止,並且設定為True後,p不能創建自己的新進程,必須在p.start()之前設置

from multiprocessing import Process
​
def task(name):
    print('%s is running' % name)
    time.sleep(3)
​
if __name__ == '__main__':
    obj = Process(target=task, args=('egon',))
    obj.daemon=True         #設置obj為守護進程,並且父進程代碼執行結束,obj即終止運行
    obj.start()             # 發送信號給操作系統
    print('')

9.6 互斥鎖

互斥鎖用來將併發編程串列,犧牲了效率而保證了數據安全

強調:必須是lock.acquire()一次,然後 lock.release()釋放一次,才能繼續lock.acquire(),不能連續的lock.acquire()

互斥鎖和 join的區別:

二者的原理都是一樣,都是將併發變成串列,從而保證有序

區別一:join是按照人為指定的順序執行,而互斥鎖是進程平等地競爭,誰先搶到誰執行,一個人拿到鎖,其餘人都等待

from multiprocessing import Process,Lock
import random
​
mutex=Lock()
def task1(lock):
    lock.acquire() 
    print('task1:名字是egon')
    print('task1:性別是male')
    lock.release()
    
def task2(lock):
    lock.acquire()
    print('task2:名字是alex')
    print('task2:性別是male')
    lock.release()
    
def task3(lock):
    lock.acquire()
    print('task3:名字是lxx')
    print('task3:性別是female')
    lock.release()
    
if __name__ == '__main__':
    p1=Process(target=task1,args=(mutex,))
    p2=Process(target=task2,args=(mutex,))
    p3=Process(target=task3,args=(mutex,))
    p1.start()# p1.start()
    p2.start()# p1.join()
    p3.start()# p2.start()
             # p2.join()
             # p3.start()
             # p3.join()

9.61 模擬搶票

互斥鎖和 join的區別二:

互斥鎖可以讓一部分代碼(修改共用數據的代碼)串列,而join只能將代碼整體串列

import json
import time
import random
import os
from multiprocessing import Process,Lock
​
mutex=Lock()
def search():
    time.sleep(random.randint(1,3))
    with open('db.json','r',encoding='utf-8') as f:
        dic=json.load(f)
        print('%s 剩餘票數:%s' %(os.getpid(),dic['count']))
​
def get():
    with open('db.json','r',encoding='utf-8') as f:
        dic=json.load(f)
    if dic['count'] > 0:
        dic['count']-=1
        with open('db.json','w',encoding='utf-8') as f:
            json.dump(dic,f)
        print('%s 購票成功' %os.getpid())
​
def task(lock):
    search()
    lock.acquire()
    get()
    lock.release()
​
if __name__ == '__main__':
    for i in range(10):
        p=Process(target=task,args=(mutex,))
        p.start()
        # p.join()

9.7 IPC通信機制

進程彼此之間互相隔離,要實現進程間通信(IPC),multiprocessing模塊支持兩種形式:隊列和管道,這兩種方式都是使用消息傳遞的

進程之間通信必須找到一種介質,該介質必須滿足: 1、是所有進程共用的 2、必須是記憶體空間 附加:幫我們自動處理好鎖的問題

from multiprocessing import Process,Manager,Lock
import time
​
mutex=Lock()
def task(dic,lock):
    lock.acquire()
    temp=dic['num']
    time.sleep(0.1)
    dic['num']=temp-1
    lock.release()
​
if __name__ == '__main__':
    m=Manager()
    dic=m.dict({'num':10})
    l=[]
    for i in range(10):
        p=Process(target=task,args=(dic,mutex))
        l.append(p)
        p.start()
    for p in l:
        p.join()
    print(dic)      #{'num': 0}

9.71創建隊列的類Queue

底層就是以管道和鎖定的方式實現:

隊列 (管道+鎖) :1、共用的空間 2、是記憶體空間 3、自動幫我們處理好鎖定問題

  • Queue([maxsize]):創建共用的進程隊列,Queue是多進程安全的隊列,可以使用Queue實現多進程之間的數據傳遞。

  • maxsize是隊列中允許最大項數,省略則無大小限制。

from multiprocessing import Queue
q=Queue(3)      #maxsize=3
q.put('first')
q.put({'second':None})
q.put('')
​
# q.put(4) #阻塞
print(q.get())  #first
print(q.get())  #{'second': None}
print(q.get())  #

強調: 1、隊列用來存成進程之間溝通的消息,數據量不應該過大 2、maxsize的值超過的記憶體限制就變得毫無意義

瞭解:block=True(預設值)、timeout

q=Queue(1)
q.put('first',block=False)      #q.put方法用以插入數據到隊列中
q.put('fourth',block=False/True)#queue.Full/一直等
​
q.put('first',block=True)
q.put('fourth',block=True,timeout=3)#等3秒後報錯queue.Full
​
q.get(block=False)#q.get方法可以從隊列讀取並且刪除一個元素
q.get(block=False)#queue.Empty
​
q.get(block=True)
q.get(block=True,timeout=2)#等2秒後報錯queue.Empty

您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 轉載自:https://blog.csdn.net/JamesPaul32/article/details/80775211 model field 類型 1、AutoField() 自增的IntegerField,通常不用自己設置,若沒有設置主鍵,Django會自動添加它為主鍵欄位,Django會 ...
  • 可以實現從客戶端輸入賬號和密碼然後發送到伺服器進行驗證,實現用戶登入校正操作。 伺服器: 客戶端: 經過一番排查錯誤,總算是勉強實現了預期的功能。以後繼續完善和添加新的功能! ...
  • #include<cstdio> 頭文件#include包含 <頭文件名稱> #include<iostream> 需要頭文件裡面的功能 cstdio,iostream 包含c++最基本的功能 using namespace std; 激活頭文件裡面的功能 有一個分號 空行是可以隨意控制 int m ...
  • eval()函數將公式字元串轉換成公式 eval()函數實現list、dict、tuple、str之間的轉化 ...
  • 12.函數名的使用 函數是第一類對象 1. 函數名可以當做值被賦值給變數 2. 函數名可以當做元素存放在容器中: 3. 函數名可以當做函數的參數 4. 函數名可以當做函數的返回值 13.格式化f: python3.6版本及以上可以使用 14.遞歸: 特點:不斷調用自己本身 1. 死遞歸 不斷調用自己 ...
  • concurrent.futures模塊簡單使用(線程池,進程池) ...
  • Django基礎五之django模型層(一)單表操作 一 ORM簡介 MVC或者MVC框架中包括一個重要的部分,就是ORM,它實現了數據模型與資料庫的解耦,即數據模型的設計不需要依賴於特定的資料庫,通過簡單的配置就可以輕鬆更換資料庫,這極大的減輕了開發人員的工作量,不需要面對因資料庫變更而導致的無效 ...
  • [TOC] 題目 "戳" 思路 tarjan求割點 "不會的戳(不知道好不好自己康康吧)" $Code$ cpp include include include include include define min_(a,b) a b?b:a; define MAXN 100010 int n,m, ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...