我的Go併發之旅、01 併發哲學與併發原語

来源:https://www.cnblogs.com/linxiaoxu/archive/2022/09/18/16704062.html
-Advertisement-
Play Games

我的Go併發之旅。本節介紹併發的基礎知識,上下文、原語、競爭條件、原子性、記憶體訪問同步、死鎖、併發與並行、併發哲學。 ...


註:本文所有函數名為中文名,並不符合代碼規範,僅供讀者理解參考。

上下文

上下文(Context)代表了程式(也可以是進程,操作系統,機器)運行時的環境和狀態,聯繫程式整個生命周期與資源調用,是程式可以訪問到的所有資源的總和,資源可以是一個變數,也可以是一個對象的引用。

上下文切換

所謂的上下文切換(context switch),指的是發生進程調度(進程切換)時,內核(kernel)要把當前進程的狀態和數據保存起來以備以後使用,同時把之前保存的進程的相關狀態調出來,這樣新調度出來的進程才能運行。

原語

原語,一般是指由若幹條指令組成的程式段,用來實現某個特定功能,在執行過程中不可被中斷。

電腦是一門人造科學,因此真正意義上的“原語”(Primitive)是不存在的。操作系統層面上的“原語”(比如 write 之類的系統調用)對程式員來講的確是不可分割的最小單位,但是這些系統調用本身還是用好幾句彙編語句組成的(對於 Linux 來說是 C 語言)。可能有人要說到了機器代碼這一級就不能再分了,但事實上一條機器指令也是由好幾個組合邏輯信號構成的。同樣的道理,控制信號也不過是無數電子在器件內部漂移的結果。

因此定義“原語”的前提是觀察者所處的位置上下文)。一旦規定了觀察者的位置和觀察的角度,比如就在操作系統的這層上,read,write,wait這些個系統調用自然就是最“原始”的辭彙,這也是為什麼“原語”會在操作系統中頻繁出現的緣故。

上下文也可以被定義為一個操作被認為是原子性的界限。

競爭條件

兩個或多個操作必須按正確的順序執行,而程式並未保證這個順序,就會發生競爭條件。

大多數情況下,競爭條件會出現在數據競爭中,一個併發操作嘗試讀取一個變數,而在某個不確定的時間,另一個併發操作視圖寫入同一個變數。因為開發人員總是用順序性的思維來思考問題,他們總假設某行代碼會先於另一行代碼執行。

func 競爭條件() {
	var data int
	go func() {
		data++
	}()
	if data == 0 {
		fmt.Println("Value", data)
	}
}

在這段代碼中會出現三種可能性,可以根據 go程(goroutine)、if判斷、列印輸出執行的順序判斷。

  • if、列印、go程 => Value 0
  • if、go程、列印 => Value 1
  • go程、if => 跳過列印,無輸出

僅僅幾行代碼就給程式帶來了巨大的不確定性。

有時,某些程式員會寫出一種看似解決了問題的“方案”,就是添加 time.Sleep,但是這種方案並不可靠!通過顯式休眠的方式只是在概率上增加了邏輯的正確性,但不會真正變成邏輯上的正確。休眠時間也會影響程式的運行效果!

原子性

某些東西被認為是原子的,或者具有原子性的時候,這意味著在它運行的環境中,它是不可分割或不可中斷的。在你所定義的上下文中,原子的東西將被完整的運行,在這種情況下不會同時發生任何事情。

在考慮原子性時,經常第一件需要做的事就是定義上下文或範圍,然後再考慮這些操作是否是原子性的。

當一個東西是原子的,說明它在併發環境中是安全的。而大多數語句不是原子的,更不用說函數、方法和程式了,所以為了構建邏輯正確的程式,需要我們做記憶體訪問同步,使用一系列操作來強制保持原子性。

記憶體訪問同步

臨界區:程式中需要獨占訪問共用資源的部分。(可以理解成讀寫共用資源的代碼段)

正如前面的例子,保護程式臨界區的一個方法是在臨界區之間記憶體訪問做同步。具體做法是添加一個互斥鎖。

func 競爭條件_互斥鎖() {
	var lock sync.Mutex
	var data int
	go func() {
		lock.Lock()
		data++
		lock.Unlock()
	}()
	lock.Lock()
	if data == 0 {
		fmt.Println("Value", data)
	} else {
		fmt.Println("Value", data)
	}
	lock.Unlock()
}

如果你發現你的代碼中有臨界區,那就添加互斥鎖,保證各個臨界區對共用資源(data)的獨占訪問權,從而對記憶體的訪問進行了同步。但這僅僅解決了數據競爭,沒有解決競爭條件 !這種方式同步對記憶體的訪問有性能上的問題。

死鎖

所有併發進程彼此等待。

活鎖

正在主動執行併發操作的程式,但無法向前推進程式狀態。

饑餓

在任何情況下,併發進程都無法獲得執行工作所需的所有資源

通常意味著有一個或多個貪婪的併發進程,不公平地阻止(貪婪地搶占鎖,以完成整個工作迴圈(通常是不必要地擴大其持有共用鎖上的臨界區))一個或多個併發進程以儘可能有效地完成工作。

饑餓也可能產生於 CPU、記憶體、文件句柄、資料庫連接,任何必須共用的資源都是有可能產生饑餓的原因。

找到同步訪問記憶體的平衡點

同步訪問記憶體代價是昂貴的,所以將鎖擴展到臨界區外是有利的,但是會產生前面的饑餓問題。

需要在粗粒度和細粒度同步之間找到一個平衡點。

一般經驗是將記憶體訪問同步限制在關鍵部分,不擴展到臨界區外;直到同步成為性能問題,再擴展範圍。

給併發函數註釋

  • 誰負責併發,是調用者負責,還是函數自己負責。
  • 如何利用併發原語解決這個問題的。比如遞歸調用。
  • 誰負責同步,調用者負責記憶體訪問同步還是結構體內部處理。

函數可以採用純函數式方法,儘可能消除同步的問題。

函數最好返回一個只讀的channel,而不是傳入參數的指針,這樣更具有明確性。

併發與並行

併發屬於代碼,並行屬於一個運行中的程式的屬性。

並行的"同時"是同一時刻可以多個進程在運行(處於running),併發的"同時"是經過上下文快速切換,使得看上去多個進程同時都在運行的現象,是一種OS欺騙用戶的現象

實際上,當程式中寫下多進程或多線程代碼時,這意味著的是併發而不是並行。併發是因為多進程/多線程都是需要去完成的任務,不並行是因為並行與否由操作系統的調度器決定,可能會讓多個進程/線程被調度到同一個CPU核心上。只不過調度演算法會儘量讓不同進程/線程使用不同的CPU核心,所以在實際使用中幾乎總是會並行,但卻不能以100%的角度去保證會並行。也就是說,並行與否程式員無法控制,只能讓操作系統決定

CSP

通信順序進程。一個進程的輸出應該直接流向另一個進程的輸入。

Go魅力

一般編程語言會把它們的抽象鏈結束在系統線程和記憶體訪問同步的層級

但是Go語言採取了不同的路線,使用goroutine和channel代替這些概念。goroutine把我們從必須按照並行的思考方式中解放出來,作為替代,他允許我們按照更為自然的等級對問題進行建模。Go語言的運行時自動地將goroutine映射到系統的線程上,併為我們管理它們之間的調度(智能分配OS線程)。

Go併發哲學

不要通過共用記憶體進行通信,通過通信來共用記憶體。在面對不同場景時,選擇不同的方式。

image-20220918010635068

數據所有權:併發程式安全就是保證同時只有一個併發上下文擁有數據的所有權,通過channel可以把數據傳遞給其他go程,解耦生產者和消費者。

追求簡潔,儘量使用channel,並且認為goroutine的使用是沒有成本的。

參考書籍

  • 《Go語言併發之道》Katherine CoxBuday

  • 《Go語言核心編程》李文塔

  • 《Go語言高級編程》柴樹彬、曹春輝


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 超級熱鍵可通過簡單編程 —— 自動化完成複雜操作,提升效率。 ▶ 快速上手 本教程需要一個很小的開源軟體 ImTip ( 體積 639 KB ), 請右鍵點開 ImTip 托盤菜單,然後點擊「管理超級熱鍵」: 然後將熱鍵配置改為如下代碼,並且勾選「啟用超級熱鍵」,再點擊「保存」按鈕使熱鍵生效。 // ...
  • 2022-09-17 NoSQL(not only SQL)的介紹: 是一種非關係型資料庫。 NoSQL常用的產品種類: Redis Mongodb Hbase hadoop Redis常用的場景: (1)可用於緩衝,即記憶體裡面,速度快。 (2)用於社交類軟體,一個小例子:抖音點贊,如果是放在關係型 ...
  • MySQL的通用日誌: 用來記錄對資料庫的通用操作,包括錯誤的sql語句等信息。 通用日誌可以保存在:file(預設值)或 table(mysql.general_log表) mysql通用日誌的設置: general_log=ON|OFF 是否啟用通用日誌 general_log_file=HOS ...
  • 網路配置 cd /etc/sysconfig/network-scripts/ ls vi ifcfg-ens33 修改網路配置 TYPE=Ethernet PROXY_METHOD=none BROWSER_ONLY=no BOOTPROTO=static #設置靜態 IPADDR=192.168 ...
  • @(目錄標題) 為什麼需要響應式網頁 點擊打開視頻講解更加詳細 隨著網頁數量和質量的上升,以及設備種類和數量的增加,不同設備查看不同網頁導致的縮放問題、排版問題等一系列前端問題越發明顯。 想要解決他們,我們可以為不同類型的設備編寫不同樣式的代碼,做不同版本的測試。 然而這樣做有兩個弊端: 工作量過大 ...
  • 自定義模塊 為什麼要模塊?模塊化源代碼能給我們帶來什麼好處? 試想一個巨無霸網購平臺,在沒有模塊化的情況下,如果出現bug,程式員就要在幾百萬行代碼里調試,導致後期維護成本上升,為瞭解決問題,模塊化按功能切分,把大問題轉換成小問題,讓每個模塊獨立運營,通過介面對外開放,讓程式統一調用,降低程式出錯的 ...
  • 在講到new關鍵字的執行過程之前,有幾個關於構造函數和對象之間的關係和構造函數的特點需要重點掌握: ###1.構造函數和對象的關係和區別: 構造函數:構造函數抽象了對象的公共的屬性和方法,封裝到了函數裡面,它泛指的是某一大類; 對象:通過new函數創建對象,也稱為對象藉助構造函數完成的對象實例化。 ...
  • 蒼穹之邊,浩瀚之摯,眰恦之美; 悟心悟性,善始善終,惟善惟道! —— 朝槿《朝槿兮年說》 寫在開頭 在Java領域中, 尤其是在併發編程領域,對於多線程併發執行一直有兩大核心問題:同步和互斥。其中: 互斥(Mutual Exclusion):一個公共資源同一時刻只能被一個進程或線程使用,多個進程或線 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...