多線程編程學習筆記——使用併發集合(一)

来源:https://www.cnblogs.com/chillsrc/archive/2018/01/02/8177807.html
-Advertisement-
Play Games

並行演算法有可能非常複雜,並且或多或少涵蓋了這些並行集合。線程安全並不是沒有代價的。比起System.Collections和System.Collections.Generic命名空間中的經典列表 、集合和數組來說,併發集合會有更大的開銷,因此,應該只在需要從多個任務中併發訪問集合的時候才使用併發集... ...


 

接上文 多線程編程學習筆記——async和await(一)

 

接上文 多線程編程學習筆記——async和await(二)

 

接上文 多線程編程學習筆記——async和await(三)

 

        編程需要對基本的數據結構和演算法有所瞭解。程式員為併發情況 選擇最合適 的數據結構,那就需要知道演算法運行時間、空間複雜度等。

        對於並行計算,我們需要使用適當的數據結構,這些數據結構需要具備可伸縮性,儘可能地避免死鎖,同時還能提供線程安全的訪問。.Net Framework 4.0引入了System.Collections.Concurrent命名空間,其中包含了一些適合併發計算的數據結構。

  1. ConcurrentQueue,這個集合使用了原子的比較和交換(CAS)操作,使用SpinWait來保證線程安全。它實現了一個先進先出(FIFO)的集合,就是說元素出隊列的順序與加入隊列的順序是一樣的。可以調用enqueue文獻向隊列中加入元素,使用TryDequeue方法試圖取出隊列中的第一個元素,使用TryPeek方法則試圖得到第一個元素但並不從隊列中刪除此元素。
  2. ConCurrentStack的實現也沒有使用任何鎖,只採用了CAS操作。它是一個後進先出(LIFO)的集合,這意味著最近添加的元素會先返回。可以使用Push和PushRange方法添加元素,使用TryPop和TryPopRange方法獲取元素,以及使用TryPeek方法檢查元素。
  3. ConcurrentBag是一個支持重覆元素的無序集合。它針對這樣以下情況 進行了優化,即多個線程以這樣的方式工作:每個線程產生和消費自己的任務,極少與其他線程的任務交互(如果要交互則使用鎖)。添加元素使用add方法,檢查元素使用TryPeek方法,獲取元素使用TryTake方法。
  4. ConcurrentDictionary是一個線程安全的字典集合的實現。對於讀操作無需使用鎖。但是對於寫操作則需要鎖。這個併發字典使用多個鎖,在字典桶之上實現了一個細粒度的鎖模型。使用參數 concurrencyLevel可以在構造函數 中定義鎖的數量,這意味著預估的線程數量將併發地更新這個字典。

         註:由於併發字典使用鎖,所以沒有必要請避免使用以下操作:Count、IsEmpty、Keys、Values、CopyTo及ToArray。

       5. BlockingCollection是對IProducerConsumerCollection泛型介面的實現 的一個高級封裝。它有很多先進的功能來實現管道場景,即當你有一些步驟需要使用之前步驟運行的結果時。BlockingCollectione類支持如下功能:分場 、調整內部集合容量、取消集合操作、從多個塊集合中獲取元素。

          並行演算法有可能非常複雜,並且或多或少涵蓋了這些並行集合。線程安全並不是沒有代價的。比起System.Collections和System.Collections.Generic命名空間中的經典列表 、集合和數組來說,併發集合會有更大的開銷,因此,應該只在需要從多個任務中併發訪問集合的時候才使用併發集合。在中等代碼中使用併發集合沒有意義,因為它們會增加無謂的開銷。下麵我們使用最簡單的例子來學習這些並行集合。

 

一、   使用ConcurrentDictionary

     本示例展示了一個非常簡單的場景,比較在單線程環境中使用通常的字典集合與使用併發字典的性能。

 1.程式示例代碼,如下。

using System;
using System.Collections.Generic;
using System.Linq;
using System.Text;
using System.Threading.Tasks;
using System.Collections.Concurrent;
using System.Diagnostics; 

namespace ThreadCollectionDemo
{
    class Program
    {

        const string item = "Dict Name";
        public static string CurrentItem;
        static double time1;
        static void Main(string[] args)
        {
            Console.WriteLine(string.Format("-----  ConcurrentDictionary 操作----"));
            var concurrentDict = new ConcurrentDictionary<int, string>();
            var dict = new Dictionary<int, string>();
            var sw = new Stopwatch();
            sw.Start();

            //普通字典,100萬次迴圈
            for (int i = 0; i < 1000000; i++)
            {
                lock (dict)
                {
                    dict[i] = string.Format("{0} {1}", item, i);
                }
            }

            sw.Stop();
            Console.WriteLine(string.Format("對普通字典集合(Dictionary) 進行100萬次寫操作共用時間:{0}----",sw.Elapsed));
            time1 = sw.Elapsed.TotalMilliseconds;
            sw.Restart();
            for (int i = 0; i < 1000000; i++)
            {
                concurrentDict[i] = string.Format("{0} {1}", item, i);          

            }

            sw.Stop();
            Console.WriteLine(string.Format("對並行字典集合(ConcurrentDictionary) 進行100萬次寫操作共用時間:{0}", sw.Elapsed));

            Console.WriteLine(string.Format("寫操作  普通字典/並行字典 = {0}", time1/1.0/sw.Elapsed.TotalMilliseconds)); 

            Console.WriteLine();
           sw.Restart();

            for (int i = 0; i < 1000000; i++)
            {
                lock (dict)

                {
                    CurrentItem = dict[i];

                }

            }

            sw.Stop();
            Console.WriteLine(string.Format("對普通字典集合(Dictionary) 進行100萬次讀操作共用時間:{0}----", sw.Elapsed));
            time1 = sw.Elapsed.TotalMilliseconds;
            sw.Restart();
 

            for (int i = 0; i < 1000000; i++)

            {           
    CurrentItem= concurrentDict[i];
            }

            sw.Stop();
            Console.WriteLine(string.Format("對並行字典集合(ConcurrentDictionary) 進行100萬次讀操作共用時間:{0}----", sw.Elapsed));

            Console.WriteLine(string.Format("讀操作  普通字典/並行字典 = {0}", time1 / 1.0 / sw.Elapsed.TotalMilliseconds));
            //多線程並行讀取數據   

            sw.Restart();
            Task[] process = new Task[4];
            for (int i = 0; i < 4; i++)
            {               
                process[i ] = Task.Run(() => Get(concurrentDict, i));

            }

            Task.WhenAll(process);
            sw.Stop();
            Console.WriteLine(string.Format("多線程對並行字典集合(ConcurrentDictionary) 進行100萬次讀操作共用時間:{0}", sw.Elapsed));

            Console.WriteLine(string.Format("讀操作  普通字典/多線程讀並行字典 = {0}", time1 / 1.0 / sw.Elapsed.TotalMilliseconds));
            Console.Read();

        }

        private static void Get(ConcurrentDictionary<int,string> dict,int index)
        {
            for (int i = 0; i < 1000000; i += 4)
            {
                if (i%4==index)
                {
                    string s = dict[i];
                }             

            }   

        }
    }

}

2.單線程情況下,程式運行結果,如下圖。

 

       當程式啟動時我們創建了兩個集合,其中一個是標準的字典集合,另一個是新的併發字典集合。然後採用鎖的機制向標準的字典中添加元素,並測量完成100萬次的時間。同時採用同樣的場景來測量ConcurrentDictionary的性能 ,最後 比較從兩個集合中獲取值 的性能。

      通過上面的比較,我們發現ConcurrentDictionary寫操作比使用鎖的通常字典要慢的多,而讀操作則要快些。因此對字典需要大量的線程安全的讀操作,ConcurrentDictionary是最好的選擇。

      最後,我們使用4個線程同時讀ConcurrentDictionary,則會發現這個字典的性能更好。

     在main方法中添加一個四線程的讀字典的代碼。如下。

 //多線程並行讀取數據        

            sw.Restart();
            Task[] process = new Task[4];
            for (int i = 0; i < 4; i++)
            {             

                process[i ] = Task.Run(() => Get(concurrentDict, i));
            }
            Task.WhenAll(process); 
            sw.Stop();
            Console.WriteLine(string.Format("多線程對並行字典集合(ConcurrentDictionary) 進行100萬次讀操作共用時間:{0}", sw.Elapsed));
            Console.WriteLine(string.Format("讀操作  普通字典/多線程讀並行字典 = {0}", time1 / 1.0 / sw.Elapsed.TotalMilliseconds));



  

        private static void Get(ConcurrentDictionary<int,string> dict,int index)
        {

            for (int i = 0; i < 1000000; i += 4)
            {
                if (i%4==index)
                {
                    string s = dict[i];

                }             

            }  

        }

3.多線程情況下,程式運行結果,如下圖。從圖中可以看出,普通字典的操作是多線程讀並行字典的30多倍。這是我機器上的情況。各人的機器配置不一,請自行測試。

 

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 作為複習總結的筆記,我羅列了幾個jdbc步驟,後邊舉個簡單的例子,其中的try塊請讀者自行處理. /* * 1.下載驅動包:com.mysql.jdbc.Driver;網上很多下載資源,自己找度娘,此處不再提供; * * 2.將驅動包導入項目,並add to build path,具體步驟去問度娘. ...
  • 一 概述 在我們講解NuGet前,我們先來看看一個例子。 1.例子: 假設現在開發一套系統,其中前端框架我們選擇Bootstrap,由於選擇Bootstrap作為前端框架,因此,在項目中,我們需要引入Bootstrap相關文件,大致會執行如下操作。 步驟一:下載Bootstrap文件 輸入Boots ...
  • 示例代碼: 執行結果圖: ...
  • 最近因為業務需求開發了一個介面用於接收數據,但是總有一些數據報出ORA-01704:字元串文字太長錯誤。仔細排查後發現,竟然是NCLOB類型欄位提示這個錯誤。NCLOB存儲空間有4G,怎麼也想不明白為什麼會報這個錯誤。原來因為介面插入數據採用字元串拼接的方式。 而oracle中會把字元串轉為varc ...
  • 1.定義一個枚舉,樂器類型 #region 樂器定義 public enum MusicNo:uint { /// <summary> /// //大鋼琴 /// </summary> AcousticGrandPiano = 0, /// <summary> ///明亮的鋼琴 /// </summ ...
  • 一、新建項目 打開vs2017,新建一個項目,命名為orm1 二、新建資料庫 打開 SqlServer資料庫,新建資料庫 orm1,並新建表 student 。 三、新建 ADO.NET 實體數據模型 這裡點擊 新建連接,新建資料庫連接。其實伺服器名輸入 . 代表本地伺服器,身份驗證選擇預設的Win ...
  • 寫在前面 整個項目都托管在了 Github 上:https://github.com/ikesnowy/Algorithms-4th-Edition-in-Csharp 這一節內容可能會用到的庫文件有 Sort和 SortData,同樣在 Github 上可以找到。 善用 Ctrl + F 查找題目 ...
  • 一、前言 時間過得真是快,轉眼就2018年了。首先祝各位博友,軟體開發者新年新氣象,事業有成,身體健康,闔家幸福!最近看到園子里好多關於自己的2017年度總結以及對自己新一年的願景,覺得咱園子的氛圍是真的好。這三天假期我也沒閑著,一邊看OB海鮮團吃雞一邊寫Socket SocketAsyncEven ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...