再見了Future,圖解JDK21虛擬線程的結構化併發

来源:https://www.cnblogs.com/JavaEdge/archive/2023/12/10/17893002.html
-Advertisement-
Play Games

Java為我們提供了許多啟動線程和管理線程的方法。在本文中,我們將介紹一些在Java中進行併發編程的選項。我們將介紹結構化併發的概念,然後討論Java 21中一組預覽類——它使將任務拆分為子任務、收集結果並對其進行操作變得非常容易,而且不會不小心留下任何掛起的任務。 1 基礎方法 通過Lambda表 ...


Java為我們提供了許多啟動線程和管理線程的方法。在本文中,我們將介紹一些在Java中進行併發編程的選項。我們將介紹結構化併發的概念,然後討論Java 21中一組預覽類——它使將任務拆分為子任務、收集結果並對其進行操作變得非常容易,而且不會不小心留下任何掛起的任務。

1 基礎方法

通過Lambda表達式啟動平臺線程的這種創建線程的方法最簡單,適用於簡單情況。

// Lambda表達式啟動平臺線程的一種方法。
Thread.ofPlatform().start(() -> {

    // 在這裡執行在獨立線程上運行的操作

});

問題

  • 創建平臺線程是昂貴的
  • 若應用程式用戶量很大,平臺線程數量可能增長到超出JVM支持的限制

顯然,大多數應用程式伺服器不鼓勵這種行為。因此,繼續下一種方法——Java Futures。

2 Java Future類

JDK 5引入,開發者需要改變思考方式。不再考慮啟動新線程,而考慮將“任務”提交到線程池以供執行。JDK 5還引入ExecutorService,任務將提交到該服務。ExecutorService是一個定義了提交任務並返回Java Future的機制的介面。提交的任務需實現Runnable或Callable介面。

任務提交給表示單線程線程池

// 將Callable任務提交給表示單線程線程池的ExecutorService

ExecutorService service = Executors.newSingleThreadExecutor();
Future<String> future = service.submit(() -> {
    // 進行一些工作並返回數據
    return "Done";
});
// 在這裡執行其他任務

// 阻塞直到提交的任務完成
String output = future.get();

// 列印 "Done"
System.out.println(output);

// 繼續執行後續任務

多個任務提交到ExecutorService

try (ExecutorService service = Executors.newFixedThreadPool(3)) {

    Future<TaskResult> future1 = service.submit(() -> { 
          // 執行任務1並返回TaskResult 
    });

    Future<TaskResult> future2 = service.submit(() -> { 
          // 執行任務2並返回TaskResult 
    });  
  
    Future<TaskResult> future3 = service.submit(() -> { 
          // 執行任務3並返回TaskResult 
    });

    /* 所有異常上拋 */

    // get()將阻塞直到任務1完成
    TaskResult result1 = future1.get();

    // get()將阻塞直到任務2完成
    TaskResult result2 = future2.get();

    // get()將阻塞直到任務3完成
    TaskResult result3 = future3.get();

    // 處理result1、result2、result3
    handleResults(result1, result2, result3);
}

所有這些任務將並行運行,然後父線程可用future.get()方法檢索每個任務的結果。

3 上述實現的問題

如在上面代碼中用Platform線程,則存在一個問題。獲取TaskResult的get()方法將阻塞線程,由於與阻塞Platform線程相關的可擴展性問題,這代價可能很昂貴。然而,使用Java 21——如用Virtual Threads,則在get()期間,底層的平臺線程不會被阻塞。

若task2、task3在task1前完成,須等到task1完成,然後處理task2和task3結果。

若task2或task3執行過程失敗,則問題更糟。假設整個用例應在任何任務失敗時就失敗,代碼將等到task1完成,然後拋異常。這不是我們的期望,它將為最終用戶創建一個非常遲鈍的體驗。

3.1 基本問題

ExecutorService類對提交給它的各種任務之間關係一無所知。因此,它不知道若一個任務失敗,該發生點啥。即示例中提交的三個任務被視為獨立任務,而非用例的一部分。這並不是ExecutorService類的失敗,因為它沒有設計為處理提交的任務之間的任何關係。

3.2 另一個問題

ExecutorService周圍使用try-with-resources塊,確保在try塊退出時調用ExecutorService的close方法。close方法確保所有提交給執行器服務的任務在繼續執行之前終止。

若用例要求在任何任務失敗時立即失敗,那我們運氣不好。close方法將等待所有提交的任務完成。

但若不用try-with-resources塊,則不能保證在塊退出前三個任務都結束。將保留未清理終止的“未明確終止的線程”。任何其他自定義實現都須確保在失敗時立即取消其他任務。

因此,儘管用Java Future是處理可拆分為子任務的任務的一種不錯方法,但還不夠完美。開發須將用例的“感知”編碼到邏輯中,但這很難!

註意,對Platform線程存在於Java Futures的問題之一即阻塞問題——Java 21使用Virtual線程時,這問題不再存在。因為使用Virtual Threads時,使用future.get()方法阻塞線程將釋放底層的Platform線程。

使用CompletableFuture Pipelines也可解決阻塞問題,但這裡不深入探討。有更簡單的方法來解決Java 21阻塞問題,沒錯就是Virtual Threads!但我們需要找到一種更好解決方案,以處理可拆分為多個子任務且“知道”用例的任務。這就引出結構化併發的基本思想。

4 結構化併發

想象,從方法內部向ExecutorService提交的任務,然後方法退出。現在更難推斷代碼,因為不知道此提交的任務可能的副作用,且這可能導致難以調試的問題。該問題的圖解:

結構化併發基本思想是從一個塊(方法或塊)內啟動的所有任務應在該塊結束前終止。即:

  • 代碼的結構邊界(塊)

  • 和該塊內提交的任務的運行時邊界

重合。這使應用程式代碼更容易理解,因為一個塊內提交的所有任務的執行效果都被限制在該塊內。塊外查看代碼時,不必擔心任務是否仍在運行。

ExecutorService的try-with-resources塊是對結構化併發的一次良好嘗試,其中從塊內提交的所有任務在塊退出時完成。但它還不夠,因為它可能導致父線程等待時間超過必要時間。其改進版——StructuredTaskScope

5 StructuredTaskScope

Java 21 Virtual Thread作為一項功能被引入,它在大多情況下實際上消除了阻塞問題。但即使使用Virtual線程和Futures,仍存在“不幹凈終止任務”和“等待時間比必要時間長”的問題。

StructuredTaskScope類在Java 21中作為預覽功能提供,旨在解決這問題。它試圖提供比Executor Service的try-with-resources塊更乾凈的結構化併發模型。StructuredTaskScope類知道提交的任務之間的關係,因此它可對它們進行更智能假設。

使用StructuredTaskScope的示例

在任一任務失敗時,立即返回用例。

StructuredTaskScope.ShutdownOnFailure()返回一個StructuredTaskScope的引用,該引用知道若一個任務失敗,那其他任務也須終止,因為它“知道”提交的任務之間的關係。

 try(var scope = new StructuredTaskScope.ShutdownOnFailure()) {          
                                                                         
     // 想象一下LongRunningTask實現Supplier
     var dataTask = new LongRunningTask("dataTask", ...);  
     var restTask = new LongRunningTask("restTask", ...); 
                                                                         
     // 並行運行任務
     Subtask<TaskResponse> dataSubTask = scope.fork(dataTask);           
     Subtask<TaskResponse> restSubTask = scope.fork(restTask);           
                                                                         
     // 等待所有任務成功完成或第一個子任務失敗。 
     // 如果一個失敗,向所有其他子任務發送取消請求
     // 在範圍上調用join方法,等待兩個任務都完成或如果一個任務失敗
     scope.join();                                                       
     scope.throwIfFailed();                                              
                                                                         
     // 處理成功的子任務結果                                
     System.out.println(dataSubTask.get());                              
     System.out.println(restSubTask.get());                              
 }                                                                       

企業用例

其中兩個任務可並行運行:

  • 一個DB任務
  • 一個Rest API任務

目標是並行運行這些任務,然後將結果合併到單個對象中並返回。

調用ShutdownOnFailure()靜態方法創建一個StructuredTaskScope類。然後使用StructuredTaskScope對象fork方法(將fork方法考慮為submit方法)並行運行兩個任務。幕後,StructuredTaskScope類預設使用Virtual線程來運行任務。每次fork一個任務,都創建一個新Virtual線程(Virtual線程永不會被池化)並運行任務。

然後在範圍上調用join方法,等待兩個任務都完成或如果一個任務失敗。更重要的——若一個任務失敗,join()方法將自動向其他任務(剩餘運行任務)發送取消請求並等待其終止。這很重要,因為取消請求將確保在塊退出時沒有不必要的懸掛任務。

若其他線程向父線程發取消請求,也是如此。在最後,若塊內部任何位置拋異常——StructuredTaskScope的close方法將確保向子任務發送取消請求並終止任務。StructuredTaskScope美妙在於——若子線程創建自己的StructuredTaskScope(子任務本身有自己的子任務),取消時它們都會得到乾凈處理。

開發在這裡的一個職責是確保它們編寫的任務須正確處理在取消期間設置線上程上的中斷標誌。任務有責任讀取此中斷標誌並乾凈終止自己。若任務未正確處理中斷標誌,那用例的響應性將受影響。

6 使用StructuredTaskScope

當一個用例需要將任務分解為子任務,可能還需將子任務進一步分解為更多子任務時,使用StructuredTaskScope是合適的。本文看到的示例是用例需在任一子任務失敗時立即返回。但StructuredTaskScope遠不止如此。

  • 在第一個任務成功時返回
  • 在所有任務完成時返回(成功或失敗)
  • 製作自己的StructuredTaskScope版本

6.1 StructuredTaskScope優點

  • 代碼易閱讀,因為無論哪種用例,代碼看著都一樣
  • 子線程失敗時會在適當時被乾凈終止。沒有不必要的懸掛線程
  • 使用StructuredTaskScope與Virtual Threads一起,意味與阻塞相關可擴展性問題不存在。這也難怪,預設情況下,StructuredTaskScope在底層使用Virtual Threads

7 總結

總的來說,StructuredTaskScope類是Java中處理將任務拆分為多個子任務的用例的良好補充。子線程在失敗時自動取消,不同用例的代碼一致性以及更好地理解代碼的能力,使其成為在Java中實現Structured Concurrency的理想選擇。

Virtual Threads和StructuredTaskScope類共同組成了一個完美的組合。Virtual Threads使我們能夠在JVM中創建數十萬個線程,而StructuredTaskScope類使我們能夠有效地管理這些線程。

讓我們等待它退出預覽併成為一個正式特性!

本文由博客一文多發平臺 OpenWrite 發佈!


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 概論 shell是什麼 shell是我們通過命令行與操作系統溝通的語言。 shell腳本可以直接在命令行中執行,也可以將一套邏輯組織成一個文件,方便復用。 AC Terminal中的命令行可以看成是一個“shell腳本在逐行執行”。 Linux中常見的shell腳本有很多種,常見的有: Bourne ...
  • create database 學生 go use 學生 go CREATE TABLE Student ( Sno char (7) PRIMARY KEY , Sname char (10) NOT NULL , Ssex char (2) check(ssex in('男','女')) , S ...
  • 是什麼 吹哨人巡查監控後臺master主機是否故障,如果故障了根據投票數自動將某一個從庫轉為新主庫,繼續對外服務 能幹嘛 主從監控:監控主從Redis庫運行是否正常 消息通知:哨兵可以將故障轉移的結果發送給客戶端 故障轉移:如果Master異常,則會進行主從切換,將其中一個Slave作為新Maste ...
  • 項目描述 半年前本蒻蒟在逛開源硬體平臺的時候發現了一個好玩的電子神之眼,於是開始了長達半年的製作(鴿)過程..... 本項目復刻了薩納蘭的黃昏大佬改版的神之眼S3“Pro”版核心板V1 本項目基於Arduino IDE環境 本項目硬體和軟體部分基於GPL3.0開源許可開源(可修改,可分享,可商用,但 ...
  • spring Boot應用啟動器基本的一共有44種,具體如下 1)spring-boot-starter 這是Spring Boot的核心啟動器,包含了自動配置、日誌和YAML。 2)spring-boot-starter-actuator 幫助監控和管理應用。 3)spring-boot-star ...
  • python原生數據類型有int、float、str、tuple、list、set、dict七類,本次隨筆介紹了幾種類型的定義,同時用實驗驗證各數據類型之間的嵌套,以實驗結果證明各個數據類型的基本特征。 ...
  • 本文首發於公眾號:Hunter後端 原文鏈接:Django筆記四十四之Nginx+uWSGI部署Django以及Nginx負載均衡操作 這一篇筆記介紹如何使用 Nginx + uWSGI 來部署 Django。 上一篇筆記中有介紹直接使用 uWSGI 作為 web 伺服器來部署 Django,這一篇 ...
  • 本文是我從業多年開發生涯中針對線上業務的處理經驗總結而來,這些業務或多或少相信大家都遇到過,因此在這裡分享給大家,大家也可以看看是不是遇到過類似場景。本文大綱如下, 後臺上傳文件 線上後臺項目有一個消息推送的功能,運營新建一條通知消息時,需要一起上傳一列包含用戶 id 的文件,來給文件中包含的指定用 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...