還不懂Java線程池實現原理,看這一篇文章就夠了

来源:https://www.cnblogs.com/yidengjiagou/archive/2022/11/16/16895061.html
-Advertisement-
Play Games

線程池無論是工作還是面試都是必備的技能,但是很多人對於線程池的實現原理卻一知半解,並不瞭解線程池內部的工作原理,今天一燈就帶大家一塊剖析線程池底層實現原理。 ...


線程池無論是工作還是面試都是必備的技能,但是很多人對於線程池的實現原理卻一知半解,並不瞭解線程池內部的工作原理,今天一燈就帶大家一塊剖析線程池底層實現原理。

1. 為什麼要使用線程池

使用線程池通常由以下兩個原因:

  1. 頻繁創建銷毀線程需要消耗系統資源,使用線程池可以復用線程。

  2. 使用線程池可以更容易管理線程,線程池可以動態管理線程個數、具有阻塞隊列、定時周期執行任務、環境隔離等。

2. 線程池的使用

/**
 * @author 一燈架構
 * @apiNote 線程池示例
 **/
public class ThreadPoolDemo {

    public static void main(String[] args) {
        // 1. 創建線程池
        ThreadPoolExecutor threadPoolExecutor = new ThreadPoolExecutor(
                3,
                3,
                0L,
                TimeUnit.MILLISECONDS,
                new LinkedBlockingQueue<>(),
                Executors.defaultThreadFactory(),
                new ThreadPoolExecutor.AbortPolicy());
      
        // 2. 往線程池中提交3個任務
        for (int i = 0; i < 3; i++) {
            threadPoolExecutor.execute(() -> {
                System.out.println(Thread.currentThread().getName() + " 關註公眾號:一燈架構");
            });
        }
      
        // 3. 關閉線程池
        threadPoolExecutor.shutdown();
    }
}

輸出結果:

pool-1-thread-2 關註公眾號:一燈架構
pool-1-thread-1 關註公眾號:一燈架構
pool-1-thread-3 關註公眾號:一燈架構

線程池的使用非常簡單:

  1. 調用new ThreadPoolExecutor()構造方法,指定核心參數,創建線程池。
  2. 調用execute()方法提交Runnable任務
  3. 使用結束後,調用shutdown()方法,關閉線程池。

再看一下線程池構造方法中核心參數的作用。

3. 線程池核心參數

線程池共有七大核心參數:

參數名稱 參數含義
int corePoolSize 核心線程數
int maximumPoolSize 最大線程數
long keepAliveTime 線程存活時間
TimeUnit unit 時間單位
BlockingQueue workQueue 阻塞隊列
ThreadFactory threadFactory 線程創建工廠
RejectedExecutionHandler handler 拒絕策略
  1. corePoolSize 核心線程數

    當往線程池中提交任務,會創建線程去處理任務,直到線程數達到corePoolSize,才會往阻塞隊列中添加任務。預設情況下,空閑的核心線程並不會被回收,除非配置了allowCoreThreadTimeOut=true。

  2. maximumPoolSize 最大線程數

    當線程池中的線程數達到corePoolSize,阻塞隊列又滿了之後,才會繼續創建線程,直到達到maximumPoolSize,另外空閑的非核心線程會被回收。

  3. keepAliveTime 線程存活時間

    非核心線程的空閑時間達到了keepAliveTime,將會被回收。

  4. TimeUnit 時間單位

    線程存活時間的單位,預設是TimeUnit.MILLISECONDS(毫秒),可選擇的有:

    TimeUnit.NANOSECONDS(納秒)

    TimeUnit.MICROSECONDS(微秒)

    TimeUnit.MILLISECONDS(毫秒)

    TimeUnit.SECONDS(秒)

    TimeUnit.MINUTES(分鐘)

    TimeUnit.HOURS(小時)

    TimeUnit.DAYS(天)

  5. workQueue 阻塞隊列

    當線程池中的線程數達到corePoolSize,再提交的任務就會放到阻塞隊列的等待,預設使用的是LinkedBlockingQueue,可選擇的有:

    LinkedBlockingQueue(基於鏈表實現的阻塞隊列)

    ArrayBlockingQueue(基於數組實現的阻塞隊列)

    SynchronousQueue(只有一個元素的阻塞隊列)

    PriorityBlockingQueue(實現了優先順序的阻塞隊列)

    DelayQueue(實現了延遲功能的阻塞隊列)

  6. threadFactory 線程創建工廠

    用來創建線程的工廠,預設的是Executors.defaultThreadFactory(),可選擇的還有Executors.privilegedThreadFactory()實現了線程優先順序。當然也可以自定義線程創建工廠,創建線程的時候最好指定線程名稱,便於排查問題。

  7. RejectedExecutionHandler 拒絕策略

    當線程池中的線程數達到maximumPoolSize,阻塞隊列也滿了之後,再往線程池中提交任務,就會觸發執行拒絕策略,預設的是AbortPolicy(直接終止,拋出異常),可選擇的有:

    AbortPolicy(直接終止,拋出異常)

    DiscardPolicy(默默丟棄,不拋出異常)

    DiscardOldestPolicy(丟棄隊列中最舊的任務,執行當前任務)

    CallerRunsPolicy(返回給調用者執行)

4. 線程池工作原理

線程池的工作原理,簡單理解如下:

  1. 當往線程池中提交任務的時候,會先判斷線程池中線程數是否是核心線程數,如果小於,會創建核心線程並執行任務。
  2. 如果線程數大於核心線程數,會判斷阻塞隊列是否已滿,如果沒有滿,會把任務添加到阻塞隊列中等待調度執行。
  3. 如果阻塞隊列已滿,會判斷線程數是否小於最大線程數,如果小於,會繼續創建最大線程數並執行任務。
  4. 如果線程數大於最大線程數,會執行拒絕策略,然後結束。

5. 線程池源碼剖析

5.1 線程池的屬性

public class ThreadPoolExecutor extends AbstractExecutorService {

    // 線程池的控制狀態,Integer長度是32位,前3位用來存儲線程池狀態,後29位用來存儲線程數量
    private final AtomicInteger ctl = new AtomicInteger(ctlOf(RUNNING, 0));
    // 線程個數所占的位數
    private static final int COUNT_BITS = Integer.SIZE - 3;
    // 線程池的最大容量,2^29-1,約5億個線程
    private static final int CAPACITY = (1 << COUNT_BITS) - 1;

    // 獨占鎖,用來控制多線程下的併發操作
    private final ReentrantLock mainLock = new ReentrantLock();
    // 工作線程的集合
    private final HashSet<Worker> workers = new HashSet<>();
    // 等待條件,用來響應中斷
    private final Condition termination = mainLock.newCondition();
    // 是否允許回收核心線程
    private volatile boolean allowCoreThreadTimeOut;
    // 線程數的歷史峰值
    private int largestPoolSize;

    /**
     * 以下是線程池的七大核心參數
     */
    private volatile int corePoolSize;
    private volatile int maximumPoolSize;
    private volatile long keepAliveTime;
    private final BlockingQueue<Runnable> workQueue;
    private volatile ThreadFactory threadFactory;
    private volatile RejectedExecutionHandler handler;

}

線程池的控制狀態ctl用來存儲線程池狀態和線程個數,前3位用來存儲線程池狀態,後29位用來存儲線程數量。

設計者多聰明,用一個變數存儲了兩塊內容。

5.2 線程池狀態

線程池共有5種狀態:

狀態名稱 狀態值 狀態含義 狀態作用
RUNNING 111 運行中 線程池創建後預設狀態,接收新任務,並處理阻塞隊列中的任務。
SHUTDOWN 000 已關閉 調用shutdown方法後處於該狀態,不再接收新任務,處理阻塞隊列中任務。
STOP 001 已停止 調用shutdownNow方法後處於該狀態,不再新任務,並中斷所有線程,丟棄阻塞隊列中所有任務。
TIDYING 010 處理中 所有任務已完成,所有工作線程都已回收,等待調用terminated方法。
TERMINATED 011 已終止 調用terminated方法後處於該狀態,線程池的最終狀態。

5.3 execute源碼

看一下往線程池中提交任務的源碼,這是線程池的核心邏輯:

// 往線程池中提交任務
public void execute(Runnable command) {
    // 1. 判斷提交的任務是否為null
    if (command == null)
        throw new NullPointerException();

    int c = ctl.get();
    // 2. 判斷線程數是否小於核心線程數
    if (workerCountOf(c) < corePoolSize) {
        // 3. 把任務包裝成worker,添加到worker集合中
        if (addWorker(command, true))
            return;
        c = ctl.get();
    }
    // 4. 判斷如果線程數不小於corePoolSize,並且可以添加到阻塞隊列
    if (isRunning(c) && workQueue.offer(command)) {
        // 5. 重新檢查線程池狀態,如果線程池不是運行狀態,就移除剛纔添加的任務,並執行拒絕策略
        int recheck = ctl.get();
        if (!isRunning(recheck) && remove(command))
            reject(command);
        // 6. 判斷如果線程數是0,就創建非核心線程(任務是null,會從阻塞隊列中拉取任務)
        else if (workerCountOf(recheck) == 0)
            addWorker(null, false);
    }
    // 7. 如果添加阻塞隊列失敗,就創建一個Worker
    else if (!addWorker(command, false))
        // 8. 如果創建Worker失敗說明已經達到最大線程數了,則執行拒絕策略
        reject(command);
}

execute方法的邏輯也很簡單,最終就是調用addWorker方法,把任務添加到worker集合中,再看一下addWorker方法的源碼:

// 添加worker
private boolean addWorker(Runnable firstTask, boolean core) {
    retry:
    for (; ; ) {
        int c = ctl.get();
        int rs = runStateOf(c);
        // 1. 檢查是否允許提交任務
        if (rs >= SHUTDOWN &&
                !(rs == SHUTDOWN &&
                        firstTask == null &&
                        !workQueue.isEmpty()))
            return false;
        // 2. 使用死迴圈保證添加線程成功
        for (; ; ) {
            int wc = workerCountOf(c);
            // 3. 校驗線程數是否超過容量限制
            if (wc >= CAPACITY ||
                    wc >= (core ? corePoolSize : maximumPoolSize))
                return false;
            // 4. 使用CAS修改線程數
            if (compareAndIncrementWorkerCount(c))
                break retry;
            c = ctl.get();
            // 5. 如果線程池狀態變了,則從頭再來
            if (runStateOf(c) != rs)
                continue retry;
        }
    }
    boolean workerStarted = false;
    boolean workerAdded = false;
    Worker w = null;
    try {
        // 6. 把任務和新線程包裝成一個worker
        w = new Worker(firstTask);
        final Thread t = w.thread;
        if (t != null) {
            // 7. 加鎖,控制併發
            final ReentrantLock mainLock = this.mainLock;
            mainLock.lock();
            try {
                // 8. 再次校驗線程池狀態是否異常
                int rs = runStateOf(ctl.get());
                if (rs < SHUTDOWN ||
                        (rs == SHUTDOWN && firstTask == null)) {
                    // 9. 如果線程已經啟動,就拋出異常
                    if (t.isAlive())
                        throw new IllegalThreadStateException();
                    // 10. 添加到worker集合中
                    workers.add(w);
                    int s = workers.size();
                    // 11. 記錄線程數歷史峰值
                    if (s > largestPoolSize)
                        largestPoolSize = s;
                    workerAdded = true;
                }
            } finally {
                mainLock.unlock();
            }
            if (workerAdded) {
                // 12. 啟動線程
                t.start();
                workerStarted = true;
            }
        }
    } finally {
        if (!workerStarted)
            addWorkerFailed(w);
    }
    return workerStarted;
}

方法雖然很長,但是邏輯很清晰。就是把任務和線程包裝成worker,添加到worker集合,並啟動線程。

5.4 worker源碼

再看一下worker類的結構:

private final class Worker
        extends AbstractQueuedSynchronizer
        implements Runnable {
    // 工作線程
    final Thread thread;
    // 任務
    Runnable firstTask;

    // 創建worker,並創建一個新線程(用來執行任務)
    Worker(Runnable firstTask) {
        setState(-1);
        this.firstTask = firstTask;
        this.thread = getThreadFactory().newThread(this);
    }
}

5.5 runWorker源碼

再看一下run方法的源碼:

// 線程執行入口
public void run() {
    runWorker(this);
}

// 線程運行核心方法
final void runWorker(Worker w) {
    Thread wt = Thread.currentThread();
    Runnable task = w.firstTask;
    w.firstTask = null;
    w.unlock();
    boolean completedAbruptly = true;
    try {
        // 1. 如果當前worker中任務是null,就從阻塞隊列中獲取任務
        while (task != null || (task = getTask()) != null) {
            // 加鎖,保證thread不被其他線程中斷(除非線程池被中斷)
            w.lock();
            // 2. 校驗線程池狀態,是否需要中斷當前線程
            if ((runStateAtLeast(ctl.get(), STOP) ||
                    (Thread.interrupted() &&
                            runStateAtLeast(ctl.get(), STOP))) &&
                    !wt.isInterrupted())
                wt.interrupt();
            try {
                beforeExecute(wt, task);
                Throwable thrown = null;
                try {
                    // 3. 執行run方法
                    task.run();
                } catch (RuntimeException x) {
                    thrown = x;
                    throw x;
                } catch (Error x) {
                    thrown = x;
                    throw x;
                } catch (Throwable x) {
                    thrown = x;
                    throw new Error(x);
                } finally {
                    afterExecute(task, thrown);
                }
            } finally {
                task = null;
                w.completedTasks++;
                // 解鎖
                w.unlock();
            }
        }
        completedAbruptly = false;
    } finally {
        // 4. 從worker集合刪除當前worker
        processWorkerExit(w, completedAbruptly);
    }
}

runWorker方法邏輯也很簡單,就是不斷從阻塞隊列中拉取任務並執行。

再看一下從阻塞隊列中拉取任務的邏輯:

// 從阻塞隊列中拉取任務
private Runnable getTask() {
    boolean timedOut = false;
    for (; ; ) {
        int c = ctl.get();
        int rs = runStateOf(c);
        // 1. 如果線程池已經停了,或者阻塞隊列是空,就回收當前線程
        if (rs >= SHUTDOWN && (rs >= STOP || workQueue.isEmpty())) {
            decrementWorkerCount();
            return null;
        }
        int wc = workerCountOf(c);
        // 2. 再次判斷是否需要回收線程
        boolean timed = allowCoreThreadTimeOut || wc > corePoolSize;
        if ((wc > maximumPoolSize || (timed && timedOut))
                && (wc > 1 || workQueue.isEmpty())) {
            if (compareAndDecrementWorkerCount(c))
                return null;
            continue;
        }
        try {
            // 3. 從阻塞隊列中拉取任務
            Runnable r = timed ?
                    workQueue.poll(keepAliveTime, TimeUnit.NANOSECONDS) :
                    workQueue.take();
            if (r != null)
                return r;
            timedOut = true;
        } catch (InterruptedException retry) {
            timedOut = false;
        }
    }
}

6. 總結

今天帶大家一塊詳細剖析了Java線程池的實現原理,是不是非常簡單?

幾百行的方法雖然看著複雜,令人頭疼,只要由淺入深的梳理清理業務邏輯,源碼讀起來也是小菜一碟。

我是「一燈架構」,如果本文對你有幫助,歡迎各位小伙伴點贊、評論和關註,感謝各位老鐵,我們下期見

image


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 我國目前並未出台專門針對網路爬蟲技術的法律規範,但在司法實踐中,相關判決已屢見不鮮,K 哥特設了“K哥爬蟲普法”專欄,本欄目通過對真實案例的分析,旨在提高廣大爬蟲工程師的法律意識,知曉如何合法合規利用爬蟲技術,警鐘長鳴,做一個守法、護法、有原則的技術人員。 案情介紹 2018年1月至7月期間,咼某興 ...
  • 大家好,我是棧長。 今天給大家通報一則框架更新消息,時隔兩個月,Spring Cloud 2021.0.5 最新版發佈了,來看下最新的 Spring Cloud 版本情況: Spring Cloud 無疑是現在 Java 微服務事實上的標準,完全基於 Spring Boot 構建,依賴 Spring ...
  • 目錄 一.freeglut 簡介 二.freeglut 下載 五.猜你喜歡 零基礎 OpenGL ES 學習路線推薦 : OpenGL ES 學習目錄 >> OpenGL ES 基礎 零基礎 OpenGL ES 學習路線推薦 : OpenGL ES 學習目錄 >> OpenGL ES 特效 零基礎 ...
  • 類模板=>實力化=>模板類 通過類模板實現棧,點擊查看代碼 #include <iostream> #include <cstring> using namespace std; template<typename T> //template<typename T=int> 也可以這樣寫,寫個預設類 ...
  • ##SpringBoot集成JWT(極簡版) ###在WebConfig配置類中設置介面統一首碼 import org.springframework.context.annotation.Configuration; import org.springframework.web.bind.anno ...
  • 這一篇問文章主要介紹元組的相關知識。 元組:不可修改的序列 與列表一樣,元組也是序列,唯一的差別在於元組是不能修改的(同樣的,字元串也不能修改)。 元組的語法很簡單。 >>> >>> 1, 2, 3 (1, 2, 3) >>> (1, 2, 3) (1, 2, 3) >>> >>> () () >> ...
  • 大家好,我是三友~~ 之前有小伙伴私信我說看源碼的時候感覺源碼很難,不知道該怎麼看,其實這有部分原因是因為沒有弄懂一些源碼實現的套路,也就是設計模式,所以本文我就總結了9種在源碼中非常常見的設計模式,併列舉了很多源碼的實現例子,希望對你看源碼和日常工作中有所幫助。 單例模式 單例模式是指一個類在一個 ...
  • 目錄 一.glut 簡介 二.猜你喜歡 零基礎 OpenGL ES 學習路線推薦 : OpenGL ES 學習目錄 >> OpenGL ES 基礎 零基礎 OpenGL ES 學習路線推薦 : OpenGL ES 學習目錄 >> OpenGL ES 特效 零基礎 OpenGL ES 學習路線推薦 : ...
一周排行
    -Advertisement-
    Play Games
  • 前言 在我們開發過程中基本上不可或缺的用到一些敏感機密數據,比如SQL伺服器的連接串或者是OAuth2的Secret等,這些敏感數據在代碼中是不太安全的,我們不應該在源代碼中存儲密碼和其他的敏感數據,一種推薦的方式是通過Asp.Net Core的機密管理器。 機密管理器 在 ASP.NET Core ...
  • 新改進提供的Taurus Rpc 功能,可以簡化微服務間的調用,同時可以不用再手動輸出模塊名稱,或調用路徑,包括負載均衡,這一切,由框架實現並提供了。新的Taurus Rpc 功能,將使得服務間的調用,更加輕鬆、簡約、高效。 ...
  • 順序棧的介面程式 目錄順序棧的介面程式頭文件創建順序棧入棧出棧利用棧將10進位轉16進位數驗證 頭文件 #include <stdio.h> #include <stdbool.h> #include <stdlib.h> 創建順序棧 // 指的是順序棧中的元素的數據類型,用戶可以根據需要進行修改 ...
  • 前言 整理這個官方翻譯的系列,原因是網上大部分的 tomcat 版本比較舊,此版本為 v11 最新的版本。 開源項目 從零手寫實現 tomcat minicat 別稱【嗅虎】心有猛虎,輕嗅薔薇。 系列文章 web server apache tomcat11-01-官方文檔入門介紹 web serv ...
  • C總結與剖析:關鍵字篇 -- <<C語言深度解剖>> 目錄C總結與剖析:關鍵字篇 -- <<C語言深度解剖>>程式的本質:二進位文件變數1.變數:記憶體上的某個位置開闢的空間2.變數的初始化3.為什麼要有變數4.局部變數與全局變數5.變數的大小由類型決定6.任何一個變數,記憶體賦值都是從低地址開始往高地 ...
  • 如果讓你來做一個有狀態流式應用的故障恢復,你會如何來做呢? 單機和多機會遇到什麼不同的問題? Flink Checkpoint 是做什麼用的?原理是什麼? ...
  • C++ 多級繼承 多級繼承是一種面向對象編程(OOP)特性,允許一個類從多個基類繼承屬性和方法。它使代碼更易於組織和維護,並促進代碼重用。 多級繼承的語法 在 C++ 中,使用 : 符號來指定繼承關係。多級繼承的語法如下: class DerivedClass : public BaseClass1 ...
  • 前言 什麼是SpringCloud? Spring Cloud 是一系列框架的有序集合,它利用 Spring Boot 的開發便利性簡化了分散式系統的開發,比如服務註冊、服務發現、網關、路由、鏈路追蹤等。Spring Cloud 並不是重覆造輪子,而是將市面上開發得比較好的模塊集成進去,進行封裝,從 ...
  • class_template 類模板和函數模板的定義和使用類似,我們已經進行了介紹。有時,有兩個或多個類,其功能是相同的,僅僅是數據類型不同。類模板用於實現類所需數據的類型參數化 template<class NameType, class AgeType> class Person { publi ...
  • 目錄system v IPC簡介共用記憶體需要用到的函數介面shmget函數--獲取對象IDshmat函數--獲得映射空間shmctl函數--釋放資源共用記憶體實現思路註意 system v IPC簡介 消息隊列、共用記憶體和信號量統稱為system v IPC(進程間通信機制),V是羅馬數字5,是UNI ...