想玩轉JAVA高併發,這些概念你必須懂!

来源:https://www.cnblogs.com/chengxy-nds/archive/2020/01/16/12202672.html
-Advertisement-
Play Games

我們在找工作時,經常在招聘信息上看到有這麼一條:有構建大型互聯網服務及高併發等經驗,你第一時間想到的是媒體常說的雙十一嗎?帶著問題,我們一起思考技術…. 高併發高併發 它是互聯網分散式系統架構設計中必須考慮的因素之一,通常是指,保證系統能夠同時並行化處理海量請求 同步和非同步 同步:發送一個請求,等待 ...


 

我們在找工作時,經常在招聘信息上看到有這麼一條:有構建大型互聯網服務及高併發等經驗,你第一時間想到的是媒體常說的雙十一嗎?帶著問題,我們一起思考技術….

高併發高併發

它是互聯網分散式系統架構設計中必須考慮的因素之一,通常是指,保證系統能夠同時並行化處理海量請求

同步和非同步

  • 同步:發送一個請求,等待返回,然後再發送下一個請求。提交請求 -> 等待伺服器處理 -> 處理完返回,此期間客戶端瀏覽器不能幹任何事
  • 非同步:發送一個請求,不等待返回,隨時可以再發送下一個請求。提交請求 -> 伺服器處理(這時瀏覽器仍然可以做其他事情)-> 處理完畢
想搞懂JAVA高併發,怎麼能不懂這些概念?

 

從上圖可以知道,隨著實時間的軌跡,同步一步一步的執行著,在非同步中,當一個非同步過程調用發出後,調用者不能立即得到結果,實際上會開啟一個線程執行這部分內容,這個線程處理完了之後,通過狀態,通知和回調來通知調用者來處理。

併發和並行

 

想搞懂JAVA高併發,怎麼能不懂這些概念?

 

單核CPU(單處理器)上,只可能存在併發而不可能存在並行。 並行在多處理器系統中存在,而併發可以在單處理器和多處理器系統中都存在,併發能夠在單處理器系統中存在是因為併發是並行的假象,並行要求程式能夠同時執行多個操作,而併發只是要求程式假裝同時執行多個操作(每個小時間片執行一個操作,多個操作快速切換執行

臨界區

 

想搞懂JAVA高併發,怎麼能不懂這些概念?

 

臨界區用來表示一種公共資源或者說是共用數據,可以被多個線程使用,但是每一次,只能有一個線程使用它,一旦臨界去資源被占用,其他線程想要使用這個資源,就必須等待。

 

這就是我們編程中經常要加鎖的地方,如 Synchronized 關鍵字,或是 Lock 介面。

阻塞和非阻塞

  • 阻塞(Blocking)和非阻塞(Non-Blocking)通常用來形容多線程間的相互影響,比如一個線程占用臨界區資源,那麼其他所有需要這個資源的線程就必須在這個臨界區中進行等待,等待會導致線程掛起,這種情況就是阻塞。如果占用資源的線程一直不願意釋放資源,那麼其它所有阻塞在這個臨界區上的線程都不能工作。
  • 非阻塞允許多個線程同時進入臨界區。

死鎖、饑餓、活鎖

死鎖: 指兩個或兩個以上的進程(或線程)在執行過程中,因爭奪資源而造成的一種互相等待的現象,若無外力作用,它們都將無法推進下去。此時稱系統處於死鎖狀態或系統產生了死鎖,這些永遠在互相等待的進程稱為死鎖進程。

互斥條件:線程對資源的訪問是排他性的,如果一個線程對占用了某資源,那麼其他線程必須處於等待狀態,直到資源被釋放。 請求和保持條件:線程T1至少已經保持了一個資源R1占用,但又提出對另一個資源R2請求,而此時,資源R2被其他線程T2占用,於是該線程T1也必須等待,但又對自己保持的資源R1不釋放。 不剝奪條件:線程已獲得的資源,在未使用完之前,不能被其他線程剝奪,只能在使用完以後由自己釋放。 環路等待條件:在死鎖發生時,必然存在一個“進程-資源環形鏈”,即:{p0,p1,p2,…pn},進程p0(或線程)等待p1占用的資源,p1等待p2占用的資源,pn等待p0占用的資源。(最直觀的理解是,p0等待p1占用的資源,而p1而在等待p0占用的資源,於是兩個進程就相互等待

活鎖: 指線程T1可以使用資源,但它很禮貌,讓其他線程先使用資源,線程T2也可以使用資源,但它很紳士,也讓其他線程先使用資源。這樣你讓我,我讓你,最後兩個線程都無法使用資源。

在街上遇到一妹子,剛好她朝著你的反方向走,與你正面碰到,你們都想讓彼此過去。你往左邊移,她也往左邊移,兩人還是無法過去。這時你往右邊移,她也往右邊移,如此迴圈下去。

饑餓: 指如果線程T1占用了資源R,線程T2又請求封鎖R,於是T2等待。T3也請求資源R,當T1釋放了R上的封鎖後,系統首先批准了T3的請求,T2仍然等待。然後T4又請求封鎖R,當T3釋放了R上的封鎖之後,系統又批准了T4的請求……,T2可能永遠等待。

有兩條道A和B上都堵滿了車輛,其中A道堵的時間最長,B相對相對堵的時間較短,這時,前面道路已疏通,交警按照最佳分配原則,示意B道上車輛先過,B道路上過了一輛又一輛,A道上排隊時間最長的確沒法通過,只能等B道上沒有車輛通過的時候再等交警髮指令讓A道依次通過,這也就是 ReentrantLock 顯示鎖里提供的不公平鎖機制(當然了,ReentrantLock 也提供了公平鎖的機制,由用戶根據具體的使用場景而決定到底使用哪種鎖策略),不公平鎖能夠提高吞吐量但不可避免的會造成某些線程的饑餓。

併發級別

分為 阻塞 和 非阻塞(非阻塞分為無障礙、無鎖、無等待)

阻塞

當一個線程進入臨界區後,其他線程必須等待

無障礙

  • 無障礙是一種最弱的非阻塞調度
  • 可自由出入臨界區
  • 無競爭時,有限步內完成操作
  • 有競爭時,回滾數據

和非阻塞調度相比呢,阻塞調度是一種悲觀的策略,它會認為說一起修改數據是很有可能把數據改壞的。而非阻塞調度呢,是一種樂觀的策略,它認為大家修改數據未必把數據改壞。 但是它是一種 寬進嚴出 的策略,當它發現一個進程在臨界區內發生了數據競爭,產生了衝突,那麼無障礙的調度方式則會回滾這條數據。

在這個無障礙的調度方式當中,所有的線程都相當於在拿去一個系統當前的一個快照。他們一直會嘗試拿去的快照是有效的為止。

無鎖

  • 是無障礙的
  • 保證有一個線程可以勝出 與無障礙相比,無障礙並不保證有競爭時一定能完成操作,因為如果它發現每次操作都會產生衝突,那它則會不停地嘗試。如果臨界區內的線程互相干擾,則會導致所有的線程會卡死在臨界區,那麼系統性能則會有很大的影響。

而無鎖增加了一個新的條件,保證每次競爭有一個線程可以勝出,則解決了無障礙的問題。至少保證了所有線程都順利執行下去。

下麵代碼是Java中典型的無鎖計算代碼

while (!atomicVar.compareAndSet(localVar, localVar+1)) {    localVar = atomicVar.get();}複製代碼

無等待

  • 無鎖的
  • 要求所有的線程都必須在有限步內完成
  • 無饑餓的

無等待的前提是無鎖的基礎上的,無鎖它只保證了臨界區肯定有進也有出,但是如果進的優先順序都很高,那麼臨界區內的某些優先順序低的線程可能發生饑餓,一直出不了臨界區。那麼無等待解決了這個問題,它保證所有的線程都必須在有限步內完成,自然是無饑餓的。

無等待是並行的最高級別,它能使這個系統達到最優狀態。無等待的典型案例:只有讀線程,沒有寫線程,那麼這個則必然是無等待的。 如果既有讀線程又有寫線程,而每個寫線程之前,都把數據拷貝一份副本,然後修改這個副本,而不是修改原始數據,因為修改副本,則沒有衝突,那麼這個修改的過程也是無等待的。最後需要做同步的只是將寫完的數據覆蓋原始數據。由於無等待要求比較高,實現起來比較困難,所以無鎖使用得會更加廣泛一些。

關於並行的2個重要定律

兩個定律都與加速比有關

阿姆達爾定律

Amdahl定律(阿姆達爾定律):定義了串列系統並行化後的加速比的計算公式和理論上限(加速比=優化前系統耗時/優化後系統耗時) ** 一個程式(或者一個演算法)可以按照 是否可以被並行化 分為下麵兩個部分:

  • 可以被並行化的部分
  • 不可以被並行化的部

假設一個程式處理磁碟上的文件。這個程式的一小部分用來掃描路徑和在記憶體中創建文件目錄。做完這些後,每個文件交個一個單獨的線程去處理。掃描路徑和創建文件目錄的部分不可以被並行化,不過處理文件的過程可以。

想搞懂JAVA高併發,怎麼能不懂這些概念?

 

增加CPU處理器的數量並不一定能起到有效的作用,提高系統內可並行化的模塊比重,合理增加並行處理器數量,才能以最小的投入,得到最大的加速比

古斯塔夫森定律

Gustafson定律(古斯塔夫森):說明處理器個數,串列比例和加速比之間的關係

想搞懂JAVA高併發,怎麼能不懂這些概念?

 

只要有足夠的並行化,那麼加速比和CPU個數成正比

轉自:blog.battcn.com/2018/11/13/…

 

 

關註公眾號:【程式員內點事】

免費獲取200G學習資料,內含精選面試題,SSM、Spring全家桶、微服務、MySQL、MyCat、集群、分散式、中間件、Linux、網路、多線程,Jenkins、Nexus、Docker、ELK等等免費學習視頻,持續更新!


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 1. 日期輸出格式化 所有日期、時間的api都在datetime模塊內。 1. datetime = string strftime是datetime類的實例方法。 2. string = datetime strptime是datetime類的靜態方法。 2. 日期比較操作 在datetime模塊 ...
  • 什麼是 泛型? 示例 1 : 不使用泛型 不使用泛型帶來的問題 ADHero(物理攻擊英雄) APHero(魔法攻擊英雄)都是Hero的子類 ArrayList 預設接受Object類型的對象,所以所有對象都可以放進ArrayList中 所以get(0) 返回的類型是Object 接著,需要進行強制 ...
  • Java+Selenium+TestNG自動化測試框架整合 1、簡化代碼 封裝一個定位元素的類,類型為ElementLocation package com.test; import org.openqa.selenium.By; import org.openqa.selenium.WebDriv ...
  • Nginx原理解析 一、反向代理 工作流程 1. 用戶通過功能變數名稱發出訪問Web伺服器的請求,該功能變數名稱被DNS伺服器解析為反向代理伺服器的IP地址; 2. 反向代理伺服器接受用戶的請求; 3. 反向代理伺服器在本地緩存中查找請求的內容,找到後直接把內容發送給用戶; 4. 如果本地緩存里沒有用戶所請求的信息 ...
  • Nginx配置實例 一、反向代理 實例一 1、實現效果 打開瀏覽器,在瀏覽器地址欄輸入地址 www.123.com ,跳轉到linux系統tomcat主頁面中。 2、準備工作 在linux系統中安裝tomcat,使用預設埠8080 3、訪問過程分析 在瀏覽器地址欄輸入地址,請求nginx反向代理服 ...
  • 一、簡介詞雲圖是文本挖掘中用來表徵詞頻的數據可視化圖像,通過它可以很直觀地展現文本數據中地高頻詞:! 圖1 詞雲圖示例 在Python中有很多可視化框架可以用來製作詞雲圖,如pyecharts,但這些框架並不是專門用於製作詞雲圖的,因此並不支持更加個性化的製圖需求,要想創作出更加美觀個性的詞雲圖,需 ...
  • 設想一個需求:客服妹妹反饋有用戶線上發現了BUG,你拿來日誌分析,一個 200M 的日誌文件看的頭大,最後還是沒找到有用的信息,你終於決定開啟 DEBUG 日誌,重啟了項目,讓用戶再次操作一下,結果開了兩分鐘線上磁碟就告警了,於是你被運維人員痛批一頓,因為停生產環境又被 BOSS 大批一頓。 ...
  • 簡介: uncurl是一個庫,允許您將curl請求轉換為使用requests 的python代碼。由於Chrome網路檢查器具有的“copy as cURL”,因此該工具對於用python重新創建瀏覽器請求很有用。 安裝: (venv) zhangdeMacBook-Pro:pythonClass ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...