一文讀懂 HTTP/1 HTTP/2 HTTP/3

来源:https://www.cnblogs.com/88223100/archive/2022/12/23/Understand-HTTP1-HTTP2-HTTP3.html
-Advertisement-
Play Games

從 1989 年萬維網(www)誕生,HTTP(HyperText Transfer Protocol)經歷了眾多版本迭代,WebSocket 也在期間萌芽。1991 年 HTTP0.9 被髮明。1996 年出現了 HTTP1.0。2015 年 HTTP2 正式發佈。2020 年 HTTP3 或能正... ...


 

 

從 1989 年萬維網(www)誕生,HTTP(HyperText Transfer Protocol)經歷了眾多版本迭代,WebSocket 也在期間萌芽。1991 年 HTTP0.9 被髮明。1996 年出現了 HTTP1.0。2015 年 HTTP2 正式發佈。2020 年 HTTP3 或能正式使用。以下將會簡單介紹。

 

HTTP1.1 與 HTTP2

HTTP1.1 的缺陷

  1. 高延遲 — 隊頭阻塞(Head-Of-Line Blocking)

  2. 無狀態特性 — 阻礙交互

  3. 明文傳輸 — 不安全性

  4. 不支持服務端推送

隊頭阻塞

隊頭阻塞是指當順序發送的請求序列中的一個請求因為某種原因被阻塞時,在後面排隊的所有請求也一併被阻塞,會導致客戶端遲遲收不到數據。

針對隊頭阻塞:

1.將同一頁面的資源分散到不同功能變數名稱下,提升連接上限。雖然能公用一個 TCP 管道,但是在一個管道中同一時刻只能處理一個請求,在當前的請求沒有結束之前,其他的請求只能處於阻塞狀態。

2.減少請求數量

3.內聯一些資源:css、base64 圖片等

4.合併小文件減少資源數

無狀態特性

無狀態是指協議對於連接狀態沒有記憶能力。純凈的 HTTP 是沒有 cookie 等機制的,每一個連接都是一個新的連接。上一次請求驗證了用戶名密碼,而下一次請求伺服器並不知道它與上一條請求有何關聯,換句話說就是掉登錄態

不安全性

傳輸內容沒有加密,中途可能被篡改和劫持。

SPDY 協議

SPDY 是由 google 推行的改進版本的 HTTP1.1 (那時候還沒有 HTTP2)。

圖片

特性:

  1. 多路復用 — 解決隊頭阻塞

  2. 頭部壓縮 — 解決巨大的 HTTP 頭部

  3. 請求優先順序 — 先獲取重要數據

  4. 服務端推送 — 填補空缺

  5. 提高安全性

 

多路復用

SPDY 允許在一個連接上無限制併發流。因為請求在一個通道上,TCP 效率更高(參考 TCP 擁塞控制 中的慢啟動)。更少的網路連接,發出更密集的包。

頭部壓縮

使用專門的 HPACK 演算法,每次請求和響應只發送差異頭部,一般可以達到 50% ~90% 的高壓縮率。

請求優先順序

雖然無限的併發流解決了隊頭阻塞的問題,但如果帶寬受限,客戶端可能會因防止堵塞通道而阻止請求。在網路通道被非關鍵資源堵塞時,高優先順序的請求會被優先處理。

服務端推送

服務端推送(ServerPush),可以讓服務端主動把資源文件推送給客戶端。當然客戶端也有權利選擇是否接收。

提高安全性

支持使用 HTTPS 進行加密傳輸。

 

HTTP2

HTTP2 基於 SPDY,專註於性能,最大的一個目標是在用戶和網站間只用一個連接。

新增特性:

  1. 二進位分幀 - HTTP2 性能增強的核心

  2. 多路復用 - 解決串列的文件傳輸和連接數過多

二進位分幀

首先,HTTP2 沒有改變 HTTP1 的語義,只是在應用層使用二進位分幀方式傳輸。因此,也引入了新的通信單位:幀、消息、流

分幀有什麼好處?伺服器單位時間接收到的請求數變多,可以提高併發數。最重要的是,為多路復用提供了底層支持。

多路復用

一個功能變數名稱對應一個連接,一個流代表了一個完整的請求-響應過程。是最小的數據單位,每個會標識出該幀屬於哪個也就是多個幀組成的數據流。多路復用,就是在一個 TCP 連接中可以存在多個流。演示

圖片

 

 

HTTP2 的缺陷

  1. TCP 以及 TCP+TLS 建立連接的延時

  2. TCP 的隊頭阻塞並沒有徹底解決

  3. 多路復用導致伺服器壓力上升

  4. 多路復用容易 Timeout

 

建連延時

TCP 連接需要和伺服器進行三次握手,即消耗完 1.5 個 RTT 之後才能進行數據傳輸。

TLS 連接有兩個版本—— TLS1.2 和 TLS1.3,每個版本建立連接所花的時間不同,大致需要 1~2 個 RTT。

RTT(Round-Trip Time):往返時延。表示從發送端發送數據開始,到發送端收到來自接收端的確認(接收端收到數據後便立即發送確認),總共經歷的時延。

隊頭阻塞沒有徹底解決

TCP 為了保證可靠傳輸,有一個“超時重傳”機制,丟失的包必須等待重傳確認。HTTP2 出現丟包時,整個 TCP 都要等待重傳,那麼就會阻塞該 TCP 連接中的所有請求。

圖片

RTO:英文全稱是 Retransmission TimeOut,即重傳超時時間;RTO 是一個動態值,會根據網路的改變而改變。RTO 是根據給定連接的往返時間 RTT 計算出來的。接收方返回的 ack 是希望收到的下一組包的序列號。

多路復用導致伺服器壓力上升

多路復用沒有限制同時請求數。請求的平均數量與往常相同,但實際會有許多請求的短暫爆發,導致瞬時 QPS 暴增。

多路復用容易 Timeout

大批量的請求同時發送,由於 HTTP2 連接記憶體在多個並行的流,而網路帶寬和伺服器資源有限,每個流的資源會被稀釋,雖然它們開始時間相差更短,但卻都可能超時。

即使是使用 Nginx 這樣的負載均衡器,想正確進行節流也可能很棘手。其次,就算你嚮應用程式引入或調整排隊機制,但一次能處理的連接也是有限的。如果對請求進行排隊,還要註意在響應超時後丟棄請求,以避免浪費不必要的資源。引用

 

QUIC

簡介

Google
在推 SPDY 的時候就已經意識到了這些問題,於是就另起爐竈搞了一個基於 UDP 協議的 QUIC 協議。而這個就是 HTTP3。它真正“完美”地解決了“隊頭阻塞”問題。

圖片

主要特點

  1. 改進的擁塞控制、可靠傳輸

  2. 快速握手

  3. 集成了 TLS 1.3 加密

  4. 多路復用

  5. 連接遷移

改進的擁塞控制、可靠傳輸

從擁塞演算法和可靠傳輸本身來看,QUIC 只是按照 TCP 協議重新實現了一遍,那麼 QUIC 協議到底改進在哪些方面呢?主要有如下幾點:

1. 可插拔 — 應用程式層面就能實現不同的擁塞控制演算法。

一個應用程式的不同連接也能支持配置不同的擁塞控制。應用程式不需要停機和升級就能實現擁塞控制的變更,可以針對不同業務,不同網路制式,甚至不同的 RTT,使用不同的擁塞控制演算法。

關於應用層的可插拔擁塞控制模擬,可以對 socket 上的流為對象進行實驗。

2. 單調遞增的 Packet Number — 使用 Packet Number 代替了 TCP 的 seq。

每個 Packet Number 都嚴格遞增,也就是說就算 Packet N 丟失了,重傳的 Packet N 的 Packet Number 已經不是 N,而是一個比 N 大的值。而 TCP 重傳策略存在二義性,比如客戶端發送了一個請求,一個 RTO 後發起重傳,而實際上伺服器收到了第一次請求,並且響應已經在路上了,當客戶端收到響應後,得出的 RTT 將會比真實 RTT 要小。當 Packet N 唯一之後,就可以計算出正確的 RTT。

3. 不允許 Reneging — 一個 Packet 只要被 Ack,就認為它一定被正確接收。

Reneging 的意思是,接收方有權把已經報給發送端 SACK(Selective Acknowledgment) 里的數據給丟了(如接收視窗不夠而丟棄亂序的包)。

QUIC 中的 ACK 包含了與 TCP 中 SACK 等價的信息,但 QUIC 不允許任何(包括被確認接受的)數據包被丟棄。這樣不僅可以簡化發送端與接收端的實現難度,還可以減少發送端的記憶體壓力。

4. 前向糾錯(FEC)

早期的 QUIC 版本存在一個丟包恢復機制,但後來由於增加帶寬消耗和效果一般而廢棄。FEC 中,QUIC 數據幀的數據混合原始數據和冗餘數據,來確保無論到達接收端的 n 次傳輸內容是什麼,接收端都能夠恢復所有 n 個原始數據包。FEC 的實質就是異或。示意圖:

圖片

5. 更多的 Ack 塊和增加 Ack Delay 時間。

QUIC 可以同時提供 256 個 Ack Block,因此在重排序時,QUIC 相對於 TCP(使用 SACK)更有彈性,這也使得在重排序丟失出現時,QUIC 可以在網路上保留更多的在途位元組。在丟包率比較高的網路下,可以提升網路的恢復速度,減少重傳量。

TCP 的 Timestamp 選項存在一個問題:發送方在發送報文時設置發送時間戳,接收方在確認該報文段時把時間戳欄位值複製到確認報文時間戳,但是沒有計算接收端接收到包到發送 Ack 的時間。這個時間可以簡稱為 Ack Delay,會導致 RTT 計算誤差。現在就是把這個東西加進去計算 RTT 了。

6. 基於 stream 和 connection 級別的流量控制。

為什麼需要兩類流量控制呢?主要是因為 QUIC 支持多路復用。Stream 可以認為就是一條 HTTP 請求。Connection 可以類比一條 TCP 連接。多路復用意味著在一條 Connetion 上會同時存在多條 Stream。

QUIC 接收者會通告每個流中最多想要接收到的數據的絕對位元組偏移。隨著數據在特定流中的發送,接收和傳送,接收者發送 WINDOW_UPDATE 幀,該幀增加該流的通告偏移量限制,允許對端在該流上發送更多的數據。

除了每個流的流控制外,QUIC 還實現連接級的流控制,以限制 QUIC 接收者願意為連接分配的總緩衝區。連接的流控制工作方式與流的流控制一樣,但傳送的位元組和最大的接收偏移是所有流的總和。

最重要的是,我們可以在記憶體不足或者上游處理性能出現問題時,通過流量控制來限制傳輸速率,保障服務可用性。

圖片

 

快速握手

由於 QUIC 是基於 UDP 的,所以 QUIC 可以實現 0-RTT 或者 1-RTT 來建立連接,可以大大提升首次打開頁面的速度。

集成了 TLS 1.3 加密

TLS 1.3 支持 3 種基本密鑰交換模式:

(EC)DHE (基於有限域或橢圓曲線的 Diffie-Hellman)
PSK - only
PSK with (EC)DHE

在完全握手情況下,需要 1-RTT 建立連接。TLS1.3 恢復會話可以直接發送加密後的應用數據,不需要額外的 TLS 握手,也就是 0-RTT。

TLS 1.3 0-RTT 簡單原理示意(基於 DHE):

圖片

但是 TLS1.3 也並不完美。TLS 1.3 的 0-RTT 無法保證前向安全性(Forward secrecy)。簡單講就是,如果當攻擊者通過某種手段獲取到了 Session Ticket Key,那麼該攻擊者可以解密以前的加密數據。

要緩解該問題可以通過設置使得與 Session Ticket Key 相關的 DH 靜態參數在短時間內過期(一般幾個小時)。

 

多路復用

QUIC 是為多路復用從頭設計的,攜帶個別流的的數據的包丟失時,通常隻影響該流。QUIC 連接上的多個 stream 之間並沒有依賴,也不會有底層協議限制。假如 stream2 丟了一個包,也只會影響 stream2 的處理。

連接遷移

TCP 是按照 4 要素(客戶端 IP、埠, 伺服器 IP、埠)確定一個連接的。而 QUIC 則是讓客戶端生成一個 Connection ID (64 位)來區別不同連接。只要 Connection ID 不變,連接就不需要重新建立,即便是客戶端的網路發生變化。由於遷移客戶端繼續使用相同的會話密鑰來加密和解密數據包,QUIC 還提供了遷移客戶端的自動加密驗證。

 

挑戰

NAT 問題

NAT 概念

為瞭解決 IP 地址不足的問題,NAT 給一個區域網絡只分配一個 IP 地址,這個網路內的主機,則分配私有地址,這些私有地址對外是不可見的,他們對外的通信都要藉助那個唯一分配的 IP 地址。所有離開本地網路去往 Internet 的數據報的源 IP 地址需替換為相同的 NAT,區別僅在於埠號不同。

圖片

原因

TCP 和 UDP 的報文頭部不同導致 NAT 問題的出現。

NAT 設備的埠記憶問題

對於基於 TCP 的 HTTP、HTTPS 傳輸,NAT 設備可以根據 TCP 報文頭的 SYN/FIN 狀態位,知道通信什麼時候開始,什麼時候結束,對應記憶 NAT 映射的開始和結束。

但是基於 UDP 傳輸的 HTTP3 ,不存在 SYN/FIN 狀態位。NAT 設備的記憶如果短於用戶會話時間,則用戶會話會中斷。NAT 設備的記憶時間如果長於用戶會話時間,則意味著 NAT 設備的埠資源會被白白占用。

最直接的解決方案是,在 QUIC 的頭部模仿 TCP 的 SYN/FIN 狀態,讓沿途的 NAT 設備知道會話什麼時候開始、什麼時候結束。但這需要升級全球所有的 NAT 設備的軟體。

另外一個可行的方案是,讓 QUIC 周期性地發送 Keepalive 消息,刷新 NAT 設備的記憶,避免 NAT 設備自動釋放。

NAT 設備禁用 UDP

在一些 NAT 網路環境下(如某些校園網),UDP 協議會被路由器等中間網路設備禁止,這時客戶端會直接降級,選擇 HTTPS 等備選通道,保證正常業務請求。

NGINX 負載均衡問題概念

QUIC 客戶端存在網路制式切換,就算是同一個移動機房,可能第一次業務請求時會落到 A 這台伺服器,後續再次連接,就會落到 B 實例上,重覆走 1-RTT 的完整握手流程。

全局握手緩存

為所有 QUIC 伺服器實例建立一個全局握手緩存。當用戶網路發生切換時,下一次的業務請求無論是落到哪一個機房或哪一臺實例上,握手建連都會是 0-RTT。

 

歷代 HTTP 速度測試

圖片

 

結尾

從古至今實時數據傳輸(音頻、視頻、游戲等)都面臨卡頓、延遲等問題,而 QUIC 基於 UDP 的架構和改進的重傳等特性,能夠有效的提升用戶體驗。目前
B 站 也已經接入 QUIC。

如果想要自己體驗 QUIC,可以使用 Libquic、Caddy 等。另外 github 上面也有 C++版本的 QUIC 實現,利用 Nodejs 的 C++ 模塊,前端工程師也可以快速實現一個 node-quic。

 

參考資料

  1. http2.0 原理詳細分析

  2. HPACK: HTTP/2 里的沉默殺手

  3. QPACK:HTTP /3 的頭壓縮

  4. DH 演算法

  5. 前向安全(ForwardSecrecy)

  6. TLS 1.3 VS TLS 1.2,讓你明白 TLS 1.3 的強大

  7. CaddyWeb 伺服器 QUIC 部署

  8. 關於 QUIC 的各種嘗試

  9. 使用 QUIC 協議實現實時視頻直播 0 卡頓

  10. 解密 HTTP/2 與 HTTP/3 的新特性

  11. Web通信協議,你還需要知道:SPDY 和 QUIC

  12. 如何看待 HTTP/3 ?

 

 

作者:charryhuang

本文來自博客園,作者:古道輕風,轉載請註明原文鏈接:https://www.cnblogs.com/88223100/p/Understand-HTTP1-HTTP2-HTTP3.html


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 如有問題請及時指正 select version(); 數據準備 -- 1.學生表 -- S# 學生編號,Sname 學生姓名,Sage 出生年月,Ssex 學生性別 CREATE TABLE `Student` ( `S#` varchar(10) NOT NULL, `Sname` varcha ...
  • GreatSQL社區原創內容未經授權不得隨意使用,轉載請聯繫小編並註明來源。 GreatSQL是MySQL的國產分支版本,使用上與MySQL一致。 作者:蟹黃瓜子 文章來源:社區投稿 1.基於四層+七層的負載均衡 實現負載均衡的方式有很多,例如基於DNS的負載均衡、基於四層交換技術的負載均衡、基於七 ...
  • 摘要:使用動態 SQL 並非一件易事,但藉助可用於任何 SQL 映射語句中的強大的動態 SQL 語言,MyBatis 顯著地提升了這一特性的易用性。 本文分享自華為雲社區《MyBatis詳解 - 動態SQL使用與原理》,作者:龍哥手記 。 動態 SQL 是 MyBatis 的強大特性之一。如果你使用 ...
  • 簡述 CloudCanal當前最新版本已經支持源端Oracle、SqlServer等主流傳統資料庫作為源端遷移同步數據到StarRocks來構建實時數倉。本文簡要介紹如何快速構建一條Oracle->StarRocks數據鏈路。 技術要點 基於StreamLoad的導入方式 CloudCanal 採用 ...
  • 小程式雲開發(Tencent CloudBase)擁有易接入、高性能、高可用等特性,其中雲資料庫作為核心組件之一,可以有效降低運維成本,幫助開發者實現業務快速上線與迭代。本文將簡要介紹如何通過 TEG 雲架構平臺部的高性能分散式 NoSQL 資料庫,為近百萬小程式雲開發用戶提供完整的原生雲端資料庫能... ...
  • 在先前舉辦的華為開發者大會2022(HDC)上,華為通過3D數字溪村展示了自有3D引擎“HMS Core 3D Engine”(以下簡稱3D Engine)的強大能力。作為一款高性能、高畫質、高擴展性的3D引擎,3D Engine不僅能通過實時光追、水體渲染、體積雲霧、多維GPU粒子系統等技術還原真 ...
  • 1.繼承 css的繼承:就是給父級設置一些屬性,子級繼承了父級的該屬性,這就是我們css中的繼承。官方的解釋,繼承是一種規則,它允許樣式不僅應用於特定的html標簽元素,而且應用於其後代元素。 a.有繼承的屬性 1.字體系列屬性 font:組合字體 font-family:規定元素的字體系列 fon ...
  • Array API 數組方法在JS中是一個重要的知識點。本文將重點講解一些方法的使用細節和使用場景。以下是對數組方法的分類 靜態方法 | 方法 | 說明 | | | | | Array.from() | 從數組類對象或可迭代對象創建一個新的 Array 實例。 | | Array.isArray() ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...