Nginx 是如何處理 HTTP 頭部的?

来源:https://www.cnblogs.com/iziyang/archive/2020/04/12/12687398.html
-Advertisement-
Play Games

Nginx 處理 HTTP 頭部的過程 Nginx 在處理 HTTP 請求之前,首先需要 Nginx 的框架先和客戶端建立好連接,然後接收用戶發來的 HTTP 的請求行,比如方法、URL 等,然後接收所有的 Header,根據這些 Header 信息,才能決定由哪些 HTTP 模塊處理請求。下麵這張 ...


Nginx 處理 HTTP 頭部的過程

Nginx 在處理 HTTP 請求之前,首先需要 Nginx 的框架先和客戶端建立好連接,然後接收用戶發來的 HTTP 的請求行,比如方法、URL 等,然後接收所有的 Header,根據這些 Header 信息,才能決定由哪些 HTTP 模塊處理請求。下麵這張圖,解釋了 Nginx 在處理 HTTP 請求之前,所經歷的一系列流程,強烈建議收藏保存。下麵針對每個部分單獨講解一下。

nginx 接收 HTTP 請求流程圖.png

接收請求事件模塊

首先是三次握手,當客戶端發來 ACK 之後,由操作系統內核回一個 SYN+ACK,緊接著客戶端 ACK 之後,連接建立成功。同時可能有很多 worker 進程都在監聽 80 或 443 埠,由操作系統的負載均衡演算法,選取一個 worker 進程來處理,這個 worker 進程會通過 epoll_wait 方法,返回一個建立連接的句柄。拿到了監聽的句柄之後,這實際上是一個讀事件(因為是從操作系統中讀取到了一個請求),調用 accept 方法,分配連接記憶體池。

記憶體池主要分為連接記憶體池和請求記憶體池。

連接記憶體池大小的配置是 connection_pool_size,到了這一步之後,Nginx 會為已經建立的連接分配一個 512 位元組大小的連接記憶體池。分配完記憶體池,建立好連接之後,HTTP 模塊會從事件模塊手裡接入請求處理的過程,HTTP 模塊在啟動時,會調用 ngx_http_init_connection 方法來設置回調方法,這個時候會把新建立連接的讀事件通過 epoll_ctl 函數添加到 epoll 中,然後加一個超時定時器 client_header_timeout: 60s,這個定時器的作用是,如果超過 60s 還沒有接收到客戶端發來的請求,那麼就會斷開連接。這一部分走完之後,Nginx 的事件模塊可能就會切換到其他的句柄去處理了。

當用戶真的把請求發來之後,操作系統會回覆一個 ACK,同時事件模塊的 epoll_wait 也拿到了這個請求,這個時候會調用設置的回調方法 ngx_http_wait_request_handler,將接收到的用戶請求讀到用戶態中,而讀取到用戶態中需要操作系統分配記憶體,那麼這段記憶體分配多大?從哪裡分配呢?

這段記憶體是從連接記憶體池分配的,初始雖然分配了 512 位元組,但是記憶體池可以擴展,由 client_header_buffer_size: 1k 分配 1k 記憶體,記憶體池並不是越大越好,因為用戶即使發送了 1 個位元組,也會分配出 1k 的記憶體出來。當 URL 超過 1k 後,應該怎麼辦呢?

接收請求 HTTP 模塊

處理請求和處理連接是不一樣的,處理請求只需要放到 Nginx 記憶體中就行了,但是處理請求還需要做大量的上下文分析,所以要分配一個請求記憶體池 request_pool_size: 4k。分配完以後,狀態機開始解析請求行,如果這時候發現 URL 大於 4k,那麼就會再分配一個大記憶體,也就是 large_client_header_buffers: 4 8k,這個配置的意思是說,最多分配 4 個 8k,它並不是一次性分配 32k,而是先分配 8k 然後再去解析請求行,如果依然大於 8k,那麼就會再分配 8k 的記憶體。

Nginx 有很多變數,這些變數都是指針,其中可以用來標識 URI,標識完成之後,就開始處理 header。狀態機解析 header 的時候,如果發現記憶體不夠,也就是假如 URL 已經用掉了 large_client_header_buffers: 4 8k 中的 2 個 8k,這時候最多也只能分配 8k,請求行和 header 是公用 4 個 8k的。

分配完大記憶體之後,就開始標識 header,確定哪一個 server 塊去處理請求,然後移除超時定時器,接下來,就開始核心的 11 個階段 HTTP 請求處理請求。

這裡需要註意以下幾個地方:

  • 連接記憶體池:初始大小 512 位元組
    • client_header_buffer_size: 1k 從連接記憶體池中分配
    • large_client_header_buffers: 4 8k 也是從連接記憶體池中分配
  • 請求記憶體池:request_pool_size: 4k

公眾號「原少子楊」回覆 Nginx 領取知識圖譜

關註公眾號回覆 Nginx 領取知識圖譜


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 知道為什麼要用內插字元串,只有踩過坑的人才能明白,如果你曾今使用string.format超5個以上占位符,那其中的痛苦我想你肯定是能夠共鳴的。 一:痛苦經歷 先上一段曾今寫過的一段代碼,大家來體會一下: 這裡擁有多達8個占位符,當年寫這個的時候,會有三個痛點。 1. 占位符不能寫錯了 比如這裡的 ...
  • .net core 集成 sentry 進行異常報警 Intro Sentry 是一個實時事件日誌記錄和彙集的平臺。其專註於錯誤監控以及提取一切事後處理所需信息而不依賴於麻煩的用戶反饋。它分為客戶端和服務端,客戶端(目前客戶端有 C , Python, PHP, JavaScript, Ruby等多 ...
  • 一、引言 在具體業務中可能會遇到一些要提前處理的消息,比如普通客戶的消息按先進先出的順序處理,Vip客戶的消息要提前處理。在RabbitMQ中,消息優先順序的實現方式是:在聲明queue時設置隊列的x-max-priority屬性,然後在publish消息時,設置消息的優先順序即可。 RabbitMQ優 ...
  • LIUNX中程式包管理 此內容僅為筆記,這一兩天給會重新整理補充上操作示例。 一、基礎 1、程式描述: 第一種描述: 程式+數據 第二種描述: 演算法+數據結構 2、程式的組成部分: ​ 1、二進位程式 ​ 2、配置文件,可以被查看其內容的文件 ​ 3、庫文件,庫文件不能獨立執行,只能被調用執行 ​ ...
  • 當我們不知道一個命令或配置文件有什麼作用,或者該怎麼使用它的時候,可以查看下它的幫助信息。 whatis 命令:顯示命令的name幫助信息,即顯示此命令是做什麼用的。 apropos 配置文件:顯示配置文件的name幫助信息,即顯示此配置文件是做什麼用的。 命令 --help:顯示命令的選項信息。 ...
  • 如今二維碼可以說是深入走進大家的生活了,推送名片、掃碼支付都離不開它,大家幾乎每天都會和二維碼打交道。雖然大家都知道二維碼的各種應用,但很多人並不知道二維碼的原理。做嵌入式這行的人一大特質就是喜歡研究各種技術本身,痞子衡早就對二維碼技術感興趣了。上期嵌入式半月刊的最後,痞子衡介紹了一個基於i.MXR... ...
  • shell 1. useradd shell【推薦】(防止利用普通用戶登錄) 創建用戶,但是該用戶不可登錄 [root@yjssjm ~] useradd yjssjm s /sbin/nologin 註意: 應用服務用戶一般都是不可登錄的,只提供服務就可以了。 當我們編譯安裝的時候有的時候需要創建 ...
  • Linux系統安裝好之後會自動生成一些目錄,這些目錄都有各自的含義和用處,並且我們也應該遵循它們各自的作用來使用它,在登錄之後輸入命令“ls /”可以查看根目錄下有哪些一級目錄。 一些比較重要的目錄及其作用如下: /bin/:bin其實是Binary的縮寫,存放最經常使用的系統命令的目錄,普通用戶和 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...