tit.Atitit. http 代理原理  atiHttpProxy  大木馬 h

来源:http://www.cnblogs.com/attilax/archive/2016/04/21/5419210.html
-Advertisement-
Play Games

Atitit. http 代理原理 atiHttpProxy 大木馬 1. 面這張圖可以清晰地闡明HttpProxy的實現原理:1 2. 代理伺服器用途1 3. 其中流程具體如下:2 4. 設計規劃3 5. 結束語4 1. 面這張圖可以清晰地闡明HttpProxy的實現原理: 2. 代理伺服器用途 ...


Atitit. http 代理原理  atiHttpProxy  大木馬

 

 

1. 面這張圖可以清晰地闡明HttpProxy的實現原理:1

2. 代理伺服器用途1

3. 其中流程具體如下:2

4. 設計規劃3

5. 結束語4

 

 

1. 面這張圖可以清晰地闡明HttpProxy的實現原理: 


2. 代理伺服器用途

代理伺服器看成是一種擴展瀏覽器功能的途徑。例如,在把數據發送給瀏覽器之前,可以用代理伺服器壓縮數據

調試器

數據搜集器

木馬病毒

3. 其中流程具體如下:

 
1、客戶端通過瀏覽器向代理伺服器發送HttpRequest(GET/POST);
2、代理伺服器讀取請求頭,抽取出請求的具體目標伺服器HOST和PORT;
3、代理伺服器把請求頭髮送給目標伺服器;
4、代理伺服器建立管道,供客戶端和目標伺服器通過兩個Socket通信。

 

 

不管以哪種方式應用代理伺服器,其監控HTTP傳輸的過程總是如下:

· 步驟一:內部的瀏覽器發送請求給代理伺服器。請求的第一行包含了目標URL

· 步驟二:代理伺服器讀取該URL,並把請求轉發給合適的目標伺服器。

· 步驟三:代理伺服器接收來自Internet目標機器的應答,把應答轉發給合適的內部瀏覽器。

例如,假設有一個企業的雇員試圖訪問www.cn.ibm.com網站。如果沒有代理伺服器,雇員的瀏覽器打開的Socket通向運行這個網站的Web服 務器,從Web伺服器返回的數據也直接傳遞給雇員的瀏覽器。如果瀏覽器被配置成使用代理伺服器,則請求首先到達代理伺服器;隨後,代理伺服器從請求的第一 行提取目標URL,打開一個通向www.cn.ibm.comSocket。當www.cn.ibm.com返回應答時,代理伺服器把應答轉發給雇員的 瀏覽器。

當然,代理伺服器並非只適用於企業環境。作為一個開發者,擁有一個自己的代理伺服器是一件很不錯的事情。例如,我們可以用代理伺服器來分析瀏覽器和Web 伺服器的交互過程。測試和解決Web應用中存在的問題時,這種功能是很有用的。我們甚至還可以同時使用多個代理伺服器(大多數代理伺服器允許多個伺服器鏈 接在一起使用)。例如,我們可以有一個企業的代理伺服器,再加上一個用Java編寫的代理伺服器,用來調試應用程式。但應該註意的是,代理伺服器鏈上的每 一個伺服器都會對性能產生一定的影響。

 

 

4. 設計規劃

正如其名字所示,代理伺服器只不過是一種特殊的伺服器。和大多數伺服器一樣,如果要處理多個請求,代理伺服器應該使用線程。下麵是一個代理伺服器的基本規劃:

1. 等待來自客戶(Web瀏覽器)的請求。

2. 啟動一個新的線程,以處理客戶連接請求。

3. 讀取瀏覽器請求的第一行(該行內容包含了請求的目標URL)。

4. 分析請求的第一行內容,得到目標伺服器的名字和埠。

5. 打開一個通向目標伺服器(或下一個代理伺服器,如合適的話)的Socket

6. 把請求的第一行發送到輸出Socket

7. 把請求的剩餘部分發送到輸出Socket

8. 把目標Web伺服器返回的數據發送給發出請求的瀏覽器。

當然,如果考慮細節的話,情況會更複雜一些。實際上,這裡主要有兩個問題要考慮:第一,從Socket按行讀取數據最適合進一步處理,但這會產生性能瓶 頸;第二,兩個Socket之間的連接必需高效。有幾種方法可以實現這兩個目標,但每一種方法都有各自的代價。例如,如果要在數據進入的時候進行過濾,這 些數據最好按行讀取;然而,大多數時候,當數據到達代理伺服器時,立即把它轉發出去更適合高效這一要求。另外,數據的發送和接收也可以使用多個獨立的線 程,但大量地創建和拆除線程也會帶來性能問題。因此,對於每一個請求,我們將用一個線程處理數據的接收和發送,同時在數據到達代理伺服器時,儘可能快速地 把它轉發出去。

 

 

 

當代理伺服器連接到Web伺服器之後,我用一個簡單的迴圈在兩個Socket之間傳遞數據。這裡可能出現一個問題,即如果沒有可操作的數據,調用read 方法可能導致程式阻塞,從而掛起程式。為防止出現這個問題,我用setSoTimeout方法設置了Socket的超時時間(參見Listing 2)。這樣,如果某個Socket不可用,另一個仍舊有機會進行處理,我不必創建一個新的線程。

 

 

和所有線程對象一樣,HttpProxy類的主要工作在run方法內完成(見Listing 2)。run方法實現了一個簡單的狀態機,從Web瀏覽器每次一個讀取字元,持續這個過程直至有足夠的信息找出目標Web伺服器。然後,run打開一個通 向該Web伺服器的Socket(如果有多個代理伺服器被鏈接在一起,則run方法打開一個通向鏈裡面下一個代理伺服器的Socket)。打開 Socket之後,run先把部分的請求寫入Socket,然後調用pipe方法。pipe方法直接在兩個Socket之間以最快的速度執行讀寫操作。

如果數據規模很大,另外創建一個線程可能具有更高的效率;然而,當數據規模較小時,創建新線程所需要的開銷會抵消它帶來的好處。

Listing 3顯示了一個很簡單的main方法,可以用來測試HttpProxy類。大部分的工作由一個靜態的startProxy方法完成(見Listing 4)。這個方法用到了一種特殊的技術,允許一個靜態成員創建HttpProxy類(或HttpProxy類的子類)的實例。它的基本思想是:把一個 Class對象傳遞給startProxy類;然後,startProxy方法利用映像APIReflection API)和getDeclaredConstructor方法確定該Class對象的哪一個構造函數接受一個Socket參數;最 後,startProxy方法調用newInstance方法創建該Class對象。

 

 

利用這種技術,我們可以在不創建startProxy方法定製版本的情況下,擴展HttpProxy類。要得到給定類的Class對象,只需在正常的名字 後面加上.class(如果有某個對象的一個實例,則代之以調用getClass方法)。由於我們把Class對象傳遞給了startProxy方法,所 以創建HttpProxy的派生類時,就不必再特意去修改startProxy。(下載代碼中包含了一個派生得到的簡單代理伺服器)。

 

 

5. 結束語

利用派生類定製或調整代理伺服器的行為有兩種途徑:修改主機的名字,或者捕獲所有通過代理伺服器的數據。processHostName方法允許代理服務 器分析和修改主機名字。如果啟用了日誌記錄,代理伺服器為每一個通過伺服器的字元調用writeLog方法。如何處理這些信息完全由我們自己決定――可以 把它寫入日誌文件,可以把它輸出到控制台,或進行任何其他滿足我們要求的處理。writeLog輸出中的一個Boolean標記指示出數據是來自瀏覽器還 是Web主機。

和許多工具一樣,代理伺服器本身並不存在好或者壞的問題,關鍵在於如何使用它們。代理伺服器可能被用於侵犯隱私,但也可以阻隔偷窺者和保護網路。即使代理 伺服器和瀏覽器不在同一臺機器上,我也樂意把代理伺服器看成是一種擴展瀏覽器功能的途徑。例如,在把數據發送給瀏覽器之前,可以用代理伺服器壓縮數據;未 來的代理伺服器甚至還可能把頁面從一種語言翻譯成另一種語言……可能性永無止境。

 

 

多線程Http代理伺服器 Java實現 - 獨上高樓 - ITeye技術網站.htm

用Java開發代理伺服器.htm


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 博主自己搗鼓的介面框架先到這裡 等工作上正式開始使用再後續完善需求 還是繼續學習python、學編程就直接動手寫 就想看看python+selenium的組合 什麼都不多說、先下載安裝 博主這裡已經安裝了pip 所以直接cmd進入python路徑下的Scripts文件目錄下 ...
  • python除了關鍵字(keywords)和內置的類型和函數(builtins),更多的功能是通過libraries(即modules)來提供的。 常用的libraries(modules)如下: 1)python運行時服務 * copy: copy模塊提供了對複合(compound)對象(list ...
  • 一、 操作環境搭建系統:Windows7 旗艦版 64位PHP環境:wampserver2.2e-php5.4.3-httpd2.2.22-mysql5.5.24 32位版下載地址:http://www.wampserver.com/en/ ThinkPHP:3.0正式版下載地址:http://th ...
  • 1. delete 用於釋放 new 分配的空間;free 用來釋放 malloc 分配的空間 2. delete [] 用於釋放 new [] 分配的空間 3. delete 釋放空間的時候會調用 相應的析構函數 同時,new時調用構造函數,而malloc不會,它只是分配記憶體。 4. 調用free ...
  • java常量池是一個經久不衰的話題,也是面試官的最愛,題目花樣百出,小菜早就對常量池有所耳聞,這次好好總結一下。 理論 小菜先拙劣的表達一下jvm虛擬記憶體分佈: 程式計數器是jvm執行程式的流水線,存放一些跳轉指令,這個太高深,小菜不懂。 本地方法棧是jvm調用操作系統方法所使用的棧。 虛擬機棧是j ...
  • 上一篇:《 "DDD 領域驅動設計-如何完善 Domain Model(領域模型)?" 》 開源地址: "https://github.com/yuezhongxin/CNBlogs.Apply.Sample" (代碼已更新) 需要註意的是,業務流程並不是工作流程,在領域模型中,業務流程的控制很重要 ...
  • 上篇博客我們系統的介紹了三種工廠模式,今天我們就來介紹一下單例模式。單例模式雖然簡單,但是還是比較重要的,是常用設計模式之一。在之前的博客《Objective-C中的單例模式》中介紹了Objective-C中MRC和ARC下的單例模式。單例模式應該說是設計模式中最為簡單的了,但是簡單並不代表其不重要 ...
  • 職責鏈模式(Chain of Responsibility) 定義 職責鏈模式(Chain of Responsibility),使多個對象都有機會處理請求,從而避免請求的發送者和接收者之間的耦合關係。將這個對象連成一條鏈,並沿著這條鏈傳遞該請求,直到有一個對象處理它為止。 類圖 描述 Handle ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...