dotnet 6 為什麼網路請求不跟隨系統網路代理變化而動態切換代理

来源:https://www.cnblogs.com/lindexi/archive/2022/09/19/16706558.html
-Advertisement-
Play Games

本文技術方案支持.Net/.Net Core/.Net Framework 數據分頁,幾乎是任何應用系統的必備功能。但當數據量較大時,分頁操作的效率就會變得很低。大數據量分頁時,一個操作耗時5秒、10秒、甚至更長時間都是有可能的,但這在用戶使用的角度是不可接受的…… 數據分頁往往有三種常用方案。 第 ...


本文記錄在 dotnet 6 的網路和在 .NET Framework 的行為的變更。在 dotnet 6 下,預設的網路請求在系統網路代理變更的時候,是不會動態切換代理的。例如在應用運行進行網路通訊之後,打開 Fiddler 抓包,此時將會發現 Fiddler 抓不到包,只有在應用重啟之後才能抓到。或者是開著 Fiddler 抓包,然後退出 Fiddler 之後應用就斷網了

如此行為是因為 Fiddler 抓包其中的一個原理就是設置系統的本機網路代理,而由於 dotnet 6 下,應用不會動態切換代理,如果在應用啟動進行網路通訊之後,再打開 Fiddler 抓包,在 Fiddler 打開之後,將會修改系統的本機網路代理,但是 dotnet 6 的應用由於預設不會動態切換代理從而不走 Fiddler 的代理,因此 Fiddler 抓不到包。同理,在開著 Fiddler 抓包之後,退出了 Fiddler 將會修改本機的網路代理,但是由於 dotnet 6 的應用預設不會動態切換代理,在 Fiddler 修改了本機網路代理之後,依然 dotnet 6 的應用還在使用著被關閉的 Fiddler 的網路代理從而斷網

核心原因是在 dotnet 6 下變更了網路代理動態切換的行為。其實考古找到這個行為在 .NET Core 2.0 就是預設不支持自動跟隨系統代理切換而修改代理

在 .NET Framework 的 4.0 開始,通過監聽註冊表的 HKEY_CURRENT_USER\Software\Microsoft\Windows\CurrentVersion\Internet Settings\Connections 的變更,在變更之後進行刷新網路請求的代理。詳細請看 https://referencesource.microsoft.com/#System/net/System/Net/_AutoWebProxyScriptEngine.cs,395

在 .NET Core 下,網路代理的獲取只有一次,獲取到的代理沒有再去監聽註冊表的變更,也就沒有再次刷新。此問題已反饋給官方,詳細請看 https://github.com/dotnet/runtime/issues/46910

在 .NET Core 將會在首次獲取 HttpClient.DefaultProxy 時進行初始化,值得一提的是在 .NET Core 調用的 WebRequest.GetSystemWebProxy 方法底層也是調用 HttpClient.DefaultProxy 屬性

 public static IWebProxy GetSystemWebProxy() => HttpClient.DefaultProxy;

以上的 GetSystemWebProxy 實現請看 Make WebRequest.GetSystemWebProxy() return a working proxy by stephentoub · Pull Request #41692 · dotnet/corefx

在 HttpClient.DefaultProxy 裡面,將會調用到 SystemProxyInfo.cs 的 ConstructSystemProxy 方法獲取對應平臺的代理。這個 ConstructSystemProxy 在 OSX 和 Unix 和 Windows 有各自的實現

在 Windows 實現如下

        public static IWebProxy ConstructSystemProxy()
        {
            if (!HttpEnvironmentProxy.TryCreate(out IWebProxy? proxy))
            {
                HttpWindowsProxy.TryCreate(out proxy);
            }

            return proxy ?? new HttpNoProxy();
        }

在 HttpEnvironmentProxy 裡面,將嘗試通過環境變數獲取代理的配置,也就是說 dotnet 6 應用是支持通過環境變數設置代理,如此更加方便調試。獲取的環境變數分別是 ALL_PROXYHTTP_PROXYHTTPS_PROXY 這幾個慣例變數

如上面代碼,如果獲取不到環境變數,那麼就進入 HttpWindowsProxy 的代碼。在 WinInetProxyHelper 將會讀取系統的代理

如上面代碼,可以看到,實際上在 HttpClient.DefaultProxy 裡面只會獲取一次,沒有通過註冊表的變更再次刷新

這就是網路請求不跟隨本機網路代理變化的原因

一個解決方法就是拷貝 dotnet runtime 的讀取系統的配置方法,再加上監聽註冊表變更進行刷新配置,從而實現動態跟隨系統代理變化而變化。我拷貝了代碼,寫了一個版本,使用方法是

var dynamicHttpWindowsProxy = new DynamicHttpWindowsProxy();

HttpClient.DefaultProxy = dynamicHttpWindowsProxy; 

代碼的實現放在githubgitee 歡迎訪問

可以通過如下方式獲取源代碼,先創建一個空文件夾,接著使用命令行 cd 命令進入此空文件夾,在命令行裡面輸入以下代碼,即可獲取到代碼

git init
git remote add origin https://gitee.com/lindexi/lindexi_gd.git
git pull origin 8c64e9676c4205e55fad227a86d5d8d95a5ebe91

以上使用的是 gitee 的源,如果 gitee 不能訪問,請替換為 github 的源。請在命令行繼續輸入以下代碼

git remote remove origin
git remote add origin https://github.com/lindexi/lindexi_gd.git
git pull origin 8c64e9676c4205e55fad227a86d5d8d95a5ebe91

獲取代碼之後,進入 NilerlanaihikaWhurreeberhalur 文件夾,具體實現放在 Proxy 文件裡面,在 Program.cs 包含了測試邏輯,可以不斷嘗試訪問百度。可以測試在使用 HttpClient.DefaultProxy = dynamicHttpWindowsProxy; 時,切換 Fiddler 代理配置,和不使用 DynamicHttpWindowsProxy 切換配置的行為

以上代碼基本都是從 dotnet runtime 裡面抄的,可以放心用在正式的項目。監聽註冊表變更是從 https://www.codeproject.com/Articles/4502/RegistryMonitor-a-NET-wrapper-class-for-RegNotifyC 抄的,這是一段比較古老穩定的代碼,只不過需要多開啟一個線程用來監聽註冊表。這就是為什麼在例子代碼裡面,會延遲去啟動監聽註冊表

參考文檔:

博客園博客只做備份,博客發佈就不再更新,如果想看最新博客,請到 https://blog.lindexi.com/

知識共用許可協議
本作品採用知識共用署名-非商業性使用-相同方式共用 4.0 國際許可協議進行許可。歡迎轉載、使用、重新發佈,但務必保留文章署名[林德熙](http://blog.csdn.net/lindexi_gd)(包含鏈接:http://blog.csdn.net/lindexi_gd ),不得用於商業目的,基於本文修改後的作品務必以相同的許可發佈。如有任何疑問,請與我[聯繫](mailto:[email protected])。
您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 一、bean被創建的時間 考慮一個問題,我們都知道spring通過xml的配置創建bean,那麼bean是什麼時間被創建的呢?是在我們getBean()的時候創建的嗎? 我們來做一個測試: 1.首先建立一個User類: package com.jms.pojo; public class User ...
  • Microsoft Word 提供了許多易於使用的文檔操作工具,同時也提供了豐富的功能集供創建複雜的文檔使用。在使用的時候,你可能需要複製一個文檔裡面的內容到另一個文檔。複製的內容可支持包括文本、圖片、表格、超鏈接、書簽、批註、形狀、編號列表、腳註、章節附註等等在內的多種元素。 ...
  • 摘要:本文講述圖像金字塔知識,瞭解專門用於圖像向上採樣和向下採樣的pyrUp()和pyrDown()函數。 本文分享自華為雲社區《[Python圖像處理] 二十一.圖像金字塔之圖像向下取樣和向上取樣》,作者:eastmount。 一.圖像金字塔 圖像金字塔是指由一組圖像且不同分別率的子圖集合,它是圖 ...
  • 併發框架Disruptor 1. Disruptor概述 1.1 背景 ​ Disruptor是英國外匯交易公司LMAX開發的一個高性能隊列,研發的初衷是解決記憶體隊列的延遲問題(在性能測試中發現竟然與I/O操作處於同樣的數量級),基於Disruptor開發的系統單線程能支撐每秒600萬訂單,2010 ...
  • 很多人學編程經常是腦子一熱然後就去網上一搜資源就開始學習了,但學到了後面發現目前所學的東西並不是自己最喜歡的,好像自己更喜歡另一個技術,感覺自己學錯了,於是乎又去學習別的東西。 結果竹籃打水一場空,前面所付出的努力都白費了,甚至有人還花了錢買了課,這個實在是划不來。 所以在你學一門編程語言之前,一定 ...
  • 配置訪問介面 public IConfiguration _Config; public 類名 (IConfiguration Config) { _Config = Config; } 配置文件數據示例 { "AllowedHosts": "*", "Users": [ { "Id": "123" ...
  • 使用 Buffered Paint API 繪製帶有淡入淡出動畫的控制項 發表於2011 年 10 月 23 日 Windows 窗體提供了許多機制來構建與操作系統風格相匹配的專業自定義 UI 控制項;通過結合視覺風格渲染器、系統顏色/畫筆、ControlPaint類等,可以在用戶代碼中重現大多數標準 ...
  • 一:背景 1. 講故事 前段時間有位朋友在分析他的非托管泄漏時,發現NT堆的_HEAP_ENTRY 的 Size 和 !heap 命令中的 Size 對不上,來咨詢是怎麼回事? 比如下麵這段輸出: 0:000> !heap 0000000000550000 -a Index Address Name ...
一周排行
    -Advertisement-
    Play Games
  • 一:背景 1.講故事 在分析的眾多dump中,經常會遇到各種奇葩的問題,僅通過dump這種快照形式還是有很多問題搞不定,而通過 perfview 這種粒度又太粗,很難找到問題之所在,真的很頭疼,比如本篇的 短命線程 問題,參考圖如下: 我們在 t2 時刻抓取的dump對查看 短命線程 毫無幫助,我根 ...
  • 在日常後端Api開發中,我們跟前端的溝通中,通常需要協商好入參的數據類型,和參數是通過什麼方式存在於請求中的,是表單(form)、請求體(body)、地址欄參數(query)、還是說通過請求頭(header)。 當協商好後,我們的介面又需要怎麼去接收這些數據呢?很多小伙伴可能上手就是直接寫一個實體, ...
  • 許多情況下我們需要用到攝像頭獲取圖像,進而處理圖像,這篇博文介紹利用pyqt5、OpenCV實現用電腦上連接的攝像頭拍照並保存照片。為了使用和後續開發方便,這裡利用pyqt5設計了個相機界面,後面將介紹如何實現,要點包括界面設計、邏輯實現及完整代碼。 ...
  • 思路分析 註冊頁面需要對用戶提交的數據進行校驗,並且需要對用戶輸入錯誤的地方進行提示! 所有我們需要使用forms組件搭建註冊頁面! 平時我們書寫form是組件的時候是在views.py裡面書寫的, 但是為了接耦合,我們需要將forms組件都單獨寫在一個地方,需要用的時候導入就行! 例如,在項目文件 ...
  • 思路分析 登錄頁面,我們還是採用ajax的方式提交用戶數據 唯一需要學習的是如何製作圖片驗證碼! 具體的登錄頁面效果圖如下: 如何製作圖片驗證碼 推導步驟1:在img標簽的src屬性里放上驗證碼的請求路徑 補充1.img的src屬性: 1.圖片路徑 2.url 3.圖片的二進位數據 補充2:字體樣式 ...
  • 哈嘍,兄弟們! 最近有許多小伙伴都在吐槽打工好難。 每天都是執行許多重覆的任務 例如閱讀新聞、發郵件、查看天氣、打開書簽、清理文件夾等等, 使用自動化腳本,就無需手動一次又一次地完成這些任務, 非常方便啊有木有?! 而在某種程度上,Python 就是自動化的代名詞。 今天就來和大家一起學習一下, 用 ...
  • 作者:IT王小二 博客:https://itwxe.com 前面小二介紹過使用Typora+PicGo+LskyPro打造舒適寫作環境,那時候需要使用水印功能,但是小二在升級LskyPro2.x版本發現有很多不如人意的東西,遂棄用LskyPro使用MinIO結合代碼實現自己需要的圖床功能,也適合以後 ...
  • OpenAI Gym是一款用於研發和比較強化學習演算法的工具包,本文主要介紹Gym模擬環境的功能和工具包的使用方法,並詳細介紹其中的經典控制問題中的倒立擺(CartPole-v0/1)問題。最後針對倒立擺問題如何建立控制模型並採用爬山演算法優化進行了介紹,並給出了相應的完整python代碼示例和解釋。要... ...
  • python爬蟲瀏覽器偽裝 #導入urllib.request模塊 import urllib.request #設置請求頭 headers=("User-Agent","Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, l ...
  • 前端代碼搭建 主要利用的是bootstrap3中js插件里的模態框版塊 <li><a href="" data-toggle="modal" data-target=".bs-example-modal-lg">修改密碼</a></li> <div class="modal fade bs-exam ...