C#網路下載器

来源:https://www.cnblogs.com/trueasureyuki/archive/2023/10/24/17785722.html
-Advertisement-
Play Games

之前學習了一部分的C#基礎,但是感覺會的不多,很多地方依然需要通過做一點小Demo來進行鞏固,那麼這個C#的網路下載器,就來了 原理講解 首先我們編寫代碼之前,我們需要瞭解下網路下載的原理到底是什麼? 學習過C#中IO流部分的知識,或者你有其它的語言的基礎,學習過其它語言的文件IO的基礎,肯定瞭解過 ...


之前學習了一部分的C#基礎,但是感覺會的不多,很多地方依然需要通過做一點小Demo來進行鞏固,那麼這個C#的網路下載器,就來了

原理講解

首先我們編寫代碼之前,我們需要瞭解下網路下載的原理到底是什麼?
學習過C#中IO流部分的知識,或者你有其它的語言的基礎,學習過其它語言的文件IO的基礎,肯定瞭解過我們電腦中的數據都是二進位,那麼網路中傳輸的數據本質上也是一樣的。


我們在學習文件IO中,都會學習文件的讀寫操作,讀操作(Output),將文件中的二進位數據讀出來,寫操作(Input)將記憶體中的二進位數據寫入到硬碟中的文件中。


那麼網路下載的本質就是文件的讀寫,其步驟分為以下幾步:

  1. 向伺服器發起請求
  2. 伺服器接收到請求,返迴響應,而這個響應是一個文件流數據
  3. 程式接收到響應,讀取響應體中的二進位數據(讀文件的操作)
  4. 將讀取的文件二進位數據寫入到磁碟中

代碼實現

現在已經瞭解了原理,那麼就開始代碼實現吧!

namespace WebDownLoad
{
    // 一個下載任務類
    public class DownLoadTask
    {

        public async Task Start(string url,string targetUrl)
        {
            try
            {
                // 1.先創建一個HttpClient連接
                // 由於HttpClient實現了IDispose介面,所以我們可以回收它的資源
                using HttpClient client = new HttpClient();
                // 1.1.某些網站會反爬,所以我們需要設置一些參數
                client.DefaultRequestHeaders.Add("User-Agent", "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/118.0.0.0 Safari/537.36 Edg/118.0.2088.61");

                // 2.進行非同步請求
                HttpResponseMessage  response = await client.GetAsync(url);
                // 3.請求成功
                if (response.IsSuccessStatusCode)
                {
                    // 3.1.讀取文件的類型
                    string? type = response.Content.Headers.ContentType?.MediaType;
                    // 3.2.文件的總大小
                    long? totalSize = response.Content.Headers.ContentLength;

                    // 3.3.獲取文件流
                    // 緩存區的大小為 10 kb
                    // 當前下載的大小
                    long downloadSize = 0;
                    int length = 0;

                    using BufferedStream bufferedStream = new BufferedStream(
                        await response.Content.ReadAsStreamAsync());
                    // 緩衝區大小 0.5KB
                    byte[] bufferSize = new byte[1024];
                    IEnumerable<byte> targetBuffer = new List<byte>();
                    string suffix = GetType(type);
                    while ((length = bufferedStream.Read(bufferSize, 0, bufferSize.Length)) != 0)
                    {
                        downloadSize += length;
                        long? progress = downloadSize * 100 / totalSize ;
                        targetBuffer = targetBuffer.Concat(bufferSize.ToList());
                        await Console.Out.WriteAsync($"\r下載中{progress}%");
                    }
                    await Console.Out.WriteLineAsync();
                    File.WriteAllBytes(targetUrl + Random.Shared.Next(10, 10000) + suffix, targetBuffer.ToArray());
                }
                // 4.請求失敗
                else
                {
                    Console.WriteLine("請求下載失敗");
                }

            }catch (HttpRequestException e)
            {
                Console.WriteLine($"請求下載失敗:{e.Message}");
            }
        }

	// 檢測文件的類型
        private string GetType(string type) {
            string suffix = "";
            if (type.Contains("jpeg"))
            {
                suffix = ".jpg";
            }
            else if (type.Contains("application/octet-stream"))
            {
                suffix = ".exe";
            }
            else if (type.Contains("png"))
            {
                suffix = ".png";
            }
            else if (type.Contains("mp4"))
            {
                suffix = ".mp4";
            }
            else if (type.Contains("avi"))
            {
                suffix = ".avi";
            }
            else if (type.Contains("mp3"))
            {
                suffix = ".mp3";
            }
            else if (type.Contains("mpeg"))
            {
                suffix = ".m4a";
            }
            return suffix;
        }
    }
}

我上面的這段代碼,其實有點累贅,大家可以寫的更好,不必看我的寫法,我對C#的很多類不太熟悉,所以,整體代碼的缺點還是很多的。

這裡其實為了做出一個正在下載的效果,讓控制台用戶有體驗,做了很多不必要的操作

這裡為了使得可以一次性下載多個文件使用非同步的操作,來提升程式的下載接收量,其實大家也可以不用非同步操作,使用線程來實現

最後實驗一下

using WebDownLoad;

namespace WebDownLoad
{
    public class Program
    {
        public async static Task Main(string[] args) {

            while (true)
            {
                Console.WriteLine("請輸入下載地址(如果輸入0退出):");
                string url = Console.ReadLine();

                if ("0".Equals(url))
                {
                    break;
                }
                DownLoadTask task = new DownLoadTask();
                task.Start(url, "E:\\網路下載\\");
            }
        }

    }
}

當前的文件夾中是沒有東西的
image

image

image


這裡還可以繼續下載,同時還有一個問題,我們需要瞭解,就是在C#中,其實非同步並不會新開一個線程,C#底層實現非同步其實本質上是使用switch goto 來進狀態跳轉,也就是它並不會實際上加快處理速度,但是可以加大程式的接收速度,也就是接收很快,但是處理不變,要加快處理還是得開線程,我們線程本身就是帶有非同步性的,所以這個程式使用線程實現可能是更好的

您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 基本概念 支持反射的語言可以在程式編譯期將變數的反射信息,如欄位名稱、類型信息、結構體信息等整合到可執行文件中,並給程式提供介面訪問反射信息,這樣就可以在程式運行期獲取類型的反射信息,並且有能力修改它們。 Go語言提供了 reflect 包來訪問程式的反射信息。 Refelct解析 Refelct包 ...
  • 所謂的爬蟲,就是通過模擬點擊瀏覽器發送網路請求,接收站點請求響應,獲取互聯網信息的一組自動化程式。 也就是,只要瀏覽器(客戶端)能做的事情,爬蟲都能夠做。 現在的互聯網大數據時代,給予我們的是生活的便利以及海量數據爆炸式的出現在網路中。除了網頁,還有各種手機APP,例如微信、微博、抖音,一天產生高達 ...
  • Gradle構建SpringBoot單模塊項目 方式Ⅰ:未基於:Gradle Wrapper 方式Ⅱ:(推薦使用)Gradle Wrapper【可以不安裝Gradle、統一Gradle的版本】——包括Maven也是一樣的可以用Wrapper的方式 版本:JDK8 + SpringBoot2.7.15 ...
  • 一、前言 大家在開發過程中必不可少的和日期打交道,對接別的系統時,時間日期格式不一致,每次都要轉化! 每次寫完就忘記了,小編專門來整理一篇來詳細說一下他們四個的轉換的方法,方便後面使用!! 二、LocalDateTime、LocalDate、Date三者聯繫 這裡先說一下,為什麼日期有Date了,還 ...
  • 內容摘自我的學習網站:topjavaer.cn 分享50道Java併發高頻面試題。 線程池 線程池:一個管理線程的池子。 為什麼平時都是使用線程池創建線程,直接new一個線程不好嗎? 嗯,手動創建線程有兩個缺點 不受控風險 頻繁創建開銷大 為什麼不受控? 系統資源有限,每個人針對不同業務都可以手動創 ...
  • 閱讀本文前,需要先閱讀SpringMVC之RESTful概述 8.1、前期工作 8.1.1、創建實體類Employee package org.rain.pojo; import java.io.Serializable; /** * @author liaojy * @date 2023/10/1 ...
  • 後臺數據的處理語言有很多,Java 是對前端採集的數據的一種比較常見的開發語言。互聯網移動客戶端的用戶量特別大,大量的數據處理需求應運而生。可移動嵌入式設備的表現形式 很多,如 PC 端,手機移動端,智能手錶,Google 眼鏡等。Server2client 的互聯網開發模式比較常見,有一種新的數據 ...
  • MDI窗體的相關學習使用 1、設置MDI父窗體 在屬性中找到IsMdiContainer選項,設置為True 2、添加MDI子窗體,在項目中依次選擇添加->窗體,然後一直預設即可 添加後的項目目錄(Form1為父視窗,Form2、Form3為子視窗) 3、在Form1.cs中,創建對應MDI子視窗的 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...