Java實現多線程斷點下載(下載過程中可以暫停)

来源:http://www.cnblogs.com/panhouye/archive/2016/12/22/6209635.html
-Advertisement-
Play Games

線程可以理解為下載的通道,一個線程就是一個文件的下載通道,多線程也就是同時開啟好幾個下載通道。當伺服器提供下載服務時,使用下載者是共用帶寬的,在優先順序相同的情況下,總伺服器會對總下載線程進行平均分配。不難理解,如果你線程多的話,那下載的越快。 現流行的下載軟體都支持多線程,且支持中途暫停下載,再次開 ...


線程可以理解為下載的通道,一個線程就是一個文件的下載通道,多線程也就是同時開啟好幾個下載通道。當伺服器提供下載服務時,使用下載者是共用帶寬的,在優先順序相同的情況下,總伺服器會對總下載線程進行平均分配。不難理解,如果你線程多的話,那下載的越快。

現流行的下載軟體都支持多線程,且支持中途暫停下載,再次開始時不會從頭開始下載。

兩種功能的實現步驟如下:

(1)連接到下載資源文件時,首先判斷資源文件大小,同步的在本地創建一個大小相同的臨時文件用於存儲下載數據。

(2)根據線程數量確定每個線程所需下載的文件大小

(3)根據每個線程下載的文件大小以及線程數量,決定每個線程的開始下載位置以及結束下載位置

(4)為實現斷點下載功能,需要對每個線程實時下載的位置做標記,方便下次開始時繼續之前進度下載

開啟3個線程下載視圖(預設下載目錄為java所轄項目):

整體實現代碼如下(優化空間還有很大哦,大家不要只是看看就完事嘍)

  1 import java.io.BufferedReader;
  2 import java.io.File;
  3 import java.io.FileInputStream;
  4 import java.io.InputStream;
  5 import java.io.InputStreamReader;
  6 import java.io.RandomAccessFile;
  7 import java.net.HttpURLConnection;
  8 import java.net.URL;
  9 public class DownLoad {
 10     // 聲明下載路徑“紅色警戒2”
 11     public static final String PATH = "http://soft3.xzstatic.com/2015/10/hsjj2ghgzh.rar";
 12     public static int threadCount = 0;// 聲明線程數量
 13     public static void main(String[] args) {
 14         try {
 15             URL url = new URL(PATH);
 16             // 獲取連接
 17             HttpURLConnection conn = (HttpURLConnection) url.openConnection();
 18             // 通過獲取連接定義文件名
 19             String[] str = PATH.split("/");
 20             String fileName = str[5];
 21             // 獲取下載文件大小
 22             int fileLength = conn.getContentLength();
 23             System.out.println(fileName);
 24             // 在本地創建一個與伺服器大小一致的可隨機寫入文件
 25             RandomAccessFile raf = new RandomAccessFile(fileName, "rwd");
 26             System.out.println(fileLength);// 測試用
 27             raf.setLength(fileLength);
 28             // 自定義線程數量
 29             threadCount = 3;
 30             // 計算每條線程下載數據的大小
 31             int blockSize = fileLength / threadCount;
 32             // 啟動線程下載
 33             for (int threadId = 1; threadId <= threadCount; threadId++) {
 34                 // 核心代碼,定義每個線程開始以及結束的下載位置
 35                 int startPos = (threadId - 1) * blockSize;// 開始下載的位置
 36                 int endPos = (threadId * blockSize) - 1;// 結束下載的位置(不包含最後一塊)
 37                 if (threadCount == threadId) {
 38                     endPos = fileLength;
 39                 }
 40                 new Thread(new DownLoadThread(threadId, startPos, endPos, PATH))
 41                         .start();
 42             }
 43         } catch (Exception e) {
 44             e.printStackTrace();
 45         }
 46     }
 47 
 48     // 實現下載線程
 49     static class DownLoadThread implements Runnable {
 50         private int threadId;
 51         private int startPos;
 52         private int endPos;
 53         private String path;
 54         public DownLoadThread(int threadId, int startPos, int endPos,
 55                 String path) {
 56             super();
 57             this.threadId = threadId;
 58             this.startPos = startPos;
 59             this.endPos = endPos;
 60             this.path = path;
 61         }
 62         public void run() {
 63             try {
 64                 URL url = new URL(path);
 65                 String[] str = PATH.split("/");
 66                 String fileName = str[5];
 67                 HttpURLConnection conn = (HttpURLConnection) url
 68                         .openConnection();
 69                 // 設置URL請求的方法(具體參考API)
 70                 conn.setRequestMethod("GET");
 71                 // 設置500毫秒為超時值
 72                 conn.setReadTimeout(5000);
 73                 File file = new File(threadId + ".txt");
 74                 if (file.exists() && file.length() > 0) {
 75                     BufferedReader br = new BufferedReader(
 76                             new InputStreamReader(new FileInputStream(file)));
 77                     String saveStartPos = br.readLine();
 78                     if (saveStartPos != null && saveStartPos.length() > 0) {
 79                         startPos = Integer.parseInt(saveStartPos);
 80                     }
 81                 }
 82                 // 註意雙引號內的格式,不能包含空格(等其他字元),否則報416
 83                 conn.setRequestProperty("Range", "bytes=" + startPos + "-"
 84                         + endPos);
 85                 RandomAccessFile raf = new RandomAccessFile(fileName, "rwd");// 存儲下載文件的隨機寫入文件
 86                 raf.seek(startPos);// 設置開始下載的位置
 87                 System.out.println("線程" + threadId + ":" + startPos + "~~"
 88                         + endPos);
 89                 InputStream is = conn.getInputStream();
 90                 byte[] b = new byte[1024 * 1024 * 10];
 91                 int len = -1;
 92                 int newPos = startPos;
 93                 while ((len = is.read(b)) != -1) {
 94                     RandomAccessFile rr = new RandomAccessFile(file, "rwd");// 存儲下載標記的文件
 95                     raf.write(b, 0, len);
 96                     // 將下載標記存入指定文檔
 97                     String savaPoint = String.valueOf(newPos += len);
 98                     rr.write(savaPoint.getBytes());
 99                     rr.close();
100                 }
101                 is.close();
102                 raf.close();
103                 System.out.println("下載完成");
104             } catch (Exception e) {
105                 e.printStackTrace();
106             }
107         }
108     }
109 }

註意事項:

(1)理解每個線程下載的開始和結束位置的計算方法(不包含最後一個線程,從0開始)

開始位置=(線程數-1)*每個線程所要下載的文件長度(大小)

結束位置=(線程數*每個線程下載的文件大小)-1

(2)最後一個線程所分配的下載開始位置為上一個線程的結束位置,結束位置為文件長度。

所以最後一個線程所下載的文件長度一般不會與之前線程相同

(3)本次演示下載路徑預設為java項目所在目錄,而且目錄中不能包含與下載文件同名的文件,不然程式會報416網路請求錯誤。

(4)我個人在實現時犯的一個錯誤conn.setRequestProperty("Range","bytes="+ startPos+"-"+endPos);一定要註意引號沒一定不能有多餘的空格以及其他字元,我就是在引號內多了個空格,但錯誤定位一直是inputStream錯誤,找錯找的很痛苦大哭


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 用html實現圖片上傳 後臺採用.net其中在這裡要借用一個js插件 在這裡我會寫一個圖片上傳的一個小Demo,有不全的地方多多包容,和提議, 我把已經寫好的demo已經上傳到百度雲 在這裡可以下載 http://pan.baidu.com/s/1bG2934 開始 html中的內容是 <body> ...
  • 年關將至,對於大部分程式員來說,馬上就可以閑下來一段時間了,然而在這個閑暇的時間里,唯有爭論哪門語言更好可以消磨時光,估計最近會有很多關於java與.net的博文出現,我表示要作為一個吃瓜群眾,靜靜的看著大佬們發表心情。 以上的廢話說的夠多了,這裡就不再廢話了,還是切入正題吧。 在項目開發中,對於系 ...
  • 本文要介紹的是ASP.NET怎樣讀寫文本文件,但更重要的是實現的過程。使用的工具是Visual Studio 2015 ,.NET版本是4.6.1 。一共建立的2個項目,HoverTreePanel和HoverTreeWeb,都是ASP.NET項目。文章末尾附源碼下載。項目結果如下圖:讀寫文件功能在 ...
  • 在多線程(線程同步)中,我們將學習多線程中操作共用資源的技術,學習到的知識點如下所示: 執行基本的原子操作 使用Mutex構造 使用SemaphoreSlim構造 使用AutoResetEvent構造 使用ManualResetEventSlim構造 使用CountDownEvent構造 使用Bar ...
  • 目錄 前言 OAuth2.0簡介 授權模式 (SimpleSSO示例) 使用Microsoft.Owin.Security.SimpleSSO模擬OpenID認證 通過authorization code授權模式申請令牌 通過implicit授權模式申請令牌 通過password模式申請令牌 通過c ...
  • 你真的懂異常(Exception)嗎? 目錄 異常介紹 異常的特點 怎樣使用異常 處理異常的 try-catch-finally 捕獲異常的 Catch 塊 釋放資源的 Finally 塊 捕獲異常的 Catch 塊 釋放資源的 Finally 塊 一、異常介紹 我們平時在寫程式時,無意中(或技術不 ...
  • 隨著公司業務的發展,網站的日活數也逐漸增多,以前只需要考慮將所需要的功能實現就行了,當日活越來越大的時候,就需要考慮對伺服器的資源使用消耗情況有一個清楚的認知。 最近老是發現資料庫的連接數如果幾天不重啟伺服器,就經常會發現有很多sleep很久的資料庫連接,對資料庫伺服器的性能有較大的影響。所以需要知 ...
  • 一.簡介 在網頁應用中,你經常需要在處理完表單或其它類型的用戶輸入後,顯示一個通知消息(也叫做“flash message”)給用戶 對於這個功能,Django 提供基於Cookie 和會話的消息,無論是匿名用戶還是認證的用戶。 其消息框架允許你臨時將消息存儲在請求中,併在接下來的請求(通常就是下一 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...