Java实现多线程断点下载实例代码(下载过程中可以暂停)

线程可以理解为下载的通道,一个线程就是一个文件的下载通道,多线程也就是同时开启好几个下载通道。当服务器提供下载服务时,使用下载者是共享带宽的,在优先级相同的情况下,总服务器会对总下载线程进行平均分配。不难理解,如果你线程多的话,那下载的越快。

现流行的下载软件都支持多线程,且支持中途暂停下载,再次开始时不会从头开始下载。

两种功能的实现步骤如下:

(1)连接到下载资源文件时,首先判断资源文件大小,同步的在本地创建一个大小相同的临时文件用于存储下载数据。

(2)根据线程数量确定每个线程所需下载的文件大小

(3)根据每个线程下载的文件大小以及线程数量,决定每个线程的开始下载位置以及结束下载位置

(4)为实现断点下载功能,需要对每个线程实时下载的位置做标记,方便下次开始时继续之前进度下载

开启3个线程下载视图(默认下载目录为java所辖项目):

整体实现代码如下(优化空间还有很大哦,大家不要只是看看就完事喽)

import java.io.BufferedReader;
import java.io.File;
import java.io.FileInputStream;
import java.io.InputStream;
import java.io.InputStreamReader;
import java.io.RandomAccessFile;
import java.net.HttpURLConnection;
import java.net.URL;
public class DownLoad {
  // 声明下载路径“红色警戒2”
  public static final String PATH = "http://soft3.xzstatic.com/2015/10/hsjj2ghgzh.rar";
  public static int threadCount = 0;// 声明线程数量
  public static void main(String[] args) {
    try {
      URL url = new URL(PATH);
      // 获取连接
      HttpURLConnection conn = (HttpURLConnection) url.openConnection();
      // 通过获取连接定义文件名
      String[] str = PATH.split("/");
      String fileName = str[5];
      // 获取下载文件大小
      int fileLength = conn.getContentLength();
      System.out.println(fileName);
      // 在本地创建一个与服务器大小一致的可随机写入文件
      RandomAccessFile raf = new RandomAccessFile(fileName, "rwd");
      System.out.println(fileLength);// 测试用
      raf.setLength(fileLength);
      // 自定义线程数量
      threadCount = 3;
      // 计算每条线程下载数据的大小
      int blockSize = fileLength / threadCount;
      // 启动线程下载
      for (int threadId = 1; threadId <= threadCount; threadId++) {
        // 核心代码,定义每个线程开始以及结束的下载位置
        int startPos = (threadId - 1) * blockSize;// 开始下载的位置
        int endPos = (threadId * blockSize) - 1;// 结束下载的位置(不包含最后一块)
        if (threadCount == threadId) {
          endPos = fileLength;
        }
        new Thread(new DownLoadThread(threadId, startPos, endPos, PATH))
            .start();
      }
    } catch (Exception e) {
      e.printStackTrace();
    }
  }

  // 实现下载线程
  static class DownLoadThread implements Runnable {
    private int threadId;
    private int startPos;
    private int endPos;
    private String path;
    public DownLoadThread(int threadId, int startPos, int endPos,
        String path) {
      super();
      this.threadId = threadId;
      this.startPos = startPos;
      this.endPos = endPos;
      this.path = path;
    }
    public void run() {
      try {
        URL url = new URL(path);
        String[] str = PATH.split("/");
        String fileName = str[5];
        HttpURLConnection conn = (HttpURLConnection) url
            .openConnection();
        // 设置URL请求的方法(具体参考API)
        conn.setRequestMethod("GET");
        // 设置500毫秒为超时值
        conn.setReadTimeout(5000);
        File file = new File(threadId + ".txt");
        if (file.exists() && file.length() > 0) {
          BufferedReader br = new BufferedReader(
              new InputStreamReader(new FileInputStream(file)));
          String saveStartPos = br.readLine();
          if (saveStartPos != null && saveStartPos.length() > 0) {
            startPos = Integer.parseInt(saveStartPos);
          }
        }
        // 注意双引号内的格式,不能包含空格(等其他字符),否则报416
        conn.setRequestProperty("Range", "bytes=" + startPos + "-"
            + endPos);
        RandomAccessFile raf = new RandomAccessFile(fileName, "rwd");// 存储下载文件的随机写入文件
        raf.seek(startPos);// 设置开始下载的位置
        System.out.println("线程" + threadId + ":" + startPos + "~~"
            + endPos);
        InputStream is = conn.getInputStream();
        byte[] b = new byte[1024 * 1024 * 10];
        int len = -1;
        int newPos = startPos;
        while ((len = is.read(b)) != -1) {
          RandomAccessFile rr = new RandomAccessFile(file, "rwd");// 存储下载标记的文件
          raf.write(b, 0, len);
          // 将下载标记存入指定文档
          String savaPoint = String.valueOf(newPos += len);
          rr.write(savaPoint.getBytes());
          rr.close();
        }
        is.close();
        raf.close();
        System.out.println("下载完成");
      } catch (Exception e) {
        e.printStackTrace();
      }
    }
  }
}

注意事项:

(1)理解每个线程下载的开始和结束位置的计算方法(不包含最后一个线程,从0开始)

开始位置=(线程数-1)*每个线程所要下载的文件长度(大小)

结束位置=(线程数*每个线程下载的文件大小)-1

(2)最后一个线程所分配的下载开始位置为上一个线程的结束位置,结束位置为文件长度。

所以最后一个线程所下载的文件长度一般不会与之前线程相同

(3)本次演示下载路径默认为java项目所在目录,而且目录中不能包含与下载文件同名的文件,不然程序会报416网络请求错误。

(4)我个人在实现时犯的一个错误conn.setRequestProperty("Range","bytes="+ startPos+"-"+endPos);一定要注意引号没一定不能有多余的空格以及其他字符,我就是在引号内多了个空格,但错误定位一直是inputStream错误,找错找的很痛苦

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持我们。

(0)

相关推荐

  • java实现多线程之定时器任务

    在Java中Timer是java.util包中的一个工具类,提供了定时器的功能.我们可以创建一个Timer对象,然后调用其schedule方法在某个特定的时间去执行一个特定的任务.并且你可以让其以特定频率一直执行某个任务,这个任务是用TimerTask来描述的,我们只需要将要进行的操作写在TimerTask类的run方法中即可.先附上两个小例子一遍让读者了解什么是定时器.接着再分析其中的一些源码实现. 第一个小例子: package com.zkn.newlearn.thread; import

  • JAVA多线程并发下的单例模式应用

    单例模式应该是设计模式中比较简单的一个,也是非常常见的,但是在多线程并发的环境下使用却是不那么简单了,今天给大家分享一个我在开发过程中遇到的单例模式的应用. 首先我们先来看一下单例模式的定义: 一个类有且仅有一个实例,并且自行实例化向整个系统提供. 单例模式的要素: 1.私有的静态的实例对象 2.私有的构造函数(保证在该类外部,无法通过new的方式来创建对象实例) 3.公有的.静态的.访问该实例对象的方法 单例模式分为懒汉形和饿汉式 懒汉式: 应用刚启动的时候,并不创建实例,当外部调用该类的实例

  • java 多线程死锁详解及简单实例

    java 多线程死锁 相信有过多线程编程经验的朋友,都吃过死锁的苦.除非你不使用多线程,否则死锁的可能性会一直存在.为什么会出现死锁呢?我想原因主要有下面几个方面: (1)个人使用锁的经验差异     (2)模块使用锁的差异     (3)版本之间的差异     (4)分支之间的差异     (5)修改代码和重构代码带来的差异 不管什么原因,死锁的危机都是存在的.那么,通常出现的死锁都有哪些呢?我们可以一个一个看过来,     (1)忘记释放锁 void data_process() { Ent

  • Java多线程编程安全退出线程方法介绍

    线程停止 Thread提供了一个stop()方法,但是stop()方法是一个被废弃的方法.为什么stop()方法被废弃而不被使用呢?原因是stop()方法太过于暴力,会强行把执行一半的线程终止.这样会就不会保证线程的资源正确释放,通常是没有给与线程完成资源释放工作的机会,因此会导致程序工作在不确定的状态下 那我们该使用什么来停止线程呢 Thread.interrupt(),我们可以用他来停止线程,他是安全的,可是使用他的时候并不会真的停止了线程,只是会给线程打上了一个记号,至于这个记号有什么用呢

  • Java多线程中关于join方法的使用实例解析

    先上代码 新建一个Thread,代码如下: package com.thread.test; public class MyThread extends Thread { private String name; public MyThread(String name) { this.name = name; } @Override public void run() { for (int i = 0; i < 100; i++) { System.out.println(name+"[&

  • Java实现多线程断点下载

    JAVA多线程断点下载原理如图: 代码如下: import java.io.BufferedReader; import java.io.File; import java.io.FileInputStream; import java.io.InputStream; import java.io.InputStreamReader; import java.io.RandomAccessFile; import java.net.HttpURLConnection; import java.n

  • java 文件大数据Excel下载实例代码

    java 文件大数据Excel下载实例代码 excel可以用xml表示.故可以以此来实现边写边下载文件 package com.tydic.qop.controller; import java.io.BufferedInputStream; import java.io.BufferedOutputStream; import java.io.ByteArrayInputStream; import java.io.ByteArrayOutputStream; import java.io.I

  • php实现大文件断点续传下载实例代码

    php实现大文件断点续传下载实例,看完你就知道超过100M以上的大文件如何断点传输了,这个功能还是比较经典实用的,毕竟大文件上传功能经常用得到. require_once('download.class.php'); date_default_timezone_set('Asia/Shanghai'); error_reporting(E_STRICT); function errorHandler($errno, $errstr, $errfile, $errline) { echo '<p>

  • java多线程的同步方法实例代码

    java多线程的同步方法实例代码 先看一个段有关银行存钱的代码: class Bank { private int sum; public void add(int num){ sum = sum + num; try { Thread.sleep(10); } catch (InterruptedException e) { e.printStackTrace(); } System.out.println("total num is : " + sum); } } class Cu

  • springboot 中文件上传下载实例代码

    Spring Boot是由Pivotal团队提供的全新框架,其设计目的是用来简化新Spring应用的初始搭建以及开发过程.该框架使用了特定的方式来进行配置,从而使开发人员不再需要定义样板化的配置.通过这种方式,Spring Boot致力于在蓬勃发展的快速应用开发领域(rapid application development)成为领导者. Spring Boot特点 1. 创建独立的Spring应用程序 2. 嵌入的Tomcat,无需部署WAR文件 3. 简化Maven配置 4. 自动配置Spr

  • Java多线程join方法实例代码

    本文研究的主要是Java多线程中join方法的使用问题,以下文为具体实例. Thread的非静态方法join()让一个线程B"加入"到另外一个线程A的尾部.在A执行完毕之前,B不能工作.例如: Thread t = new MyThread(); t.start(); t.join(); 另外,join()方法还有带超时限制的重载版本. 例如t.join(5000);则让线程等待5000毫秒,如果超过这个时间,则停止等待,变为可运行状态. 线程的加入join()对线程栈导致的结果是线程

  • Java实现FTP服务器功能实例代码

    FTP(File Transfer Protocol 文件传输协议)是Internet 上用来传送文件的协议.在Internet上通过FTP 服务器可以进行文件的上传(Upload)或下载(Download).FTP是实时联机服务,在使用它之前必须是具有该服务的一个用户(用户名和口令),工作时客户端必须先登录到作为服务器一方的计算机上,用户登录后可以进行文件搜索和文件传送等有关操作,如改变当前工作目录.列文件目录.设置传输参数及传送文件等.使用FTP可以传送所有类型的文件,如文本文件.二进制可执

  • C#与Java的MD5简单验证(实例代码)

    C#端 using System; using System.IO; using System.Security.Cryptography; namespace 计算文件的MD5值 { class MD5_Helper { /// <summary> /// 文件MD5校验 /// </summary> /// <param name="pathName">文件绝对路径</param> /// <returns>MD5校验码&

  • HDFS的Java API的访问方式实例代码

    本文研究的主要是HDFS的Java API的访问方式,具体代码如下所示,有详细注释. 最近的节奏有点儿快,等有空的时候把这个封装一下 实现代码 要导入的包: import java.io.IOException; import java.net.URI; import java.net.URISyntaxException; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.BlockLocation

  • Java生成压缩文件的实例代码

    在工作过程中,需要将一个文件夹生成压缩文件,然后提供给用户下载.所以自己写了一个压缩文件的工具类.该工具类支持单个文件和文件夹压缩.放代码: import java.io.BufferedOutputStream; import java.io.File; import java.io.FileInputStream; import java.io.FileOutputStream; import org.apache.tools.zip.ZipEntry; import org.apache.

随机推荐