java多线程下载和断点续传

简介: java多线程下载和断点续传,示例代码只实现了多线程,断点只做了介绍。但是实际测试结果不是很理想,不知道是哪里出了问题。所以贴上来请高手修正。 [Java]代码 import java.io.

 

java多线程下载和断点续传,示例代码只实现了多线程,断点只做了介绍。但是实际测试结果不是很理想,不知道是哪里出了问题。所以贴上来请高手修正。

[Java]代码

import java.io.File;
import java.io.IOException;
import java.io.RandomAccessFile;
import java.net.HttpURLConnection;
import java.net.URL;

public class DownloadFile {

    /**
     * @param args
     */
    static int len;//线程平均下载文件长度
    static int bn ;//每个线程写入文件的字节数
    static int tn; //线程数
    static String urlt;//下载地址
    static String fileName;
    static RandomAccessFile osf; //文件操作
    public static void main(String[] args) {
        // TODO Auto-generated method stub

        try {
            urlt = "http://im.baidu.com/download/BaiduHi_4.2_Beta.exe";
            fileName = "C:\\" + urlt.split("//")[1].split("/")[urlt.split("//")[1].split("/").length-1];
            System.out.println(fileName);
            URL url = new URL(urlt);
            HttpURLConnection http = (HttpURLConnection) url.openConnection();

            /**
             * 此处设定5个线程下载一个文件tn = 5;
             * 判断平均每个线程需下载文件长度:
             */
            System.out.println("file size:" + http.getContentLength());
            tn = 3;         
            len = http.getContentLength() / tn ;//舍去余数(余数自动舍去)计算每个线程应下载平均长度,最后一个线程再加上余数,则是整个文件的长度,
            File f = new File(fileName);
            if (f.exists()){
                f.delete();
                osf = new RandomAccessFile(f, "rw");
                osf.seek(http.getContentLength()-1);
                osf.write(0);
            }else{
                osf = new RandomAccessFile(f, "rw");
                osf.seek(http.getContentLength()-1);
                osf.write(0);
            }
            System.out.println("temp 文件长度:" + f.length());
            Thread t;//下载子线程,
            for (int j = 0; j < tn; j++) {
                if(j == tn - 1){//如果最后一个线程则加上余数长度字节
                    bn = len + (http.getContentLength() % tn);
                }else{
                    bn = len;
                }
                System.out.println("t"+ j + "线程下载长度:" + bn + "起始字节:" + len*j);
                t = new DT(
                        j,
                        urlt,
                        fileName,
                        len*j,
                        bn

                );
                t.start();
            }

        } catch (IOException e) {
            // TODO Auto-generated catch block
            e.printStackTrace();
        }
    }

}

import java.io.File;
import java.io.FileNotFoundException;
import java.io.IOException;
import java.io.InputStream;
import java.io.RandomAccessFile;
import java.net.HttpURLConnection;
import java.net.MalformedURLException;
import java.net.URL;
import java.util.Date;

public class DT extends Thread {

    String urlt;
    int startl;
    int end;
    String fileName;
    RandomAccessFile osf;
    public DT(int i ,String url,String fileName,int start,int end){
        this.setName("t"+i); //子线程名称
        this.urlt = url; //下载地址
        this.fileName = fileName;
        this.startl = start; //子线程读取/写入起始字节
        this.end = end;//子线程写入结束字节长度
    }
    public void run(){
            try {
                osf = new RandomAccessFile(fileName, "rw");
                URL url = new URL(urlt);
                HttpURLConnection http2 = (HttpURLConnection) url.openConnection();
                http2.setRequestProperty("User-Agent","NetFox"); 

                /*
                 * 断点续传和多线程下载的关键代码关键位置:即设置断点
                 * http2.setRequestProperty("RANGE", "bytes="+startl+"-");//设置断点位置,向服务器请求从文件的哪个字节开始读取。
                 * osf.seek(startl);//设置本地文件从哪个字节开始写入
                 * 如果是单线程,则首先要判断下载文件是否已经存在 及DownloadFile.java 里的 fileName = "C:\\eclipse.zip";
                 * 如果存在则开始断点续传,方法同多线程:
                 * 因为断点续传是从上次传输中断的字节开始,则首先要得到上次中断的位置,既是文件长度(针对单线程)f.length()
                 * 然后设置HTTP请求头属性RANGE,该属性告知服务器从哪个自己开始读取文件。
                 * 设置本地文件写入起始字节,及接从上次传输断点继续写入(断点续传)
                 * osf.seek(offset) 该方法设定从offset后一个字节开始写入文件
                 * 注意:多线程不能用文件长度做为写文件起始字节,需有配置文件记录上次读写的位置,迅雷下载既是使用该种方法。
                 *
                 */
                http2.setRequestProperty("RANGE", "bytes="+startl+"-");//设置断点位置,向服务器请求从文件的哪个字节开始读取。
                osf.seek(startl);//设置本地文件从哪个字节开始写入

                InputStream input = http2.getInputStream();
                byte b[] = new byte[1024];//设置缓冲池,每次只读1024字节
                Date d = new Date();//子线程开始下载时间
                int l;//计算子线程读取和写入的文件长度,当长度大于每个子线程平均下载长度则终止线程
                int i;
                l = 0;
                System.out.println(this.getName() + " 开始下载。。。");
                while ( (i = input.read(b,0,1024)) != -1 && l < end){   //线程下载字节长度控制误差小于缓冲池大小,本示例为缓冲池1024字节
                    osf.write(b, 0, i);
                    b = new byte[1024];//重新赋值,避免重新读入旧内容
                    l += i;         
                }
                Date d2 = new Date();//子线程结束下载时间
                System.out.println(this.getName() + " 线程耗时: " + (d2.getTime() - d.getTime())/1000 + " 秒,实际共下载:" + l + "字节");//子线程下载耗时(秒)
            } catch (FileNotFoundException e1) {
                // TODO Auto-generated catch block
                e1.printStackTrace();
            } catch (MalformedURLException e) {
                // TODO Auto-generated catch block
                e.printStackTrace();
            } catch (IOException e) {
                // TODO Auto-generated catch block
                e.printStackTrace();
            }
    }
}

 


http://outofmemory.cn/code-snippet/3888/java-many-xiancheng-xiazai-breakpoint-xuchuan

目录
相关文章
|
26天前
|
Java 开发工具
【Azure Storage Account】Java Code访问Storage Account File Share的上传和下载代码示例
本文介绍如何使用Java通过azure-storage-file-share SDK实现Azure文件共享的上传下载。包含依赖引入、客户端创建及完整示例代码,助你快速集成Azure File Share功能。
310 4
|
1月前
|
JSON 网络协议 安全
【Java】(10)进程与线程的关系、Tread类;讲解基本线程安全、网络编程内容;JSON序列化与反序列化
几乎所有的操作系统都支持进程的概念,进程是处于运行过程中的程序,并且具有一定的独立功能,进程是系统进行资源分配和调度的一个独立单位一般而言,进程包含如下三个特征。独立性动态性并发性。
123 1
|
1月前
|
JSON 网络协议 安全
【Java基础】(1)进程与线程的关系、Tread类;讲解基本线程安全、网络编程内容;JSON序列化与反序列化
几乎所有的操作系统都支持进程的概念,进程是处于运行过程中的程序,并且具有一定的独立功能,进程是系统进行资源分配和调度的一个独立单位一般而言,进程包含如下三个特征。独立性动态性并发性。
140 1
|
2月前
|
开发者 Windows
NDM多线程下载器!实用的下载器,绿色版下载及安装教程
NDM是一款小巧高效的多线程下载器,支持Windows、Mac及浏览器插件,绿色单文件仅904KB,无需安装。已汉化,操作简单,下载速度快,支持HTTP/HTTPS/FTP协议,不支持磁力链接。使用前需关闭杀毒软件,配合7-ZIP解压,浏览器插件可自动嗅探音视频资源。
352 2
|
2月前
|
数据采集 存储 弹性计算
高并发Java爬虫的瓶颈分析与动态线程优化方案
高并发Java爬虫的瓶颈分析与动态线程优化方案
Java 数据库 Spring
125 0
|
2月前
|
算法 Java
Java多线程编程:实现线程间数据共享机制
以上就是Java中几种主要处理多线程序列化资源以及协调各自独立运行但需相互配合以完成任务threads 的技术手段与策略。正确应用上述技术将大大增强你程序稳定性与效率同时也降低bug出现率因此深刻理解每项技术背后理论至关重要.
196 16
|
3月前
|
缓存 并行计算 安全
关于Java多线程详解
本文深入讲解Java多线程编程,涵盖基础概念、线程创建与管理、同步机制、并发工具类、线程池、线程安全集合、实战案例及常见问题解决方案,助你掌握高性能并发编程技巧,应对多线程开发中的挑战。
|
3月前
|
数据采集 存储 前端开发
Java爬虫性能优化:多线程抓取JSP动态数据实践
Java爬虫性能优化:多线程抓取JSP动态数据实践
|
4月前
|
Java API 调度
从阻塞到畅通:Java虚拟线程开启并发新纪元
从阻塞到畅通:Java虚拟线程开启并发新纪元
346 83