参考文章:https://www.ibm.com/developerworks/cn/java/joy-down/

1.原理介绍

想象一下我们下载一个10G的文件,当下载到9.99G的时候断网了。。。

断点续传支持从文件上次中断的地方开始传送数据,而并非是从文件开头传送。

体现在HTTP请求和响应上就会有区别:

假设下载文件为:

http://dl_dir.qq.com/invc/cyclone/QQDownload_Setup_39_708_p1.exe

普通文件下载的请求和响应

断点续传时候的请求和响应

这地方需要拦截HttpURLConnection的请求。

2.如何用Java实现

主要利用的是RandomAccessFile类的seek方法。

RandomAccessFile的特点在于任意访问文件的任意位置,是基于字节访问的;
可通过getFilePointer()获取当前指针所在位置 ;
可通过seek()移动指针,这体现了它的任意性;
seek用于设置文件指针位置,设置后会从当前指针的下一位读取或写入。

这地方我在IBM文章基础上简化并调整了一版,自测了下。搬上来分享一下。

 

2.1 工具类

package com.laoxu.demo.breaktransfer;

public class Utility {
public Utility()
{
}
public static void sleep(int nSecond)
{
try{
Thread.sleep(nSecond);
}
catch(Exception e)
{
e.printStackTrace ();
}
}
public static void log(String sMsg)
{
System.err.println(sMsg);
}
public static void log(int sMsg)
{
System.err.println(sMsg);
}
}

2.2 文件信息实体

package com.laoxu.demo.breaktransfer;

/**
* 远程下载文件信息
*/
public class SiteFileInfo {
private String sSiteURL; //文件下载链接
private String sFilePath; //保存的文件路径
private String sFileName; //保存的文件名称
public SiteFileInfo()
{
this("","","");
}
public SiteFileInfo(String sURL, String sPath, String sName)
{
sSiteURL= sURL;
sFilePath = sPath;
sFileName = sName;
}
public String getSSiteURL()
{
return sSiteURL;
}
public void setSSiteURL(String value)
{
sSiteURL = value;
}
public String getSFilePath()
{
return sFilePath;
}
public void setSFilePath(String value)
{
sFilePath = value;
}
public String getSFileName()
{
return sFileName;
}
public void setSFileName(String value)
{
sFileName = value;
}
}

2.3 写文件类

package com.laoxu.demo.breaktransfer;

import java.io.IOException;
import java.io.RandomAccessFile;
import java.io.Serializable; /**
* 写文件
*/
public class FileAccess implements Serializable{
RandomAccessFile oSavedFile;
long nPos;
public FileAccess() throws IOException
{
this("",0);
}
public FileAccess(String sName, long nPos) throws IOException
{
oSavedFile = new RandomAccessFile(sName,"rw");
this.nPos = nPos;
oSavedFile.seek(nPos);
}
public synchronized int write(byte[] b,int nStart,int nLen)
{
int n = -1;
try{
oSavedFile.write(b,nStart,nLen);
n = nLen;
}
catch(IOException e)
{
e.printStackTrace ();
}
return n;
}
}

2.4 主程序

package com.laoxu.demo.breaktransfer;

import java.io.DataOutputStream;
import java.io.File;
import java.io.IOException;
import java.io.InputStream;
import java.net.HttpURLConnection;
import java.net.InetSocketAddress;
import java.net.Proxy;
import java.net.URL; /**
* @Description: 断点续传主程序
* @Author laoxu
* @Date 2019/12/7 15:31
**/
public class SiteFileFetch{
SiteFileInfo fileInfo = null; // 文件信息实体
long startPos; // 开始位置
long endPos; // 结束位置
long fileLength; // 文件长度 File localFile = null; // 保存的文件
String localFilePath; // 本地文件路径
boolean bFirst = true; // 是否第一次取文件
boolean bStop = false; // 停止标志 public SiteFileFetch(SiteFileInfo entity){
fileInfo = entity;
localFilePath = entity.getSFilePath()+File.separator+entity.getSFileName();
localFile = new File(localFilePath);
// 判断本地文件是否存在
if(localFile.exists()){
startPos = localFile.length();
bFirst = false;
}
fileLength = getFileSize(); if(fileLength < 0){
System.err.println("非法文件!");
}else{
endPos = fileLength;
} } public void download() {
if(startPos<endPos){
try {
FileAccess fileAccess = new FileAccess(localFilePath,startPos); // 配置fiddler代理
Proxy proxy = new Proxy(Proxy.Type.HTTP, new InetSocketAddress("127.0.0.1", 8888));
URL url = new URL(fileInfo.getSSiteURL());
HttpURLConnection httpConnection = (HttpURLConnection) url.openConnection(proxy); httpConnection.setRequestProperty("User-Agent", "LX");
String sProperty = "bytes=" + startPos + "-";
httpConnection.setRequestProperty("RANGE", sProperty);
Utility.log(sProperty);
InputStream input = httpConnection.getInputStream();
//logResponseHead(httpConnection);
byte[] b = new byte[1024];
int nRead;
while ((nRead = input.read(b, 0, 1024)) > 0 && startPos < endPos
&& !bStop) {
startPos += fileAccess.write(b, 0, nRead);
}
} catch (IOException e) {
e.printStackTrace();
}
}else {
System.out.println("文件已存在!");
} } // 获得文件长度
private long getFileSize() {
int nFileLength = -1;
try {
URL url = new URL(fileInfo.getSSiteURL());
HttpURLConnection httpConnection = (HttpURLConnection) url.openConnection();
httpConnection.setRequestProperty("User-Agent", "Lx");
int responseCode = httpConnection.getResponseCode();
if (responseCode >= 400) {
System.out.println(responseCode);
return -2; //-2 represent access is error
}
String sHeader;
for (int i = 1; ; i++) {
sHeader = httpConnection.getHeaderFieldKey(i);
if (sHeader != null) {
if (sHeader.equals("Content-Length")) {
nFileLength = Integer.parseInt(httpConnection.getHeaderField(sHeader));
break;
}
} else
break;
}
} catch (IOException e) {
e.printStackTrace();
} catch (Exception e) {
e.printStackTrace();
}
Utility.log(nFileLength);
return nFileLength;
}
}

2.5 测试程序

package com.laoxu.demo.breaktransfer;

public class TestMethod {
public TestMethod() {
try {
SiteFileInfo fileInfo = new SiteFileInfo("http://dl_dir.qq.com/invc/cyclone/QQDownload_Setup_39_708_p1.exe",
"D:\\tmp",
"QQDownload_Setup_39_708_p1.exe");
SiteFileInfo fileInfo2 = new SiteFileInfo("http://www.luohanye.com/astros.json",
"D:\\tmp",
"astros.json");
SiteFileFetch fileFetch = new SiteFileFetch(fileInfo);
fileFetch.download();
} catch (Exception e) {
e.printStackTrace();
}
} public static void main(String[] args) {
new TestMethod();
}
}

Java实现文件下载断点续传(一)的更多相关文章

  1. java大文件下载+断点续传

    java两台服务器之间,大文件上传(续传),采用了Socket通信机制以及JavaIO流两个技术点,具体思路如下: 实现思路:1.服:利用ServerSocket搭建服务器,开启相应端口,进行长连接操 ...

  2. php大文件下载+断点续传

    如果我们的网站提供文件下载的服务,那么通常我们都希望下载可以断点续传(Resumable Download),也就是说用户可以暂停下载,并在未来的某个时间从暂停处继续下载,而不必重新下载整个文件. 通 ...

  3. 用java实现文件下载,提示java.lang.IllegalStateException: getOutputStream() has already been called for this response

    1. 用java实现文件下载,提示java.lang.IllegalStateException: getOutputStream() has already been called for this ...

  4. 【Servlet】java web 文件下载功能实现

    需求:实现一个具有文件下载功能的网页,主要下载压缩包和图片 两种实现方法: 一:通过超链接实现下载 在HTML网页中,通过超链接链接到要下载的文件的地址 <!DOCTYPE html> & ...

  5. C# 文件下载断点续传

    C# 文件下载断点续传的一个类 using System; using System.Collections.Generic; using System.Linq; using System.Text ...

  6. Java Web文件下载

    Web文件下载有两种.一种是文件在站点文件夹下.在浏览器中直接输入文件路径就可以下载.如http://www.xxx.com/file.zip.第二种是文件不在站点文件夹下或者文件是动态生成的(导出报 ...

  7. Java单线程文件下载,支持断点续传功能

    前言: 程序下载文件时,有时会因为各种各样的原因下载中断,对于小文件来说影响不大,可以快速重新下载,但是下载大文件时,就会耗费很长时间,所以断点续传功能对于大文件很有必要. 文件下载的断点续传: 1. ...

  8. java实现多线程断点续传,上传下载

    采用apache 的 commons-net-ftp-ftpclient import java.io.File; import java.io.FileOutputStream; import ja ...

  9. java+web+下载断点续传

    1.先将 webuploader-0.1.5.zip 这个文件下载下来:https://github.com/fex-team/webuploader/releases  根据个人的需求放置自己需要的 ...

  10. java+HTML5实现断点续传

    一. 大文件上传基础描述: 各种WEB框架中,对于浏览器上传文件的请求,都有自己的处理对象负责对Http MultiPart协议内容进行解析,并供开发人员调用请求的表单内容. 比如: Spring 框 ...

随机推荐

  1. [转帖]JDK8使用G1 垃圾回收器能解决大问题吗?

    https://zhuanlan.zhihu.com/p/458098236 G1 垃圾回收器真的不行吗? 本文想突出两个问题: 解决问题的思路:从最原始的角度去思考,问题的本身是因为缓存数据导致的G ...

  2. [转帖]tidb Modify Configuration Dynamically

    https://docs.pingcap.com/tidb/v6.5/dynamic-config This document describes how to dynamically modify ...

  3. [转帖]Linux系统安装之后,如何调节CPU性能策略

    https://baize.cc/posts/efc.html#:~:text=Linux%E7%B3%BB%E7%BB%9F%E5%AE%89%E8%A3%85%E4%B9%8B%E5%90%8E% ...

  4. [转帖]关于虚拟化中cpu的指令集SSE 4.2的不支持

    背景: 局域网中有两台服务器proxmox进行了虚拟化,跑一些测试应用.今天正好想要安装一下clickhouse跑一下.安装前准备: 测试服务器是否支持sse 4.2指令集-如下 [root@slav ...

  5. [转帖]《Linux性能优化实战》笔记(22)—— 网络丢包问题分析

    所谓丢包,是指在网络数据的收发过程中,由于种种原因,数据包还没传输到应用程序中,就被丢弃了.这些被丢弃包的数量,除以总的传输包数,也就是我们常说的丢包率.丢包率是网络性能中最核心的指标之一.丢包通常会 ...

  6. stress-NG 磁盘测试结果-全国产信创部分验证

    stress-NG 磁盘测试结果 摘要 前几天分别还是用了redis-benchmark还有specjvm2008进行了多种系统的压测 得出了信创CPU的一些简单结论 但是一直还没有压测磁盘, 今天想 ...

  7. [转帖]chrome历史版本及重大变化(维基百科)

    Google Chrome是Google LLC开发的免费 网络浏览器.开发过程分为不同的"发布渠道",每个发布渠道都在单独的开发阶段进行构建.Chrome提供了4种渠道:稳定版, ...

  8. [转帖]Linux系统硬链接和软链接具体实例讲解(超详细)

    简介 在 Linux 中,元数据中的 inode 号(inode 是文件元数据的一部分但其并不包含文件名,inode 号即索引节点号)才是文件的唯一标识而非文件名.文件名仅是为了方便人们的记忆和使用, ...

  9. [转帖]⭐万字长篇超详细的图解Tomcat中间件方方面面储备知识⭐

    https://developer.aliyun.com/article/885079?spm=a2c6h.24874632.expert-profile.321.7c46cfe9h5DxWK 202 ...

  10. [转帖]讨论在 Linux Control Groups 中运行 Java 应用程序的暂停问题原创

    https://heapdump.cn/article/1930426 说明 本篇原文来自 LinkedIn 的 Zhenyun Zhuang,原文:Application Pauses When R ...