基于HTTP协议的下载功能实现
超文本传输协议 (HTTP-HyperText Transfer Protocol)是一种使用极为广泛的协议,它由请求和响应构成,是一种无状态的应用层协议。设计HTTP协议的初衷是为了提供一种传输HTML(HyperText Markup Language,超文本标记语言)的协议和方法。通过HTTP协议请求的资源由URI(Uniform Resource Identifiers,统一资源标识符)来标识。通常,我们通过URI就能访问到万维网服务器提供的数据,如HTML文档、音视频等各种格式的数据。因此,基于HTTP协议,我们可以实现简单的下载器功能。
HTTP下载器的功能很简单,下载器使用指定的URI发送GET请求到服务器,服务器返回请求响应,下载器根据响应状态码判断请求成功与否。一般情况下,请求一个资源成功后的状态码应为200(HTTP_OK)或者206(Partial-Content)。其他状态码视为失败(具体的HTTP状态码请参见:http://zh.wikipedia.org/wiki/HTTP%E7%8A%B6%E6%80%81%E7%A0%81)。若请求成功,HTTP响应头中将会带有资源的相关信息,其中,我们最关心的是资源大小,一般以Content-Length字段返回(HTTP头字段请参考:http://msdn.microsoft.com/zh-cn/library/aa287673(v=vs.71).aspx),若有Range字段的情况下,也可以通过Range字段的返回值来计算得到资源的大小,这里的资源大小单位为byte。
下面就以Java语言来实现一个基于HTTP协议的下载器。因测试工程是为项目所编写,实现了一套完整的下载管控机制(如下载记录管理、多任务管理、断点续下、意外中断自动恢复下载、状态通知等功能),为保密起见,以下只公开下载部分核心代码:
下载状态类:
public class Status {
public static final int ERROR = -1; public static final int WAITING = 0; /**
* Paused by system automatically
*/
public static final int PAUSED = 1; /**
* Paused by user manually
*/
public static final int PAUSED_MANUALLY = 2; public static final int DOWNLOADING = 3; public static final int FINISHED = 4;
}
下载类:
package com.irwin.downloader; import java.io.File;
import java.io.InputStream;
import java.io.RandomAccessFile;
import java.net.HttpURLConnection;
import java.net.URL; import org.apache.http.HttpStatus; public class Downloader implements Runnable {
private static final int BUFFER_SIZE = 32 * 1024; private String mUrl = null; private String mPath = null; private long mStart = 0; private long mCurrentBytes = 0; private int mStatus = Status.WAITING; private long mSize = 0; private boolean mRunning = true; private boolean mTerminate = false; public void setUrl(String url) {
mUrl = url;
} public String getUrl() {
return mUrl;
} public void setPath(String path) {
mPath = path;
} public String getPath() {
return mPath;
} public void setRange(long start, long end) {
if (start >= 0) {
mStart = start;
}
mSize = end;
} public void setTerminate(boolean terminate) {
mTerminate = terminate;
} public boolean isRunning() {
return mRunning;
} public int getStatus() { return mStatus;
} public long getSize() {
return mSize;
} public long getCurrentBytes() {
return mCurrentBytes;
} public void download(String url, String path, long rangeStart)
throws Exception {
if (rangeStart > 0 && rangeStart >= mSize) {
mStatus = Status.FINISHED;
return;
}
InputStream inStream = null;
RandomAccessFile file = null;
try {
URL downUrl = new URL(url);
HttpURLConnection http = (HttpURLConnection) downUrl
.openConnection();
http.setConnectTimeout(5 * 1000);
//Use Get method
http.setRequestMethod("GET");
//Accept all format of data.
http.setRequestProperty("Accept", "*/*");
http.setRequestProperty("Charset", "UTF-8"); //Data block to download.
http.setRequestProperty("Range", "bytes=" + rangeStart + "-");
http.setRequestProperty("User-Agent", "Client/4.0");
http.setRequestProperty("Connection", "Keep-Alive");
http.connect();
if (http.getResponseCode() != HttpStatus.SC_OK
&& http.getResponseCode() != HttpStatus.SC_PARTIAL_CONTENT) {
throw new IllegalAccessException("Invalid request: "
+ http.getResponseCode());
}
if (mSize <= 0) {
long total = getContentLen(http); if (total <= 0) {
throw new IllegalAccessException("Invalid content-length: "
+ total);
}
mSize = total;
}
mStatus = Status.DOWNLOADING;
inStream = http.getInputStream();
byte[] buffer = new byte[BUFFER_SIZE];
File tmp=new File(path+".tmp");
file = new RandomAccessFile(tmp, "rwd");
file.setLength(mSize);
file.seek(rangeStart);
int offset = 0;
mCurrentBytes = rangeStart;
while (true) {
if (mTerminate) {
mStatus = Status.PAUSED_MANUALLY;
break;
}
if ((offset = inStream.read(buffer)) != -1) {
file.write(buffer, 0, offset);
mCurrentBytes += offset;
} else {
break;
}
} file.close();
file = null;
inStream.close();
inStream = null;
if (mSize == mCurrentBytes) {
// Rename
mStatus = Status.FINISHED;
File f = new File(path);
tmp.renameTo(f);
} } catch (Exception e) {
throw e;
} finally {
if (inStream != null) {
try {
inStream.close();
} catch (Exception e2) {
// TODO: handle exception
}
}
if (file != null) {
try {
file.close();
} catch (Exception e2) {
// TODO: handle exception
}
}
}
} @Override
public void run() {
if (getUrl() != null && getPath() != null) {
if (!mTerminate) {
try {
download(getUrl(), getPath(), mStart);
} catch (Exception e) {
e.printStackTrace();
mStatus = Status.ERROR;
}
}
} else {
mStatus = Status.ERROR;
}
mRunning = false;
} private long getContentLen(HttpURLConnection conn) throws Exception {
long len = conn.getContentLength();
if (len <= 0) {
try {
len = Long.parseLong(conn.getHeaderField("Content-Length"));
} catch (Exception e) {
// TODO: handle exception
} }
if (len <= 0) {
//Try to calculate size from 'Range' field.
String range = conn.getHeaderField("Range");
if (range != null) {
String[] array = range.replace("bytes=", "").split("-");
if (array.length == 2) {
len = Long.parseLong(array[1]) - Long.parseLong(array[0]);
}
}
}
return len;
}
}
更多代码详情请参考:TransferLibrary——一个Android文件传输库,主要实现基于Http的文件上传和下载,简单方便,支持多任务下载,断点续传等等,欢迎小伙伴们使用交流:D
基于HTTP协议的下载功能实现的更多相关文章
- Android之基于HTTP协议的下载
Android之基于HTTP协议的下载 http://www.blogjava.net/zh-weir/archive/2010/05/02/319892.html http://www.qianfa ...
- Android之基于HTTP协议的通信详解
Android系统中本身是有下载机制的,比如浏览器使用的DownloadManager.可遗憾的是,DownloadManager只提供给浏览器使用,一般的应用程序没法调用它. 另外,如果下载调用频繁 ...
- RPC基于http协议通过netty支持文件上传下载
本人在中间件研发组(主要开发RPC),近期遇到一个需求:RPC基于http协议通过netty支持文件上传下载 经过一系列的资料查找学习,终于实现了该功能 通过netty实现文件上传下载,主要在编解码时 ...
- 转:【专题十一】实现一个基于FTP协议的程序——文件上传下载器
引言: 在这个专题将为大家揭开下FTP这个协议的面纱,其实学习知识和生活中的例子都是很相通的,就拿这个专题来说,要了解FTP协议然后根据FTP协议实现一个文件下载器,就和和追MM是差不多的过程的,相信 ...
- 实现基于NTP协议的网络校时功能
无论PC端还是移动端系统都自带时间同步功能,基于的都是NTP协议,这里使用C#来实现基于NTP协议的网络校时功能(也就是实现时间同步). 1.NTP原理 NTP[Network Time Protoc ...
- 专题十一:实现一个基于FTP协议的程序——文件上传下载器
引言: 在这个专题将为大家揭开下FTP这个协议的面纱,其实学习知识和生活中的例子都是很相通的,就拿这个专题来说,要了解FTP协议然后根据FTP协议实现一个文件下载器,就和和追MM是差不多的过程的,相信 ...
- 基于HTTP协议下载文件的实现
最近在开发文件下载的程序,该程序是基于HTTP开发的. 首先是了解了文件传输到客户端的大概格式,然后分析该格式,实现写入文件的功能. 自己构造的HTTP包如下: GET /*********.rar ...
- 用c++开发基于tcp协议的文件上传功能
用c++开发基于tcp协议的文件上传功能 2005我正在一家游戏公司做程序员,当时一直在看<Windows网络编程> 这本书,把里面提到的每种IO模型都试了一次,强烈推荐学习网络编程的同学 ...
- Android消息推送(二)--基于MQTT协议实现的推送功能
国内的Android设备,不能稳定的使用Google GCM(Google Cloud Messageing)消息推送服务. 1. 国内的Android设备,基本上从操作系统底层开始就去掉了Googl ...
随机推荐
- web 直播&即时聊天------阿里云、融云
随着直播越来越火,所在公司也打算制作自己的直播,所以去了解了这方面,使用后发现还是有些问题需要记录的. 经过分析,制作直播应该是分为两块来做,即直播与实时评论.这里先去制作实时评论,等直播ok后,也会 ...
- Spring——Web应用中的IoC容器创建(WebApplicationContext根应用上下文的创建过程)
基于Spring-4.3.7.RELEASE Spring的配置不仅仅局限在XML文件,同样也可以使用Java代码来配置.在这里我使用XML配置文件的方式来粗略地讲讲WebApplicationCon ...
- PHP二位数组按照数组的某个字段值排序
不多废话 直接代码 /** * @name 排序 按照数组的某个字段值排序 * @param $array 排序数组 $field 排序字段 $direction 排序顺序 * @author wan ...
- Day4-迭代器
for循环的数据类型: 1.集合数据类型,如list列表,tuple元组,dict字典,set集合,str字符串等: 2.generator生成器,包括生成器和带yield的generator fun ...
- 003---hibernate主要接口介绍
Hibernate可以访问JNDI.JDBC.JTA JNDI(Java名称和目录接口):主要管理我们对象,特别是EJB应用,它会把所有EJB应用加入到JNDI这棵树上,Tomcat连接池也是把对象注 ...
- PHP 关于timezone问题
Warning: date(): It is not safe to rely on the system's timezone settings. You are *required* to use ...
- nodejs 开启debug选项问题
我的机器上设置debug选项是,debug与(等号)=之间不可以有空格,否则设置无效 如下: set DEBUG = * 无打印 set DEBUG=*正常打印
- dialog使用方法(同一页面,调用一个js代码,实现多个不同样式的弹窗)
html代码 <!DOCTYPE html><html><head> <title></title> <meta ch ...
- 一天搞定CSS:字体font--04
1.字体体系 2.字体各属性取值 说明: 每一个属性后面的分支是属性值,以及对属性值的说明. 比如font-weight- - - -有两个取值:bold,normal 3.演示代码 <!DOC ...
- Java IO流之【缓冲流和文件流复制文件对比】
与文件流相比,缓冲流复制文件更快 代码: package Homework; import java.io.BufferedOutputStream; import java.io.File; imp ...