基于HTTP协议的下载功能实现
超文本传输协议 (HTTP-HyperText Transfer Protocol)是一种使用极为广泛的协议,它由请求和响应构成,是一种无状态的应用层协议。设计HTTP协议的初衷是为了提供一种传输HTML(HyperText Markup Language,超文本标记语言)的协议和方法。通过HTTP协议请求的资源由URI(Uniform Resource Identifiers,统一资源标识符)来标识。通常,我们通过URI就能访问到万维网服务器提供的数据,如HTML文档、音视频等各种格式的数据。因此,基于HTTP协议,我们可以实现简单的下载器功能。
HTTP下载器的功能很简单,下载器使用指定的URI发送GET请求到服务器,服务器返回请求响应,下载器根据响应状态码判断请求成功与否。一般情况下,请求一个资源成功后的状态码应为200(HTTP_OK)或者206(Partial-Content)。其他状态码视为失败(具体的HTTP状态码请参见:http://zh.wikipedia.org/wiki/HTTP%E7%8A%B6%E6%80%81%E7%A0%81)。若请求成功,HTTP响应头中将会带有资源的相关信息,其中,我们最关心的是资源大小,一般以Content-Length字段返回(HTTP头字段请参考:http://msdn.microsoft.com/zh-cn/library/aa287673(v=vs.71).aspx),若有Range字段的情况下,也可以通过Range字段的返回值来计算得到资源的大小,这里的资源大小单位为byte。
下面就以Java语言来实现一个基于HTTP协议的下载器。因测试工程是为项目所编写,实现了一套完整的下载管控机制(如下载记录管理、多任务管理、断点续下、意外中断自动恢复下载、状态通知等功能),为保密起见,以下只公开下载部分核心代码:
下载状态类:
public class Status {
public static final int ERROR = -1;
public static final int WAITING = 0;
/**
* Paused by system automatically
*/
public static final int PAUSED = 1;
/**
* Paused by user manually
*/
public static final int PAUSED_MANUALLY = 2;
public static final int DOWNLOADING = 3;
public static final int FINISHED = 4;
}
下载类:
package com.irwin.downloader; import java.io.File;
import java.io.InputStream;
import java.io.RandomAccessFile;
import java.net.HttpURLConnection;
import java.net.URL; import org.apache.http.HttpStatus; public class Downloader implements Runnable {
private static final int BUFFER_SIZE = 32 * 1024; private String mUrl = null; private String mPath = null; private long mStart = 0; private long mCurrentBytes = 0; private int mStatus = Status.WAITING; private long mSize = 0; private boolean mRunning = true; private boolean mTerminate = false; public void setUrl(String url) {
mUrl = url;
} public String getUrl() {
return mUrl;
} public void setPath(String path) {
mPath = path;
} public String getPath() {
return mPath;
} public void setRange(long start, long end) {
if (start >= 0) {
mStart = start;
}
mSize = end;
} public void setTerminate(boolean terminate) {
mTerminate = terminate;
} public boolean isRunning() {
return mRunning;
} public int getStatus() { return mStatus;
} public long getSize() {
return mSize;
} public long getCurrentBytes() {
return mCurrentBytes;
} public void download(String url, String path, long rangeStart)
throws Exception {
if (rangeStart > 0 && rangeStart >= mSize) {
mStatus = Status.FINISHED;
return;
}
InputStream inStream = null;
RandomAccessFile file = null;
try {
URL downUrl = new URL(url);
HttpURLConnection http = (HttpURLConnection) downUrl
.openConnection();
http.setConnectTimeout(5 * 1000);
//Use Get method
http.setRequestMethod("GET");
//Accept all format of data.
http.setRequestProperty("Accept", "*/*");
http.setRequestProperty("Charset", "UTF-8"); //Data block to download.
http.setRequestProperty("Range", "bytes=" + rangeStart + "-");
http.setRequestProperty("User-Agent", "Client/4.0");
http.setRequestProperty("Connection", "Keep-Alive");
http.connect();
if (http.getResponseCode() != HttpStatus.SC_OK
&& http.getResponseCode() != HttpStatus.SC_PARTIAL_CONTENT) {
throw new IllegalAccessException("Invalid request: "
+ http.getResponseCode());
}
if (mSize <= 0) {
long total = getContentLen(http); if (total <= 0) {
throw new IllegalAccessException("Invalid content-length: "
+ total);
}
mSize = total;
}
mStatus = Status.DOWNLOADING;
inStream = http.getInputStream();
byte[] buffer = new byte[BUFFER_SIZE];
File tmp=new File(path+".tmp");
file = new RandomAccessFile(tmp, "rwd");
file.setLength(mSize);
file.seek(rangeStart);
int offset = 0;
mCurrentBytes = rangeStart;
while (true) {
if (mTerminate) {
mStatus = Status.PAUSED_MANUALLY;
break;
}
if ((offset = inStream.read(buffer)) != -1) {
file.write(buffer, 0, offset);
mCurrentBytes += offset;
} else {
break;
}
} file.close();
file = null;
inStream.close();
inStream = null;
if (mSize == mCurrentBytes) {
// Rename
mStatus = Status.FINISHED;
File f = new File(path);
tmp.renameTo(f);
} } catch (Exception e) {
throw e;
} finally {
if (inStream != null) {
try {
inStream.close();
} catch (Exception e2) {
// TODO: handle exception
}
}
if (file != null) {
try {
file.close();
} catch (Exception e2) {
// TODO: handle exception
}
}
}
} @Override
public void run() {
if (getUrl() != null && getPath() != null) {
if (!mTerminate) {
try {
download(getUrl(), getPath(), mStart);
} catch (Exception e) {
e.printStackTrace();
mStatus = Status.ERROR;
}
}
} else {
mStatus = Status.ERROR;
}
mRunning = false;
} private long getContentLen(HttpURLConnection conn) throws Exception {
long len = conn.getContentLength();
if (len <= 0) {
try {
len = Long.parseLong(conn.getHeaderField("Content-Length"));
} catch (Exception e) {
// TODO: handle exception
} }
if (len <= 0) {
//Try to calculate size from 'Range' field.
String range = conn.getHeaderField("Range");
if (range != null) {
String[] array = range.replace("bytes=", "").split("-");
if (array.length == 2) {
len = Long.parseLong(array[1]) - Long.parseLong(array[0]);
}
}
}
return len;
}
}
更多代码详情请参考:TransferLibrary——一个Android文件传输库,主要实现基于Http的文件上传和下载,简单方便,支持多任务下载,断点续传等等,欢迎小伙伴们使用交流:D
基于HTTP协议的下载功能实现的更多相关文章
- Android之基于HTTP协议的下载
Android之基于HTTP协议的下载 http://www.blogjava.net/zh-weir/archive/2010/05/02/319892.html http://www.qianfa ...
- Android之基于HTTP协议的通信详解
Android系统中本身是有下载机制的,比如浏览器使用的DownloadManager.可遗憾的是,DownloadManager只提供给浏览器使用,一般的应用程序没法调用它. 另外,如果下载调用频繁 ...
- RPC基于http协议通过netty支持文件上传下载
本人在中间件研发组(主要开发RPC),近期遇到一个需求:RPC基于http协议通过netty支持文件上传下载 经过一系列的资料查找学习,终于实现了该功能 通过netty实现文件上传下载,主要在编解码时 ...
- 转:【专题十一】实现一个基于FTP协议的程序——文件上传下载器
引言: 在这个专题将为大家揭开下FTP这个协议的面纱,其实学习知识和生活中的例子都是很相通的,就拿这个专题来说,要了解FTP协议然后根据FTP协议实现一个文件下载器,就和和追MM是差不多的过程的,相信 ...
- 实现基于NTP协议的网络校时功能
无论PC端还是移动端系统都自带时间同步功能,基于的都是NTP协议,这里使用C#来实现基于NTP协议的网络校时功能(也就是实现时间同步). 1.NTP原理 NTP[Network Time Protoc ...
- 专题十一:实现一个基于FTP协议的程序——文件上传下载器
引言: 在这个专题将为大家揭开下FTP这个协议的面纱,其实学习知识和生活中的例子都是很相通的,就拿这个专题来说,要了解FTP协议然后根据FTP协议实现一个文件下载器,就和和追MM是差不多的过程的,相信 ...
- 基于HTTP协议下载文件的实现
最近在开发文件下载的程序,该程序是基于HTTP开发的. 首先是了解了文件传输到客户端的大概格式,然后分析该格式,实现写入文件的功能. 自己构造的HTTP包如下: GET /*********.rar ...
- 用c++开发基于tcp协议的文件上传功能
用c++开发基于tcp协议的文件上传功能 2005我正在一家游戏公司做程序员,当时一直在看<Windows网络编程> 这本书,把里面提到的每种IO模型都试了一次,强烈推荐学习网络编程的同学 ...
- Android消息推送(二)--基于MQTT协议实现的推送功能
国内的Android设备,不能稳定的使用Google GCM(Google Cloud Messageing)消息推送服务. 1. 国内的Android设备,基本上从操作系统底层开始就去掉了Googl ...
随机推荐
- window(x64)+IIS+Access发布网站出现HTTP 错误 404.0 - Not Found
我的电脑是window7 64位,昨天用ASP.NET写好一个网页,想用IIS发布到校园局域网,配置好IIS,谁知道最后还是出现问题,截图如下 于是我就上网找解决方案,网上各种版本都有,有的说是文件路 ...
- Windows下安装Nodejs步骤
最近打算把我们的微信端用Vue.js重构,为什么选择Vue.js,一是之前使用的是传统的asp.net mvc,多页面应用用户体验比单页面要差.二是使用过Angular.js,感觉对开发人员要求较 ...
- RecyclerView添加头部和底部视图的实现方法
引用-- http://www.zhimengzhe.com/Androidkaifa/15072.html 在天下货crm----签到---签到记录中有使用
- C语言实验单片机串口发送int型数据
void SendIint(int n)reentrant { unsigned char s; while(n!=0) { s=(unsigned char)n%10+48; SendByte(s) ...
- [Open Source] RabbitMQ 高可用集群方案
简介 RabbitMQ是用erlang开发的,集群非常方便,因为erlang天生就是一门分布式语言,但其本身并不支持负载均衡. Rabbit模式大概分为以下三种:单一模式.普通模式.镜像模式 Rabb ...
- 使用nodejs爬前程无忧前端技能排行(半半成品)
最近准备换工作,需要更新一下技能树.为做到有的放矢,想对招聘方的要求做个统计.正好之前了解过nodejs,所以做了个爬虫搜索数据. 具体步骤: 1. 先用fiddler分析请求需要的header和b ...
- h5分享页面打开APP
项目中 直播app分享出来的直播h5页面 点击进入按钮:已下载app 就进入app,未下载跳转到下载页面 判断是安卓还是ios var u = navigator.userAgent; var isA ...
- 那些年,让我们一起着迷的Spring
构建企业级应用框架(SpringMVC+Spring+Hibernate/ibatis[Mybatis]) 框架特点:半成品,封装了特定的处理流程和控制逻辑,成熟的,不断升级的软件.重用度高,开发效率 ...
- struts2.1.6教程一、准备工作及实例
1.解压struts-2.1.6-all.zip apps目录:struts2自带的例子程序 docs目录:官方文档. lib 目录:存放所有jar文件. Src 目录:源文%件存放地 2.六个基本包 ...
- gulp+browserSync自动刷新页面
BrowserSync “Browsersync能让浏览器实时.快速响应您的文件更改(html.js.css.sass.less等)并自动刷新页面.更重要的是 Browsersync可以同时在PC.平 ...