超文本传输协议 (HTTP-HyperText Transfer Protocol)是一种使用极为广泛的协议,它由请求和响应构成,是一种无状态的应用层协议。设计HTTP协议的初衷是为了提供一种传输HTML(HyperText Markup Language,超文本标记语言)的协议和方法。通过HTTP协议请求的资源由URI(Uniform Resource Identifiers,统一资源标识符)来标识。通常,我们通过URI就能访问到万维网服务器提供的数据,如HTML文档、音视频等各种格式的数据。因此,基于HTTP协议,我们可以实现简单的下载器功能。

HTTP下载器的功能很简单,下载器使用指定的URI发送GET请求到服务器,服务器返回请求响应,下载器根据响应状态码判断请求成功与否。一般情况下,请求一个资源成功后的状态码应为200(HTTP_OK)或者206(Partial-Content)。其他状态码视为失败(具体的HTTP状态码请参见:http://zh.wikipedia.org/wiki/HTTP%E7%8A%B6%E6%80%81%E7%A0%81)。若请求成功,HTTP响应头中将会带有资源的相关信息,其中,我们最关心的是资源大小,一般以Content-Length字段返回(HTTP头字段请参考:http://msdn.microsoft.com/zh-cn/library/aa287673(v=vs.71).aspx),若有Range字段的情况下,也可以通过Range字段的返回值来计算得到资源的大小,这里的资源大小单位为byte。

下面就以Java语言来实现一个基于HTTP协议的下载器。因测试工程是为项目所编写,实现了一套完整的下载管控机制(如下载记录管理、多任务管理、断点续下、意外中断自动恢复下载、状态通知等功能),为保密起见,以下只公开下载部分核心代码:

下载状态类:

public class Status {
public static final int ERROR = -1; public static final int WAITING = 0; /**
* Paused by system automatically
*/
public static final int PAUSED = 1; /**
* Paused by user manually
*/
public static final int PAUSED_MANUALLY = 2; public static final int DOWNLOADING = 3; public static final int FINISHED = 4;
}

下载类:

package com.irwin.downloader;

import java.io.File;
import java.io.InputStream;
import java.io.RandomAccessFile;
import java.net.HttpURLConnection;
import java.net.URL; import org.apache.http.HttpStatus; public class Downloader implements Runnable {
private static final int BUFFER_SIZE = 32 * 1024; private String mUrl = null; private String mPath = null; private long mStart = 0; private long mCurrentBytes = 0; private int mStatus = Status.WAITING; private long mSize = 0; private boolean mRunning = true; private boolean mTerminate = false; public void setUrl(String url) {
mUrl = url;
} public String getUrl() {
return mUrl;
} public void setPath(String path) {
mPath = path;
} public String getPath() {
return mPath;
} public void setRange(long start, long end) {
if (start >= 0) {
mStart = start;
}
mSize = end;
} public void setTerminate(boolean terminate) {
mTerminate = terminate;
} public boolean isRunning() {
return mRunning;
} public int getStatus() { return mStatus;
} public long getSize() {
return mSize;
} public long getCurrentBytes() {
return mCurrentBytes;
} public void download(String url, String path, long rangeStart)
throws Exception {
if (rangeStart > 0 && rangeStart >= mSize) {
mStatus = Status.FINISHED;
return;
}
InputStream inStream = null;
RandomAccessFile file = null;
try {
URL downUrl = new URL(url);
HttpURLConnection http = (HttpURLConnection) downUrl
.openConnection();
http.setConnectTimeout(5 * 1000);
//Use Get method
http.setRequestMethod("GET");
//Accept all format of data.
http.setRequestProperty("Accept", "*/*");
http.setRequestProperty("Charset", "UTF-8"); //Data block to download.
http.setRequestProperty("Range", "bytes=" + rangeStart + "-");
http.setRequestProperty("User-Agent", "Client/4.0");
http.setRequestProperty("Connection", "Keep-Alive");
http.connect();
if (http.getResponseCode() != HttpStatus.SC_OK
&& http.getResponseCode() != HttpStatus.SC_PARTIAL_CONTENT) {
throw new IllegalAccessException("Invalid request: "
+ http.getResponseCode());
}
if (mSize <= 0) {
long total = getContentLen(http); if (total <= 0) {
throw new IllegalAccessException("Invalid content-length: "
+ total);
}
mSize = total;
}
mStatus = Status.DOWNLOADING;
inStream = http.getInputStream();
byte[] buffer = new byte[BUFFER_SIZE];
File tmp=new File(path+".tmp");
file = new RandomAccessFile(tmp, "rwd");
file.setLength(mSize);
file.seek(rangeStart);
int offset = 0;
mCurrentBytes = rangeStart;
while (true) {
if (mTerminate) {
mStatus = Status.PAUSED_MANUALLY;
break;
}
if ((offset = inStream.read(buffer)) != -1) {
file.write(buffer, 0, offset);
mCurrentBytes += offset;
} else {
break;
}
} file.close();
file = null;
inStream.close();
inStream = null;
if (mSize == mCurrentBytes) {
// Rename
mStatus = Status.FINISHED;
File f = new File(path);
tmp.renameTo(f);
} } catch (Exception e) {
throw e;
} finally {
if (inStream != null) {
try {
inStream.close();
} catch (Exception e2) {
// TODO: handle exception
}
}
if (file != null) {
try {
file.close();
} catch (Exception e2) {
// TODO: handle exception
}
}
}
} @Override
public void run() {
if (getUrl() != null && getPath() != null) {
if (!mTerminate) {
try {
download(getUrl(), getPath(), mStart);
} catch (Exception e) {
e.printStackTrace();
mStatus = Status.ERROR;
}
}
} else {
mStatus = Status.ERROR;
}
mRunning = false;
} private long getContentLen(HttpURLConnection conn) throws Exception {
long len = conn.getContentLength();
if (len <= 0) {
try {
len = Long.parseLong(conn.getHeaderField("Content-Length"));
} catch (Exception e) {
// TODO: handle exception
} }
if (len <= 0) {
//Try to calculate size from 'Range' field.
String range = conn.getHeaderField("Range");
if (range != null) {
String[] array = range.replace("bytes=", "").split("-");
if (array.length == 2) {
len = Long.parseLong(array[1]) - Long.parseLong(array[0]);
}
}
}
return len;
}
}

更多代码详情请参考:TransferLibrary——一个Android文件传输库,主要实现基于Http的文件上传和下载,简单方便,支持多任务下载,断点续传等等,欢迎小伙伴们使用交流:D

基于HTTP协议的下载功能实现的更多相关文章

  1. Android之基于HTTP协议的下载

    Android之基于HTTP协议的下载 http://www.blogjava.net/zh-weir/archive/2010/05/02/319892.html http://www.qianfa ...

  2. Android之基于HTTP协议的通信详解

    Android系统中本身是有下载机制的,比如浏览器使用的DownloadManager.可遗憾的是,DownloadManager只提供给浏览器使用,一般的应用程序没法调用它. 另外,如果下载调用频繁 ...

  3. RPC基于http协议通过netty支持文件上传下载

    本人在中间件研发组(主要开发RPC),近期遇到一个需求:RPC基于http协议通过netty支持文件上传下载 经过一系列的资料查找学习,终于实现了该功能 通过netty实现文件上传下载,主要在编解码时 ...

  4. 转:【专题十一】实现一个基于FTP协议的程序——文件上传下载器

    引言: 在这个专题将为大家揭开下FTP这个协议的面纱,其实学习知识和生活中的例子都是很相通的,就拿这个专题来说,要了解FTP协议然后根据FTP协议实现一个文件下载器,就和和追MM是差不多的过程的,相信 ...

  5. 实现基于NTP协议的网络校时功能

    无论PC端还是移动端系统都自带时间同步功能,基于的都是NTP协议,这里使用C#来实现基于NTP协议的网络校时功能(也就是实现时间同步). 1.NTP原理 NTP[Network Time Protoc ...

  6. 专题十一:实现一个基于FTP协议的程序——文件上传下载器

    引言: 在这个专题将为大家揭开下FTP这个协议的面纱,其实学习知识和生活中的例子都是很相通的,就拿这个专题来说,要了解FTP协议然后根据FTP协议实现一个文件下载器,就和和追MM是差不多的过程的,相信 ...

  7. 基于HTTP协议下载文件的实现

    最近在开发文件下载的程序,该程序是基于HTTP开发的. 首先是了解了文件传输到客户端的大概格式,然后分析该格式,实现写入文件的功能. 自己构造的HTTP包如下: GET /*********.rar ...

  8. 用c++开发基于tcp协议的文件上传功能

    用c++开发基于tcp协议的文件上传功能 2005我正在一家游戏公司做程序员,当时一直在看<Windows网络编程> 这本书,把里面提到的每种IO模型都试了一次,强烈推荐学习网络编程的同学 ...

  9. Android消息推送(二)--基于MQTT协议实现的推送功能

    国内的Android设备,不能稳定的使用Google GCM(Google Cloud Messageing)消息推送服务. 1. 国内的Android设备,基本上从操作系统底层开始就去掉了Googl ...

随机推荐

  1. 读《Java并发编程的艺术》(二)

    上篇博客开始,我们接触了一些有关Java多线程的基本概念.这篇博客开始,我们就正式的进入了Java多线程的实战演练了.实战演练不仅仅是贴代码,也会涉及到相关概念和术语的讲解. 线程的状态 程的状态分为 ...

  2. 作为.net程序员学jsp,伤不起

    <%@page import="java.sql.*"%> <%@ page language="java" import="jav ...

  3. 《高性能javascript》 --- in case of odd number of items(奇怪的条目的数量)

    不知道是做着故意放的还是什么原因.总之运行后就会出现问题(奇怪的条目的数量) function merge(left, right){ var result = []; while (left.len ...

  4. Reverse Integer 2015年6月23日

    题目: Reverse digits of an integer. Example1: x = , return Example2: x = -, return - 思路:递归 解答: / test ...

  5. 利用shell脚本监控目录内文件改动

    #! /bin/bash webroot="/home/www/" cp /dev/null rsync_file if [ ! -f   file.md5 ];then      ...

  6. Nginx教程(三) Nginx日志管理

    Nginx教程(三) Nginx日志管理 1 日志管理 1.1 Nginx日志描述 通过访问日志,你可以得到用户地域来源.跳转来源.使用终端.某个URL访问量等相关信息:通过错误日志,你可以得到系统某 ...

  7. BattleInfo

    private Dictionary<string, UILabel> mLabels; private Dictionary<string,UISprite> mSprite ...

  8. G1收集器-原创译文[未完成]

    G1收集器-原创译文 原文地址 Getting Started with the G1 Garbage Collector 目的 本文介绍了如何使用G1垃圾收集器以及如何与Hotspot JVM一起使 ...

  9. SPFA求单源最短路径

    序 求最短路径的算法有很多,各有优劣. 比如Dijkstra(及其堆(STL-priority_queue)优化),但是无法处理负环的情况: 比如O(n^3)的Floyd算法:比如Bellman-Fo ...

  10. 你知道“移动端车牌识别”可以嵌入到PDA中应用吗?

    一.移动端车牌识别产品描述 移动端车牌识别软件是基于移动平台的OCR识别应用程序,支持Android/IOS等多种主流移动操作系统.该产品只需通过智能手机或Pad的摄像头对准车牌,无需拍照,实现自动采 ...