【转】【JAVA应用】多线程断点下载
【转自】
光仔December
问题:多线程下载的好处?
多线程下载比单线程下载快,主要的原因是采用多线程下载,可以抢占更多的服务器资源。抢占Cpu的处理空间,实现更快的下载速度
问题:多线程下载位置的确定?
开启N条线程下载文件,假设文件大小为buf,那么每条线程的下载量为:
buf%N==0?buf/N:buf/N+1;
那么,每一条线程应该从网络文件的什么位置开始下载??
假设线程id号threadid为0,1,2,每一条线程下载的数据量为block=4
第一个文件从threadid*block开始下载,结束位置(threadid+1)*block-1
所以公式为:
int start=threadid*block;
int end=(threadid+1)*block-1;
多线程下载源码(仅供参考)
- package cn.deu.hpu.download;
- import java.io.File;
- import java.io.InputStream;
- import java.io.RandomAccessFile;
- import java.net.HttpURLConnection;
- import java.net.URL;
- public class MulThreadDownLoad {
- public static void main(String[] args) throws Exception{
- String path="http://192.168.111.104:8080/web/gg.jpg";
- new MulThreadDownLoad().download(path,3);
- }
- /*下载文件
- * path 网络文件路径
- * */
- public void download(String path,int threadsize)throws Exception{
- URL url=new URL(path);
- HttpURLConnection conn=(HttpURLConnection) url.openConnection();
- conn.setConnectTimeout(5000);
- conn.setRequestMethod("GET");
- if(conn.getResponseCode()==200){
- //取得网络文件的长度
- int length=conn.getContentLength();
- File file=new File(getFilename(path));
- //随机访问文件类(生成一个与网络文件长度相等的本地文件)
- RandomAccessFile accessFile=new RandomAccessFile(file, "rwd");
- accessFile.setLength(length);
- accessFile.close();
- //计算每条线程需要下载的数据量
- int block=length%threadsize==0?length/threadsize:length/threadsize+1;
- for (int threadid = 0; threadid< threadsize; threadid++) {
- new DownloadThread(threadid,block,url,file).start();
- }
- }else{
- System.out.println("下载失败!");
- }
- }
- private String getFilename(String path) {
- //从URL地址的最后一个"/"后开始记录文件名
- return path.substring(path.lastIndexOf("/")+1);
- }
- private class DownloadThread extends Thread{
- private int threadid;
- private int block;
- private URL url;
- private File file;
- public DownloadThread(int threadid,int block,URL url,File file){
- this.threadid=threadid;
- this.block=block;
- this.url=url;
- this.file=file;
- }
- public void run(){
- //计算该线程从网络文件的什么位置开始下载
- int start=threadid*block;
- //下载到网络文件的什么位置结束
- int end=(threadid+1)*block-1;
- try {
- RandomAccessFile accessFile = new RandomAccessFile(file, "rwd");
- //从某一个位置开始写入数据
- accessFile.seek(start);
- HttpURLConnection conn=(HttpURLConnection) url.openConnection();
- conn.setConnectTimeout(5000);
- conn.setRequestMethod("GET");
- //指定行网络文件的某个区域下载数据(开始位置-结束位置)
- conn.setRequestProperty("Range", "bytes="+start+"-"+end);
- //请求某一段数据的话,请求码不是200,是206
- if(conn.getResponseCode()==206){
- InputStream instream=conn.getInputStream();
- byte [] buffer=new byte[1024];
- int len=0;
- while((len=instream.read(buffer))!=-1){
- accessFile.write(buffer,0,len);
- }
- accessFile.close();
- instream.close();
- }
- System.out.println("第"+(threadid+1)+"线程已经下载完成");
- } catch (Exception e) {
- e.printStackTrace();
- }
- }
- }
- }
package cn.deu.hpu.download; import java.io.File;
import java.io.InputStream;
import java.io.RandomAccessFile;
import java.net.HttpURLConnection;
import java.net.URL; public class MulThreadDownLoad { public static void main(String[] args) throws Exception{
String path="http://192.168.111.104:8080/web/gg.jpg";
new MulThreadDownLoad().download(path,3);
} /*下载文件
* path 网络文件路径
* */
public void download(String path,int threadsize)throws Exception{
URL url=new URL(path);
HttpURLConnection conn=(HttpURLConnection) url.openConnection();
conn.setConnectTimeout(5000);
conn.setRequestMethod("GET");
if(conn.getResponseCode()==200){
//取得网络文件的长度
int length=conn.getContentLength();
File file=new File(getFilename(path));
//随机访问文件类(生成一个与网络文件长度相等的本地文件)
RandomAccessFile accessFile=new RandomAccessFile(file, "rwd");
accessFile.setLength(length);
accessFile.close(); //计算每条线程需要下载的数据量
int block=length%threadsize==0?length/threadsize:length/threadsize+1;
for (int threadid = 0; threadid< threadsize; threadid++) {
new DownloadThread(threadid,block,url,file).start();
}
}else{
System.out.println("下载失败!");
} } private String getFilename(String path) {
//从URL地址的最后一个"/"后开始记录文件名
return path.substring(path.lastIndexOf("/")+1);
} private class DownloadThread extends Thread{
private int threadid;
private int block;
private URL url;
private File file;
public DownloadThread(int threadid,int block,URL url,File file){
this.threadid=threadid;
this.block=block;
this.url=url;
this.file=file;
} public void run(){
//计算该线程从网络文件的什么位置开始下载
int start=threadid*block;
//下载到网络文件的什么位置结束
int end=(threadid+1)*block-1;
try {
RandomAccessFile accessFile = new RandomAccessFile(file, "rwd");
//从某一个位置开始写入数据
accessFile.seek(start);
HttpURLConnection conn=(HttpURLConnection) url.openConnection();
conn.setConnectTimeout(5000);
conn.setRequestMethod("GET");
//指定行网络文件的某个区域下载数据(开始位置-结束位置)
conn.setRequestProperty("Range", "bytes="+start+"-"+end);
//请求某一段数据的话,请求码不是200,是206
if(conn.getResponseCode()==206){
InputStream instream=conn.getInputStream();
byte [] buffer=new byte[1024];
int len=0;
while((len=instream.read(buffer))!=-1){
accessFile.write(buffer,0,len);
}
accessFile.close();
instream.close();
}
System.out.println("第"+(threadid+1)+"线程已经下载完成");
} catch (Exception e) {
e.printStackTrace();
}
}
}
}
转载请注明出处!程序猿之洞:http://blog.csdn.net/acmman
【转】【JAVA应用】多线程断点下载的更多相关文章
- Java实现多线程断点下载(下载过程中可以暂停)
线程可以理解为下载的通道,一个线程就是一个文件的下载通道,多线程也就是同时开启好几个下载通道.当服务器提供下载服务时,使用下载者是共享带宽的,在优先级相同的情况下,总服务器会对总下载线程进行平均分配. ...
- Java之多线程断点下载的实现
RandomAccessFile类: 此类的实例支持对随机訪问文件的读取和写入.随机訪问文件的行为相似存储在文件系统中的一个大型 byte 数组. 存在指向该隐含数组.光标或索引,称为文件指针.输入操 ...
- Android(java)学习笔记216:多线程断点下载的原理(Android实现)
之前在Android(java)学习笔记215中,我们从JavaSE的角度去实现了多线程断点下载,下面从Android角度实现这个断点下载: 1.新建一个Android工程: (1)其中我们先实现布局 ...
- Android(java)学习笔记159:多线程断点下载的原理(Android实现)
之前在Android(java)学习笔记215中,我们从JavaSE的角度去实现了多线程断点下载,下面从Android角度实现这个断点下载: 1. 新建一个Android工程: (1)其中我们先实现布 ...
- java多线程断点下载原理(代码实例演示)
原文:http://www.open-open.com/lib/view/open1423214229232.html 其实多线程断点下载原理,很简单的,那么我们就来先了解下,如何实现多线程的断点下载 ...
- andoid 多线程断点下载
本示例介绍在Android平台下通过HTTP协议实现断点续传下载. 我们编写的是Andorid的HTTP协议多线程断点下载应用程序.直接使用单线程下载HTTP文件对我们来说是一件非常简单的事.那么,多 ...
- 我的Android进阶之旅------>Android基于HTTP协议的多线程断点下载器的实现
一.首先写这篇文章之前,要了解实现该Android多线程断点下载器的几个知识点 1.多线程下载的原理,如下图所示 注意:由于Android移动设备和PC机的处理器还是不能相比,所以开辟的子线程建议不要 ...
- iOS开发网络篇—大文件的多线程断点下载
http://www.cnblogs.com/wendingding/p/3947550.html iOS开发网络篇—多线程断点下载 说明:本文介绍多线程断点下载.项目中使用了苹果自带的类,实现了同时 ...
- iOS开发网络请求——大文件的多线程断点下载
iOS开发中网络请求技术已经是移动app必备技术,而网络中文件传输就是其中重点了.网络文件传输对移动客户端而言主要分为文件的上传和下载.作为开发者从技术角度会将文件分为小文件和大文件.小文件因为文件大 ...
- iOS开发网络篇—大文件的多线程断点下载(转)
http://www.cnblogs.com/wendingding/p/3947550.html iOS开发网络篇—多线程断点下载 说明:本文介绍多线程断点下载.项目中使用了苹果自带的类,实现了 ...
随机推荐
- Centos 7.0 execute yum update ——File "/usr/libexec/urlgrabber-ext-down", line 75, in <module> 解决方式
[打开这个文件:/usr/lib/python2.7/site-packages/urlgrabber/grabber.py找到elif errcode in (42, 55,56) 用 eli ...
- [ACdream]小晴天老师系列——竖式乘
题目链接:http://acdream.info/contest?cid=1269#problem-C Problem Description 小晴天是ACdream团队中最牛的老师之一,他最擅长数学 ...
- jstl 处理Date 时间
1.引入 <%@ taglib prefix="fmt" uri="http://java.sun.com/jsp/jstl/fmt" %> < ...
- iOS 之 protocol的相关问题
定义一个协议, 一个协议可以扩展子另一个协议 如果需要扩展多个协议中间使用逗号分隔 //定义一个协议 @protocol AnimalDelegate <NSObject, ***> @r ...
- HDU1166 敌兵布阵(线段树)
C国的死对头A国这段时间正在进行军事演习,所以C国间谍头子Derek和他手下Tidy又开始忙乎了.A国在海岸线沿直线布置了N个工兵营地,Derek和Tidy的任务就是要监视这些工兵营地的活动情况.由于 ...
- Dragon Balls
Dragon Balls Time Limit: 2000/1000 MS (Java/Others) Memory Limit: 32768/32768 K (Java/Others) Total ...
- awk详解 数组
第1章 awk命令基础 1.1 awk命令执行过程 1.如果BEGIN 区块存在,awk执行它指定的动作. 2.awk从输入文件中读取一行,称为一条输入记录.如果输入文件省略,将从标准输入读取 3.a ...
- Node闲谈之Buffer
在刚接触Nodejs的时候,有些概念总让学前端的我感到困惑(虽然大学的时候也是在搞后端,世界上最好的语言,you know).我可以很快理解File System,Path等带有明显功能的模块,却一下 ...
- 【MFC】基于OpenCV的魔镜
最近半个月事情太多了,参加了泰迪杯数据挖掘,参加学院的科技节,科技节里面总共我参加了数学建模.PS.软件设计制作.电子设计大赛这4个.还有期中考.英语论文作业.今天终于忙的差不多,有时间来总结一下前段 ...
- 常用的Python代码段
过滤列表 #filter out empty strings in a sting list list = [x for x in list if x.strip()!=''] 一行一行地读文件 wi ...