使用webuploader组件实现大文件分片上传，断点续传

本人在2010年时使用swfupload为核心进行文件的批量上传的解决方案。见文章：WEB版一次选择多个文件进行批量上传(swfupload)的解决方案。

本人在2013年时使用plupload为核心进行文件的批量上传的解决方案。见文章：WEB版一次选择多个文件进行批量上传(Plupload)的解决方案

最近在学习百度的开源上传组件WebUploader，写了一些示例以记录。WebUploader的缺点是没有一个比较好的现成的界面，这个界面需要自己去实现。自由度高了一些。

WebUploader是由Baidu WebFE(FEX)团队开发的一个简单的以HTML5为主，FLASH为辅的现代文件上传组件。在现代的浏览器里面能充分发挥HTML5的优势，同时又不摒弃主流IE浏览器，沿用原来的FLASH运行时，兼容IE6+，iOS 6+, android 4+。两套运行时，同样的调用方式，可供用户任意选用。浏览器支持ie6,ie7,ie8,ie9,ie10,ie11,firefox,chrome,edge。支持全平台操作系统：Windows,Mac,Linux支持文件夹上传下载，文件批量上传下载，层级目录保存。

关于WebUploader的功能说明：

大文件上传续传

支持超大文件上传(100G+)和续传，可以关闭浏览器，重启系统后仍然继续上传。
开源
提供ASP.NET,JSP,PHP示例和源代码，其中JSP提供MySQL,Oracle,SQL Server数据库的配置和示例代码。

分片、并发

分片与并发结合，将一个大文件分割成多块，并发上传，极大地提高大文件的上传速度。

当网络问题导致传输错误时，只需要重传出错分片，而不是整个文件。另外分片传输能够更加实时的跟踪上传进度。

预览、压缩

支持常用图片格式jpg,jpeg,gif,bmp,png预览与压缩，节省网络数据传输。

解析jpeg中的meta信息，对于各种orientation做了正确的处理，同时压缩后上传保留图片的所有原始meta数据。

多途径添加文件

支持文件多选，类型过滤，拖拽(文件&文件夹)，图片粘贴功能。上传本地指定路径的文件，不需要通过点击按钮选择文件。

粘贴功能主要体现在当有图片数据在剪切板中时（截屏工具如QQ(Ctrl + ALT + A), 网页中右击图片点击复制），Ctrl + V便可添加此图片文件。

HTML5 & FLASH

兼容主流浏览器和低版本浏览器，接口一致，实现了两套运行时支持，用户无需关心内部用了什么内核。而且支持IE6，IE8浏览器。

同时Flash部分没有做任何UI相关的工作，方便不关心flash的用户扩展和自定义业务需求。

基于内存映射模式进行IO操作，充分发挥操作系统性能。
MD5秒传

当文件体积大、量比较多时，支持上传前做文件md5值验证，一致则可直接跳过。

如果服务端与前端统一修改算法，取段md5，可大大提升验证性能，耗时在20ms左右。

易扩展、可拆分

采用可拆分机制, 将各个功能独立成了小组件，可自由搭配。

采用AMD规范组织代码，清晰明了，方便高级玩家扩展。

文件夹上传

支持10万+级别的文件夹上传，续传。

支持层级目录结构保存，上传后能够将数据库层级信息保存在数据库中。
提供MySQL,Oracle,SQL Server数据库支持。

支持文件夹续传，在浏览器刷新，重启后仍然能够继续上传。

支持跨域上传。

PC端全平台支持
支持Windows,macOS,Linux。支持国产化操作系统，支持政务信息安全项目。
其中Windows支持低版本系统：Windows XP。
其中浏览器包括：IE6,IE7,IE8(x86,x64),IE9(x86,x64),IE10(x86,x64),IE11(x86,x64),360安全浏览器,360极速浏览器,QQ浏览器,搜狗浏览器,Maxthon(遨游)浏览器1.X,Maxthon(傲游)浏览器2.x,Firefox,Chrome,Opera 23+

一：下面就是利用WebUploader组件，让客户一次选择多个文件，然后将选择的文件上传到服务器的批量文件解决方案。

让我们先来看看客户端的界面效果图。（多选文件，批量上传，上传进度显示）

1) 显示界面：

图1

2) 进行多文件选择：

图2

3) 上传进度显示

图3

图4

说明：见上图WebUploader默认是3个线程一起并发上传文件。如果需要增加并发数，或是减少并发数。可以修改threads属性，这个属性就是允许的最大上传并发数。

3) 上传成功显示

图5

二：具体的代码与操作步骤：

第一步，要完成下面的示例，必须先准备好WebUploader组件。

1) WebUploader:大家可以访问WebUploader官方网站：http://www.webuploader.net，在这个网站上可以下载到组件与demo。

第二步，这个示例的目录结构如图：

1.主要目录结构

2. 此示例中用到的js脚本文件与css文件。

第三步，前台部分准备客户操作的WEB界面，如下[WebUploaderFileByBaidu2.aspx、UploaderFileByBaidu.ashx]

1) 前台客户端代码，其中WebUploaderFileByBaidu2.aspx的代码如下，WebUploaderFileByBaidu2.aspx.cs文件中只使用默认的代码，不用添加任何代码。

Html代码

<%@ Page Language="C#" AutoEventWireup="true" CodeBehind="WebUploaderFileByBaidu2.aspx.cs" Inherits="WebApplication1.WebUploaderFileByBaidu2" %><!DOCTYPE html><html xmlns="http://www.w3.org/1999/xhtml"><head runat="server"><metahttp-equiv="Content-Type" content="text/html; charset=utf-8"/>

<title>WebUploader文件上传示例</title>

var applicationPath = window.applicationPath === "" ? "" : window.applicationPath || "../../";

// 文件上传 jQuery(function () {

var $ = jQuery,

$list = $('#fileList'),

$btn = $('#ctlBtn'),

state = 'pending',

uploader;

uploader = WebUploader.create({

// 不压缩image

resize: false,

// swf文件路径

swf: applicationPath + 'Script/webuploader/Uploader.swf',

// 文件接收服务端。

server: 'UploaderFileByBaidu.ashx',

// 选择文件的按钮。可选。

// 内部根据当前运行是创建，可能是input元素，也可能是flash.

pick: '#picker'

});

// 当有文件添加进来的时候

uploader.on('fileQueued', function (file) {

$list.append('<div id="' + file.id + '" class="item">' +

'<h4 class="info">' + file.name + '</h4>' +

'<p class="state">等待上传...</p>' +

'</div>');

});

// 文件上传过程中创建进度条实时显示。

uploader.on('uploadProgress', function (file, percentage) {

var $li = $('#' + file.id),

$percent = $li.find('.progress .progress-bar');

// 避免重复创建

if (!$percent.length) {

$percent = $('<div class="progress progress-striped active">' +

'<div class="progress-bar" role="progressbar" style="width: 0%">' +

'</div>' +

'</div>').appendTo($li).find('.progress-bar');

}

$li.find('p.state').text('上传中');

$percent.css('width', percentage * 100 + '%');

});

uploader.on('uploadSuccess', function (file) {

$('#' + file.id).find('p.state').text('已上传');

});

uploader.on('uploadError', function (file) {

$('#' + file.id).find('p.state').text('上传出错');

});

uploader.on('uploadComplete', function (file) {

$('#' + file.id).find('.progress').fadeOut();

});

uploader.on('all', function (type) {

if (type === 'startUpload') {

state = 'uploading';

} else if (type === 'stopUpload') {

state = 'paused';

} else if (type === 'uploadFinished') {

state = 'done';

}

if (state === 'uploading') {

$btn.text('暂停上传');

} else {

$btn.text('开始上传');

}

});

$btn.on('click', function () {

if (state === 'uploading') {

uploader.stop();

} else {

uploader.upload();

}

});

</script></head>

<body>

<div class="row">文件上传示例：</div>

</div>

</div>

</div>

<div>

</div>

</body></html>

以上代码最后的显示结果如下图:

图8.

2) 接收前端用户上传的文件，并把文件保存到指定目录中。UploaderFileByBaidu.ashx文件中使用默认的代码，不需要添加任何代码。UploaderFileByBaidu.ashx.cs文件的代码如下：

using System;using System.Collections.Generic;using System.IO;using System.Linq;using System.Text;using System.Web;namespace WebApplication1

{

/// <summary>

/// UploaderFileByBaidu 的摘要说明

///</summary>

public class UploaderFileByBaidu : IHttpHandler

{

public void ProcessRequest(HttpContext context)

{

context.Response.ContentEncoding = Encoding.UTF8;

if (context.Request["REQUEST_METHOD"] == "OPTIONS")

{

context.Response.End();

}

SaveFile();

}

/// <summary>

///文件保存操作

///</summary>

/// <param name="basePath"></param>

private void SaveFile(string basePath = "~/Upload/Images/")

{

basePath = FileHelper.GetUploadPath();

string Datedir = DateTime.Now.ToString("yy-MM-dd");

string updir = basePath + "\\" + Datedir;

string extname = string.Empty;

string fullname = string.Empty;

string filename = string.Empty;

HttpFileCollection files = System.Web.HttpContext.Current.Request.Files;

if (files.Count == 0)

{

var result = "{\"jsonrpc\" : \"2.0\", \"error\" : \"保存失败\",\"id\" : \"id\"}";

System.Web.HttpContext.Current.Response.Write(result);

}

if (!Directory.Exists(updir))

Directory.CreateDirectory(updir);

var suffix = files[0].ContentType.Split('/');

var _suffix = suffix[1].Equals("jpeg", StringComparison.CurrentCultureIgnoreCase) ? "" : suffix[1];

var _temp = System.Web.HttpContext.Current.Request["name"];

if (!string.IsNullOrEmpty(_temp))

{

filename = _temp;

}

else

{

Random rand = new Random(24 * (int)DateTime.Now.Ticks);

filename = rand.Next() + "." + _suffix;

}

fullname = string.Format("{0}\\{1}",updir , filename);

files[0].SaveAs(fullname);

var _result = "{\"jsonrpc\" : \"2.0\", \"result\" : null, \"id\" : \"" + filename + "\"}";

System.Web.HttpContext.Current.Response.Write(_result);

}

public bool IsReusable

{

get

{

return false;

}

第四步：文件辅助类

/// <summary>///FileHelper 的摘要说明/// </summary>public class FileHelper

{

public FileHelper()

{

//TODO: 在此处添加构造函数逻辑

// }

/// <summary>

///获取上传目录

/// </summary>

/// <returns></returns>

public static string GetUploadPath()

{

string path = HttpContext.Current.Server.MapPath("~/");

string dirname = GetDirName();

string uploadDir = path + "\\" + dirname;

CreateDir(uploadDir);

return uploadDir;

}

/// <summary>

///获取临时目录

/// </summary>

/// <returns></returns>

public static string GetTempPath()

{

string path = HttpContext.Current.Server.MapPath("~/");

string dirname = GetTempDirName();

string uploadDir = path + "\\" + dirname;

CreateDir(uploadDir);

return uploadDir;

}

private static string GetDirName()

{

return System.Configuration.ConfigurationManager.AppSettings["uploaddir"];

}

private static string GetTempDirName()

{

return System.Configuration.ConfigurationManager.AppSettings["tempdir"];

}

public static void CreateDir(string path)

{

if (!System.IO.Directory.Exists(path))

{

System.IO.Directory.CreateDirectory(path);

}

第五步，Web.config文件配置信息。

<?xml version="1.0" encoding="utf-8"?><configuration>

</configSections>

</appSettings>

<system.web>

</system.web>

<system.webServer>

</requestFiltering>

</security>

</system.webServer></configuration>

第六步，在进行上传之后，文件保存在对应的日期目录下。如下图。

图 9

后端代码逻辑大部分是相同的，目前能够支持MySQL,Oracle,SQL。在使用前需要配置一下数据库，可以参考我写的这篇文章：http://blog.ncmem.com/wordpress/2019/08/09/web%E5%A4%A7%E6%96%87%E4%BB%B6%E4%B8%8A%E4%BC%A0%E8%A7%A3%E5%86%B3%E6%96%B9%E6%A1%88/

使用webuploader组件实现大文件分片上传，断点续传的更多相关文章

PHP大文件分片上传断点续传实例源码
1.使用PHP的创始人 Rasmus Lerdorf 写的APC扩展模块来实现(http://pecl.php.net/package/apc) APC实现方法: 安装APC,参照官方文档安装,可以使 ...
在React中使用WebUploader实现大文件分片上传的踩坑日记！
前段时间公司项目有个大文件分片上传的需求,项目是用React写的,大文件分片上传这个功能使用了WebUploader这个组件. 具体交互是: 1. 点击上传文件button后出现弹窗,弹窗内有选择文件 ...
Webuploader 大文件分片上传
百度Webuploader 大文件分片上传(.net接收) 前阵子要做个大文件上传的功能,找来找去发现Webuploader还不错,关于她的介绍我就不再赘述. 动手前,在园子里找到了一篇不错的分片 ...
thinkphp+webuploader实现大文件分片上传
大文件分片上传,简单来说就是把大文件切分为小文件,然后再一个一个的上传,到最后由这些小文件再合并成原来的文件 webuploader下载地址及其文档:http://fex.baidu.com/webu ...
nodeJs + js 大文件分片上传
简单的文件上传一.准备文件上传的条件: 1.安装nodejs环境 2.安装vue环境 3.验证环境是否安装成功二.实现上传步骤 1.前端部分使用 vue-cli 脚手架,搭建一个 demo 版本, ...
java springboot 大文件分片上传处理
参考自:https://blog.csdn.net/u014150463/article/details/74044467 这里只写后端的代码,基本的思想就是,前端将文件分片,然后每次访问上传接口的时 ...
vue+大文件分片上传
最近公司在使用vue做工程项目,实现大文件分片上传. 网上找了一天,发现网上很多代码都存在很多问题,最后终于找到了一个符合要求的项目. 工程如下: 对项目的大文件上传功能做出分析,怎么实现大文件分片上 ...
iOS大文件分片上传和断点续传
总结一下大文件分片上传和断点续传的问题.因为文件过大(比如1G以上),必须要考虑上传过程网络中断的情况.http的网络请求中本身就已经具备了分片上传功能,当传输的文件比较大时,http协议自动会将文件 ...
js实现大文件分片上传的方法
借助js的Blob对象FormData对象可以实现大文件分片上传的功能,关于Blob和FormData的具体使用方法可以到如下地址去查看FormData 对象的使用Blob 对象的使用以下是实现代码, ...

随机推荐

CF-Div.3-B. Minimize the Permutation【模拟·需要清醒的脑子】
题目传送门根据字典序,是个人都会想到依次把目前最小的数尽量往前面移动,直到它不能再往前移动,或者已经到了它的期望位置(就是排列的那个位置比如$i$就应该在位置$i$)为止. 所以我刚开始是这么写的 ...
拉格朗日乘法与KKT条件
问题的引出给定一个函数$f$,以及一堆约束函数$g_1,g_2,...,g_m$和$h_1,h_2,...,h_l$.带约束的优化问题可以表示为 \[ \min_{X \in R^n}f ...
Thread 线程 1
Thread 常用方法: String getName() 返回该线程的名称. void setName(String name) 改变线程名称,使之与参数 name 相同. int getPrior ...
jq each遍历数组或对象
var arr = ["北京","上海","天津","重庆","河北","河南" ...
Spring Boot嵌入式的Servlet容器
一.查看SpringBoot默认的嵌入式Servlet容器(默认使用的是tomcat) 在IDEA的项目的pom文件中按Ctrl + shift + Alt + U可以打开SpringBoot依赖的图 ...
TFS 由于服务器时钟设置可能不正确，无法更新数据。请与 Team Foundation Server 管理员联系。
原因:这个问题是由于修改安装TFS服务器的系统时间而导致的,因为TFS的Source Control会根据签入时间做判断,如果后续签入的时间小于变更集的最新版本的时间,就会报这个错误解决办法:首先将 ...
Redis入门部署及持久化
软件简介软件说明 Redis是一款开源的,ANSI C语言编写的,高级键值(key-value)缓存和支持永久存储NoSQL数据库产品. Redis采用内存(In-Memory)数据集(DataSe ...
php 克隆 __clone
php 克隆 clone 在实际编程过程中,我们常常要遇到这种情况:有一个对象A,在某一时刻A中已经包含了一些有效值,此时可能会需要一个和A完全相同新对象B,并且此后对B任何改动都不会影响到A中的值, ...
微信小程序自定义字体及自定义图标问题说明
自定义图标及自定义字体,一直是很多小程序开发者的心病,其实本站是很多解决方案的,为了集中起来,方便直接跳过此坑,我特别做了这次针对字体及字体图标的跳坑: 相关文章:微信小程序添加并使用外部字体(成功添 ...
fork树
i son/pa ppid pid fpid parent parent parent child child parent child parent parent child child child ...

使用webuploader组件实现大文件分片上传，断点续传

使用webuploader组件实现大文件分片上传，断点续传的更多相关文章

随机推荐

热门专题